Pular para o conteúdo
IA Seenup, página inicial

Notícias de IA em português,
várias vezes por dia

Ferramentas

Simulon coloca personagens de IA dentro da sua sala, pela câmera do celular

Segundo @TheoreticallyMedia, o app Simulon transforma um personagem em ativo 3D, posiciona no ambiente real e gera vídeos em que ele reage ao que acontece em volta.

Em 3 pontos

  1. O Simulon transforma a imagem de um personagem em um modelo 3D que você posiciona no ambiente pelo celular.
  2. O vídeo é gerado depois, usando a sua câmera e o seu cenário reais.
  3. Os personagens reagem ao que você faz e diz durante a gravação.

Redação IA Seenup · via @TheoreticallyMedia

3 min de leitura

Vídeo de @TheoreticallyMediaAssistir no YouTube

Em números

  • 100créditos iniciais no plano grátis
  • US$ 14,99plano Plus por mês
  • US$ 39,99plano Pro por mês

Segundo @TheoreticallyMedia, no vídeo “AI Video Just Stepped Into the Real World!”, o app Simulon, que o criador já tinha coberto em 2023, voltou com uma ideia nova: colocar personagens criados por IA no seu espaço real, usando a câmera do celular.

O que o vídeo mostra

O criador explica o funcionamento. Você envia uma imagem de referência de um personagem, e o app a transforma em um modelo 3D. Depois, pela câmera do celular, dá para posicionar, ampliar e girar o personagem em qualquer lugar do ambiente. Em seguida, o app gera o vídeo. Nada acontece em tempo real ainda: ou você descreve a ação desejada, ou filma seu movimento de câmera e deixa o app processar.

Nos testes, ele coloca sua personagem “Flamethrower Girl” em tamanho real em um bar do estúdio, depois em miniatura sobre a mesa. Para ele, o ponto forte é que o movimento de câmera e o cenário são os dele, sem o app inventar o lugar, como fazem os chamados modelos de mundo. Ele cita como prova uma bola no canto que realmente existe na sala.

Ilustração gerada por IA

Principais pontos

  • Vários personagens: ele coloca o pirata Renfield e a Flamethrower Girl para jogar tênis em uma quadra perto de casa. O resultado ficou esquisito, mas, na avaliação dele, escala e posição no local se mantiveram consistentes. Em outro teste, ela passeia com um tigre da biblioteca do app, e os dois interagem sem que ele tenha pedido.
  • Reação ao mundo real: a função, chamada de “Reality-Aware Rendering”, faz os personagens responderem ao que o usuário faz e diz durante a gravação. Ele cutuca o tigre e a miniatura com o dedo, vê um robô gigante atacar o gato da casa (que ignora tudo) e conversa com Renfield como se fosse um barman.
  • Limitações: às vezes o modelo de vídeo “sai do trilho”, e surgem elementos que não existem, como um recorte atrás do barman. Ele também comenta que girar o personagem com dois dedos pode ser meio chato no início.
  • É só “referência para vídeo”? Em boa parte, sim, admite ele. Daria para filmar com o celular e usar os personagens como referência em outra ferramenta. Ele chuta, com cerca de 90% de confiança, que por trás há um modelo parecido com o Minimax. O diferencial, para ele, é posicionar os personagens como em um set de filmagem.
  • Futuro: segundo o Simulon, virão vozes e personalidades atribuíveis a cada personagem. Em um vídeo da própria empresa, um personagem obedece a comandos falados e reage a uma lanterna real.
  • Combinações: ele leva resultados do app para o Kling 4.0 (trocando o cenário) e para o Genie 4, um modelo de mundo, no qual passeia por cômodos gerados da casa. Não sabe ainda qual seria a utilidade, mas acha curioso.
  • Preço: grátis no iPhone (100 créditos iniciais, só personagens da biblioteca). O plano Plus custa US$ 14,99 por mês, com personagens próprios e uso comercial individual. O Pro custa US$ 39,99, com três vezes mais uso e uso empresarial. A versão Android depende de aprovação do Google, segundo o app.

Vale assistir se…

Você gosta de ver experimentos criativos com vídeo de IA e quer entender como realidade aumentada e geração de vídeo podem se misturar. Quem busca resultados perfeitos vai notar os defeitos, que o próprio criador mostra. O vídeo ainda cita de passagem, com base em um slide da Alibaba, modelos como Wan e Happy Horse, mas o foco é o Simulon.

O que muda

Antes

  • Personagens de IA existiam só dentro de vídeos gerados
  • O cenário era inventado pelo modelo

Depois

  • Personagens ficam na sua sala, vistos pela câmera do celular
  • O cenário e o movimento de câmera são os seus

Passo a passo

  1. Envie uma imagem de referência do personagem.
  2. Espere o app criar o modelo 3D.
  3. Aponte a câmera do celular e posicione, ajuste o tamanho e gire o personagem.
  4. Descreva a ação ou filme o seu movimento de câmera.
  5. Gere o vídeo e veja o personagem reagir.

Entenda os termos

Modelo de mundo
IA que gera um ambiente explorável, inventando o que há em cada canto, como o Genie 4 citado no vídeo.
Reference-to-video
Técnica em que você dá imagens de referência de um personagem e a IA cria um vídeo com ele.
Realidade aumentada (AR)
Recurso que mistura elementos digitais com o que a câmera do celular mostra do mundo real.

Gostou? Compartilhe

Aprenda IA do zero

A Trilha IA custa R$ 37 e tem 5 cursos em ebook, com 115 capítulos e 30 projetos com código pronto. As 23 aulas em vídeo são grátis no YouTube.

Conhecer a Trilha IA

Produto relacionado

Impressora 3D Bambu Lab A1 ComboImprime em até 4 cores e é fácil de usar desde o primeiro dia. Para tirar ideias do papel.Baixou 1% desde 14/11R$ 3.793,00 no Pixou R$ 3910,00 10x R$ 391,04 sem jurosPreço de 21/11, às 09hVer no Mercado Livre

#publi · Link de afiliado: se você comprar, o portal ganha uma pequena comissão, sem custo a mais para você.

Debate

Ainda não há comentários. Que tal começar o debate?

Os comentários passam por uma revisão rápida (com apoio de IA) antes de aparecer.Regras dos comentários.

Leia também