Simulon coloca personagens de IA dentro da sua sala, pela câmera do celular
Segundo @TheoreticallyMedia, o app Simulon transforma um personagem em ativo 3D, posiciona no ambiente real e gera vídeos em que ele reage ao que acontece em volta.
Em 3 pontos
- O Simulon transforma a imagem de um personagem em um modelo 3D que você posiciona no ambiente pelo celular.
- O vídeo é gerado depois, usando a sua câmera e o seu cenário reais.
- Os personagens reagem ao que você faz e diz durante a gravação.
Redação IA Seenup · via @TheoreticallyMedia
Em números
- 100créditos iniciais no plano grátis
- US$ 14,99plano Plus por mês
- US$ 39,99plano Pro por mês
Segundo @TheoreticallyMedia, no vídeo “AI Video Just Stepped Into the Real World!”, o app Simulon, que o criador já tinha coberto em 2023, voltou com uma ideia nova: colocar personagens criados por IA no seu espaço real, usando a câmera do celular.
O que o vídeo mostra
O criador explica o funcionamento. Você envia uma imagem de referência de um personagem, e o app a transforma em um modelo 3D. Depois, pela câmera do celular, dá para posicionar, ampliar e girar o personagem em qualquer lugar do ambiente. Em seguida, o app gera o vídeo. Nada acontece em tempo real ainda: ou você descreve a ação desejada, ou filma seu movimento de câmera e deixa o app processar.
Nos testes, ele coloca sua personagem “Flamethrower Girl” em tamanho real em um bar do estúdio, depois em miniatura sobre a mesa. Para ele, o ponto forte é que o movimento de câmera e o cenário são os dele, sem o app inventar o lugar, como fazem os chamados modelos de mundo. Ele cita como prova uma bola no canto que realmente existe na sala.

Principais pontos
- Vários personagens: ele coloca o pirata Renfield e a Flamethrower Girl para jogar tênis em uma quadra perto de casa. O resultado ficou esquisito, mas, na avaliação dele, escala e posição no local se mantiveram consistentes. Em outro teste, ela passeia com um tigre da biblioteca do app, e os dois interagem sem que ele tenha pedido.
- Reação ao mundo real: a função, chamada de “Reality-Aware Rendering”, faz os personagens responderem ao que o usuário faz e diz durante a gravação. Ele cutuca o tigre e a miniatura com o dedo, vê um robô gigante atacar o gato da casa (que ignora tudo) e conversa com Renfield como se fosse um barman.
- Limitações: às vezes o modelo de vídeo “sai do trilho”, e surgem elementos que não existem, como um recorte atrás do barman. Ele também comenta que girar o personagem com dois dedos pode ser meio chato no início.
- É só “referência para vídeo”? Em boa parte, sim, admite ele. Daria para filmar com o celular e usar os personagens como referência em outra ferramenta. Ele chuta, com cerca de 90% de confiança, que por trás há um modelo parecido com o Minimax. O diferencial, para ele, é posicionar os personagens como em um set de filmagem.
- Futuro: segundo o Simulon, virão vozes e personalidades atribuíveis a cada personagem. Em um vídeo da própria empresa, um personagem obedece a comandos falados e reage a uma lanterna real.
- Combinações: ele leva resultados do app para o Kling 4.0 (trocando o cenário) e para o Genie 4, um modelo de mundo, no qual passeia por cômodos gerados da casa. Não sabe ainda qual seria a utilidade, mas acha curioso.
- Preço: grátis no iPhone (100 créditos iniciais, só personagens da biblioteca). O plano Plus custa US$ 14,99 por mês, com personagens próprios e uso comercial individual. O Pro custa US$ 39,99, com três vezes mais uso e uso empresarial. A versão Android depende de aprovação do Google, segundo o app.
Vale assistir se…
Você gosta de ver experimentos criativos com vídeo de IA e quer entender como realidade aumentada e geração de vídeo podem se misturar. Quem busca resultados perfeitos vai notar os defeitos, que o próprio criador mostra. O vídeo ainda cita de passagem, com base em um slide da Alibaba, modelos como Wan e Happy Horse, mas o foco é o Simulon.
O que muda
Antes
- Personagens de IA existiam só dentro de vídeos gerados
- O cenário era inventado pelo modelo
Depois
- Personagens ficam na sua sala, vistos pela câmera do celular
- O cenário e o movimento de câmera são os seus
Passo a passo
- Envie uma imagem de referência do personagem.
- Espere o app criar o modelo 3D.
- Aponte a câmera do celular e posicione, ajuste o tamanho e gire o personagem.
- Descreva a ação ou filme o seu movimento de câmera.
- Gere o vídeo e veja o personagem reagir.
Entenda os termos
- Modelo de mundo
- IA que gera um ambiente explorável, inventando o que há em cada canto, como o Genie 4 citado no vídeo.
- Reference-to-video
- Técnica em que você dá imagens de referência de um personagem e a IA cria um vídeo com ele.
- Realidade aumentada (AR)
- Recurso que mistura elementos digitais com o que a câmera do celular mostra do mundo real.
Gostou? Compartilhe
Aprenda IA do zero
A Trilha IA custa R$ 37 e tem 5 cursos em ebook, com 115 capítulos e 30 projetos com código pronto. As 23 aulas em vídeo são grátis no YouTube.
Conhecer a Trilha IAProduto relacionado
Impressora 3D Bambu Lab A1 ComboImprime em até 4 cores e é fácil de usar desde o primeiro dia. Para tirar ideias do papel.Baixou 1% desde 14/11R$ 3.793,00 no Pixou R$ 3910,00 10x R$ 391,04 sem jurosPreço de 21/11, às 09hVer no Mercado Livre #publi · Link de afiliado: se você comprar, o portal ganha uma pequena comissão, sem custo a mais para você.


