Genjutsu AI

Transferência de movimento em vídeo com IA: quando faz sentido e quando não faz

Há muitas ferramentas de vídeo com inteligência artificial, e a maior parte parte de uma descrição escrita. O Genjutsu AI parte de outra coisa: de um vídeo que já tem. Faz apenas transferência de movimento (motion transfer), e é útil perceber bem esse limite antes de decidir se a ferramenta serve para o seu caso.

Como funciona, em duas linhas

Dá-se à ferramenta um clipe curto, que fornece o movimento e o trabalho de câmara, e até 20 imagens de referência, que fornecem o aspeto visual. O resultado é um novo vídeo com o movimento do clipe e o aspeto das imagens.

O clipe de origem tem de ter entre 4 e 30 segundos e estar em formato MP4 ou MOV. O vídeo final pode ser gerado em 480p, 720p ou 1080p.

Quando faz sentido

Já tem um movimento que funciona. Se gravou ou escolheu um clipe cujo movimento e enquadramento estão como quer, a ferramenta permite reaproveitá-lo com outro aspeto visual, sem voltar a filmar.

Quer testar vários aspetos para o mesmo movimento. Como o movimento vem sempre do clipe, pode manter essa parte fixa e variar apenas as imagens de referência. Isso torna as comparações mais fáceis de avaliar.

Precisa de controlo sobre o movimento. Em vez de esperar que um gerador de texto para vídeo acerte no gesto ou na câmara, o movimento está definido à partida pelo seu clipe.

Trabalha com ligações a outros sistemas. Existe uma API REST, por isso é possível iniciar gerações a partir de um script ou de um fluxo de trabalho existente.

Quando não faz sentido

Não tem nenhum clipe de partida. A ferramenta não cria vídeo a partir de texto. Sem um clipe de 4 a 30 segundos, não há movimento para transferir.

O movimento do clipe não é o que quer. O resultado segue o clipe. Se o movimento original for confuso, não deve esperar que o resultado o corrija.

Precisa de um vídeo com mais de 30 segundos num único passo. O limite do clipe de origem é de 30 segundos.

Custos: um cálculo simples

O custo é calculado por segundo, em créditos:

Resolução Créditos por segundo
480p 3
720p 7
1080p 11

Um clipe de 8 segundos custa assim 24 créditos em 480p, 56 em 720p e 88 em 1080p. Uma boa prática é fazer o primeiro teste em 480p e só subir de resolução quando o movimento e o aspeto estiverem certos.

Os créditos compram-se em pacotes de pagamento único. Não há subscrição e os créditos não expiram. Se uma geração falhar, os créditos são devolvidos automaticamente. Os pacotes disponíveis estão na página de preços.

Um aviso sobre privacidade

Os vídeos feitos antes da primeira compra ficam públicos na secção Community do site. Se o material for confidencial ou ainda não puder ser mostrado, convém ter isto presente antes de carregar qualquer ficheiro.

Resumo

O Genjutsu AI é uma ferramenta estreita e honesta quanto ao que faz: pega no movimento de um clipe curto e aplica-lhe o aspeto de imagens de referência. Se já tem o movimento e quer outro aspeto, pode experimentar em genjutsu.app. Se precisa de criar vídeo a partir de uma descrição escrita, esta não é a ferramenta indicada.

— Genjutsu AI

0