O gerador de vídeos com IA é o futuro do anime? Absolutamente não

O Japão tem estado relativamente quieto durante o boom da IA ​​até agora, mas agora — seguindo a tendência do ChatGPTxGhibli — a empresa japonesa Animon lançou um gerador de vídeo de IA específico para anime.

Esta ferramenta gratuita pega imagens estáticas de anime, desenhos animados ou arte CG e cria uma animação de 5 segundos com base no prompt que você inserir. A empresa afirma que isso ajudará animadores profissionais e amadores a acelerar o processo criativo — basicamente, exigindo apenas um quadro desenhado à mão a cada 5 segundos de vídeo, em vez de centenas de quadros.

 

Existe lugar para ferramentas de IA na indústria de anime?

Uma rápida confissão: sou um grande fã de anime. Já assisti a centenas de shows, visito o Japão quase todos os anos, trabalhei lá e falo japonês. Não sou especialista no processo de animação, mas sei como é uma animação boa e uma animação ruim.

Mesmo sem a intervenção da IA, já existem muitas maneiras de reduzir custos em animação na indústria de anime. Grande parte do trabalho agora é terceirizado para estúdios de animação coreanos, e o tempo e o dinheiro alocados a eles estão diminuindo constantemente.

Quando um estúdio não investe o suficiente em sua animação, isso afeta os shows de duas maneiras principais: há muito menos movimento e há uma queda perceptível na qualidade do desenho. Os designs dos personagens podem ficar lindos em pôsteres promocionais, mas as versões quadro a quadro não têm o mesmo nível de detalhes ou proporções corretas e, em alguns casos, até parecem inconsistentes.

Tenho um exemplo infeliz disso em um anime que adoro (um popular anime de vôlei chamado Haikyuu ). Os primeiros episódios eram muito bem animados, mas, por algum motivo, a qualidade caiu em uma das últimas temporadas. Aqui está uma imagem comparando um frame do protagonista de um episódio da primeira temporada com um de um episódio da quarta temporada.

Para deixar claro, alguns programas ainda parecem ótimos, mas animações de baixa qualidade podem aparecer em quase qualquer lugar e podem ser ruins o suficiente para desanimar espectadores como eu.

Com o padrão caindo tanto, você poderia pensar que as ferramentas de criação de vídeo com inteligência artificial já têm uma chance nesse setor. No entanto, com base no conteúdo que vi da Animon.ai, receio que não seja esse o caso.

 

Como é a animação gerada?

A ferramenta funciona pegando a imagem que você fornece e animando-a por cinco segundos, mas isso é praticamente tudo que você pode garantir. No meu primeiro teste, usei uma imagem estática do Jet Black, de Cowboy Bebop , prestes a beber um gole de uísque.

Meu pedido foi simplesmente: “O personagem está bebendo do copo que você está segurando”. O vídeo que recebi em troca tinha alguns erros.

Primeiro, Jett Black não está bebendo. Ele parece estar conversando, aproximando o copo do rosto, mas não vejo nada que indique que ele esteja bebendo de fato. No entanto, a bebida dentro do copo parece estar em constante movimento — o copo enche e esvazia mesmo sem que ele pareça estar bebendo. Se você quiser ver Jett bebendo de verdade, ele está aqui no YouTube.

O modelo de IA também sofre do problema de cicatriz que o Jet tem. A extremidade inferior desapareceu um pouco e, quando ele abre os olhos, a cicatriz está bem acima do globo ocular. Como peguei a imagem estática de um vídeo no canal do Crunchyroll no YouTube, ela tem o logotipo do CR no canto superior direito. No entanto, no vídeo da IA, o texto parece ter sido transformado em “Crunchyolo”.

Em seguida, tentei inserir uma imagem estática da cena de dança "Mow Maow" do filme "The Apothecary Diaries" e obtive um resultado verdadeiramente bizarro . Ao contrário dos movimentos tridimensionais, confusos e instáveis ​​do vídeo 2D de Jet, a IA me deu o que parecia um modelo 3D.

A Animon.ai também trabalha com arte CG, então achei que fazia sentido que eles pudessem criar modelos 3D, mas fiquei bastante surpreso. Embora The Apothecary Diaries use muitos modelos 3D de prédios e cenários, a personagem foi definitivamente desenhada na imagem que usei.

Em ambos os casos, os vídeos gerados parecem significativamente mais estáveis ​​quando modelos 3D são incluídos. O movimento parece menos brusco, e o modelo mantém o tamanho e a forma do personagem de forma mais consistente. Eu ainda não gostaria de vê-lo em uma série como está, mas é definitivamente um avanço em relação ao conteúdo em estilo 2D que ele me deu.

No entanto, o argumento de vendas da Animon.ai é ajudar os animadores a economizar tempo desenhando menos quadros, o que é irrelevante quando se trata de animação 3D. Na verdade, é rápido e barato comparado à animação 2D, e não faz sentido criar um modelo 3D e depois usar um gerador de vídeo com tecnologia de IA para animá-lo aleatoriamente em vez de usar um software de animação.

 

Você deve usar o Animon.ai?

Se você não sabe nada sobre animação e quer um GIF ou vídeo rápido para uso pessoal, essa ferramenta provavelmente funcionará bem (ou lhe dará boas risadas, se não). No entanto, é difícil imaginar que qualquer animador amador ou profissional veja algum valor real nisso.

Se você quiser ver o que a ferramenta é capaz de fazer, o canal Animon no YouTube publicou um videoclipe que parece ter sido criado quase inteiramente por inteligência artificial – pelo menos é o que parece.

No geral, acredito que há duas razões principais pelas quais os geradores de vídeo de IA não estão prontos para nenhum negócio real. A primeira é que o movimento parece muito ruim, e a outra é a falta de controle que você tem sobre o resultado. É o mesmo que qualquer outra ferramenta de IA generativa, na verdade: ela só não é consistente e responsiva o suficiente para ser confiável. Provavelmente chegaremos lá algum dia, e ainda é divertido mexer nas primeiras versões da tecnologia, mas não se deixe enganar pelos vendedores: nenhuma dessas ferramentas está pronta para uso comercial ainda. Especialistas da indústria de animação enfatizam que as ferramentas de IA atuais ainda estão evoluindo e precisam de mais melhorias.