O gerador de vídeos com IA é o futuro do anime? Absolutamente não

O Japão tem estado relativamente quieto durante o boom da IA ​​até agora, mas agora — seguindo a tendência do ChatGPTxGhibli — a empresa japonesa Animon lançou um gerador de vídeo de IA específico para anime.

Esta ferramenta gratuita pega imagens estáticas de anime, desenhos animados ou arte CG e cria uma animação de 5 segundos com base no prompt que você inserir. A empresa afirma que isso ajudará animadores profissionais e amadores a acelerar o processo criativo — basicamente, exigindo apenas um quadro desenhado à mão a cada 5 segundos de vídeo, em vez de centenas de quadros.

 

Existe lugar para ferramentas de IA na indústria de anime?

Uma rápida confissão: sou um grande fã de anime. Já assisti a centenas de shows, visito o Japão quase todos os anos, trabalhei lá e falo japonês. Não sou especialista no processo de animação, mas sei como é uma animação boa e uma animação ruim.

Mesmo sem a intervenção da IA, já existem muitas maneiras de reduzir custos em animação na indústria de anime. Grande parte do trabalho agora é terceirizado para estúdios de animação coreanos, e o tempo e o dinheiro alocados a eles estão diminuindo constantemente.

Quando um estúdio não investe o suficiente em sua animação, isso afeta os shows de duas maneiras principais: há muito menos movimento e há uma queda perceptível na qualidade do desenho. Os designs dos personagens podem ficar lindos em pôsteres promocionais, mas as versões quadro a quadro não têm o mesmo nível de detalhes ou proporções corretas e, em alguns casos, até parecem inconsistentes.

Tenho um exemplo infeliz disso de um programa que adoro (um anime popular de vôlei chamado haikyuu). Os primeiros episódios foram muito bem animados, mas, por algum motivo, a qualidade caiu durante uma das temporadas posteriores. Aqui está uma imagem comparando uma cena do protagonista de um episódio da 1ª temporada com um episódio da 4ª temporada.

Comparação da qualidade da arte do anime em Haikyuu.

Para deixar claro, alguns programas ainda parecem ótimos, mas animações de baixa qualidade podem aparecer em quase qualquer lugar e podem ser ruins o suficiente para desanimar espectadores como eu.

Com o nível tão baixo, você pode pensar que Ferramentas de criação de vídeo de IA Ela já tem uma chance neste setor. No entanto, com base no conteúdo que recebi do Animon.ai, receio que esse não pareça ser o caso.

 

Como é a animação gerada?

A ferramenta funciona no sentido de pegar a imagem que você fornece e anima-a por 5 segundos, mas isso é tudo o que você pode garantir que acontecerá. Na minha primeira tentativa, dei a ela uma imagem estática de Jet Black da série de TV Cowboy Bebop Ele está prestes a beber do copo de uísque.

Prompt do gerador de vídeo Animon.ai

Meu pedido foi simplesmente: “O personagem está bebendo do copo que você está segurando”. O vídeo que recebi em troca tinha alguns erros.

Primeiro, Jet Black não bebe. Ele parece estar falando, levantando o copo perto do rosto, mas não vejo nada que pareça uma bebida de verdade. No entanto, a bebida dentro do copo parece estar muito movimentada – o copo enche e esvazia mesmo que ninguém pareça estar bebendo. Se você quiser ver Jett realmente bebendo, ele está lá. Aqui no YouTube.

O modelo de IA também sofre do problema de cicatriz que o Jet tem. A extremidade inferior desapareceu um pouco e, quando ele abre os olhos, a cicatriz está bem acima do globo ocular. Como peguei a imagem estática de um vídeo no canal do Crunchyroll no YouTube, ela tem o logotipo do CR no canto superior direito. No entanto, no vídeo da IA, o texto parece ter sido transformado em “Crunchyolo”.

Cena de dança Maomao. Diários do boticário.

Em seguida, tentei fornecer a ele uma imagem estática. Para a cena de dança "Maw Maw" De Diários do Boticárioe consegui Um resultado realmente estranho.. Ao contrário dos movimentos tridimensionais, confusos e instáveis ​​do vídeo 2D “Jet”, a IA me deu o que parecia ser um modelo 3D.

O Animon.ai também pretende trabalhar com arte CG, então acho que faz sentido que ele possa criar modelos 3D, mas fiquei muito surpreso. Enquanto Diários do Boticário Ele usa muitos modelos 3D para os edifícios e fundos, mas o personagem foi definitivamente desenhado na cena que usei.

Em ambos os casos, os vídeos gerados parecem significativamente mais estáveis ​​quando modelos 3D são incluídos. O movimento parece menos brusco, e o modelo mantém o tamanho e a forma do personagem de forma mais consistente. Eu ainda não gostaria de vê-lo em uma série como está, mas é definitivamente um avanço em relação ao conteúdo em estilo 2D que ele me deu.

No entanto, o argumento de vendas da Animon.ai é ajudar os animadores a economizar tempo desenhando menos quadros, o que é irrelevante quando se trata de animação 3D. Na verdade, é rápido e barato comparado à animação 2D, e não faz sentido criar um modelo 3D e depois usar um gerador de vídeo com tecnologia de IA para animá-lo aleatoriamente em vez de usar um software de animação.

 

Você deve usar o Animon.ai?

Cena de anime gerada por IA usando Animon.ai

Se você não sabe nada sobre animação e quer um GIF ou vídeo rápido para uso pessoal, essa ferramenta provavelmente funcionará bem (ou lhe dará boas risadas, se não). No entanto, é difícil imaginar que qualquer animador amador ou profissional veja algum valor real nisso.

Se você quiser saber as capacidades da ferramenta, publiquei Canal Animon no YouTube Um videoclipe que parece ter sido criado quase inteiramente por inteligência artificial – pelo menos é o que parece.

No geral, acredito que há duas razões principais pelas quais os geradores de vídeo de IA não estão prontos para nenhum negócio real. A primeira é que o movimento parece muito ruim, e a outra é a falta de controle que você tem sobre o resultado. É o mesmo que qualquer outra ferramenta de IA generativa, na verdade: ela só não é consistente e responsiva o suficiente para ser confiável. Provavelmente chegaremos lá algum dia, e ainda é divertido mexer nas primeiras versões da tecnologia, mas não se deixe enganar pelos vendedores: nenhuma dessas ferramentas está pronta para uso comercial ainda. Especialistas da indústria de animação enfatizam que as ferramentas de IA atuais ainda estão evoluindo e precisam de mais melhorias.

Comentários estão fechados.