A indústria da animação está numa encruzilhada crucial. Em meio à mudança de prioridades, à ansiedade profissional e à explosão da IA generativa desde 2023, muitos criativos sentem que o chão está escorregando sob seus pés.
A reação online contra projetos alimentados por IA é frequente e violenta, como demonstraram as controvérsias em torno do Amazon GenAI Creators Fund. Muitos artistas pretendem evitar completamente esta tecnologia, mas um animador adoptou uma abordagem diferente, trabalhando directamente com um dos maiores laboratórios de investigação de IA do mundo.
Depois de começar como especialista em CG em projetos da Netflix antes de conseguir um papel como artista de histórias em Inside Out 2 da Pixar, Connie He deu um salto inesperado para o Google DeepMind. Lá, ela dirigiu Dear Upstairs Neighbour, um curta de animação criado usando arte original como referência para um pipeline de animação exclusivo alimentado por IA (veja o trailer abaixo).
Conversei com Connie para descobrir por que ela decidiu cruzar a linha divisória, como sua equipe construiu um pipeline que respeita a arte humana e por que ela acredita que, em vez de produzir IA geral, a IA generativa pode realmente ajudar a tornar a animação mais diversificada.
Connie admite que passou por um período de profundo conflito interno quando ferramentas como Midjourney e DALL-E surgiram pela primeira vez, mas vendo o impacto direto no setor, decidiu que ignorar a tecnologia não era uma opção.
“A motivação para começar a partilhar é porque sinto que se esta tecnologia continuar a evoluir, os artistas terão de permanecer na conversa em vez de se afastarem dela”, disse-me ela. “Precisamos construir uma ponte e ter essa conversa com as pessoas que constroem a tecnologia e construir uma compreensão mútua sobre o que é a criatividade e o que os artistas precisam.”
Para ela, o momento decisivo veio de uma fonte inesperada: uma antiga entrevista em que a musicista islandesa Björk discutia as opiniões das pessoas sobre a música electrónica. “As pessoas sempre falam comigo como se a música computacional não tivesse alma, mas não tem alma porque você não colocou alma nela.” O animador se lembra de Björk dizendo. “Aquele momento foi um momento de iluminação para mim. A questão é: como você se envolve nisso? É uma questão de ferramentas.”
Para aqueles que se preocupam com o fato de IA significar escrever uma mensagem de texto e deixar a máquina fazer o trabalho, Dear Upstairs Neighbour descreve um esquema diferente.
O curta conta a história de Ada e seus problemas para dormir devido aos vizinhos barulhentos. É uma história simples com algumas reviravoltas surpreendentes contada através de um estilo artístico profundo que busca capturar o desespero crescente do personagem.
O projeto rejeitou totalmente a criação de texto para vídeo, concentrando-se no pipeline de imagem para vídeo usando arte desenhada à mão e modelos de aprendizado de máquina treinados para fins específicos.
Cada design de personagem, storyboard e obra de arte foram criados por artistas humanos. A própria Connie pintou uma série de acrílicos abstratos em papel que foram digitalizados e usados para treinar modelos personalizados, ou LoRAs. Foi então utilizado em um processo híbrido de animação 2D e 3D junto com o Maya, um dos melhores softwares de animação. O resultado é uma aparência complexa e texturizada de “pintura viva” que as linhas tradicionais de animação por computador nunca serão capazes de replicar.
“Na computação gráfica, é sempre difícil porque tudo parecerá CG – é assim que os sistemas de renderização são construídos, e as coisas se movem em CG”, observa Cooney. “Mas um modelo de aprendizado de máquina é capaz de capturar as regras de design que fornecemos a ele, algo que você não consegue com computação gráfica. Você pode fazer isso com o desenho 2D tradicional? Tecnicamente sim, mas provavelmente levaria 10 anos.”
As linhas tradicionais de produção de animação por computador são altamente isoladas, com artistas transferindo trabalho para fornecer fazendas. Na DeepMind, diz Connie, ela trabalha ao lado de engenheiros de software para construir ferramentas que priorizem o controle técnico em vez da automação.
Quando a equipe encontrou a saída de flash de barreira de IA clássica, colaborei com um pesquisador para construir um sistema personalizado usando máscaras provenientes do Maya para estabilizar o rosto do personagem, ao mesmo tempo que permitia que o cabelo e os fundos mantivessem um flash corajoso e pictórico quando desejado para refletir o estado emocional de Ada.
“Muitas vezes foram os pesquisadores que me inspiraram”, diz ela. “Eu nem imaginava que isso fosse possível, mas eles entenderam minha intenção e construíram um sistema para tornar isso possível. Agora posso ver que esse tipo de impacto é possível, como podemos usar isso para maximizar nossa narrativa?”
imagem 1 para 5
Há um elefante na sala, é claro. Connie está ciente das preocupações éticas que envolvem o uso da inteligência artificial. Ela usou modelos treinados em sua própria arte, mas reconheceu preocupações com direitos autorais sobre os modelos subjacentes a eles.
“Espero que haja alguma regulamentação legal porque esta área está vazia agora”, diz ela. “Sem um enquadramento jurídico, será difícil prosseguir esta conversa de uma forma ponderada e respeitosa.”
Quanto a saber se grandes estúdios como a Pixar serão capazes de adotar a animação alimentada por IA, eles permanecem realistas. “Vai levar algum tempo para que tanto o lado das ferramentas de tecnologia quanto as pessoas que dirigem os estúdios descubram o que está por vir. Vai ser confuso por um tempo, mas, eventualmente, haverá boas pessoas trabalhando para torná-lo menos confuso.”
Em última análise, ela vê a IA não como um substituto para o artista, mas sim como um meio incompleto que precisa de direção artística e, se usado de forma inteligente, pode abrir novas possibilidades criativas para os animadores.
“Para mim, é como uma nova caixa de tinta. Aquarela é um meio, pintura a óleo é um meio e computação gráfica é um meio. No momento, esta nova caixa de tinta tem apenas algumas cores para os artistas usarem. Há muitos espaços em branco. Mas quando isso se expandir, espero que os artistas possam usá-lo para criar coisas que não eram possíveis antes.”