Runway revela Act-One, uma IA que anima personagens a partir de vídeos de pessoas reais

A startup nova-iorquina Runway anunciou o sistema Act-One, que permite, com base na gravação de vídeo da atuação de uma pessoa, transferir suas expressões faciais para qualquer outro personagem, preservando todas as nuances das expressões faciais.

Fonte da imagem: runwayml.com

A empresa começou a lançar o Act-One hoje – o sistema está disponível sem custo adicional e pode ser usado por usuários registrados que tenham fundos suficientes em suas contas pessoais para trabalhar com o gerador de vídeo Gen-3 Alpha que a Runway lançou este ano .

A animação facial é uma das tarefas mais difíceis na produção cinematográfica, tradicionalmente envolvendo equipamentos sofisticados de captura de movimento que capturam o movimento de pontos de referência no rosto de um ator. Os sistemas baseados em IA são projetados para tornar esse processo muito mais acessível: Runway Act-One permite criar animações faciais em uma variedade de estilos e gêneros sem a necessidade de equipamento de captura de movimento ou de desenhar pontos no rosto do ator.

Um ponto forte importante do Act-One é a capacidade do sistema de fornecer qualidade cinematográfica e resultados realistas a partir de uma variedade de ângulos de câmera e distâncias focais. Um ator, usando apenas uma câmera de consumo, pode interpretar vários personagens ao mesmo tempo – o modelo de IA gera um fluxo de saída de qualquer tipo, seja fotorrealismo ou animação, e a complexidade da cena não importa. Isto ajudará na filmagem de filmes independentes ou mídias digitais que tradicionalmente não têm acesso a recursos de produção de alta qualidade.

O sistema de expressão facial Act-One está equipado com um conjunto abrangente de recursos de segurança: tentativas de criação de conteúdo envolvendo figuras públicas são detectadas e bloqueadas, e ferramentas técnicas são usadas para verificar os direitos de voz. O monitoramento contínuo visa garantir o uso responsável da plataforma.