Runway apresentou Gen-3 Alpha, um gerador de vídeo realista de IA

A startup nova-iorquina Runway lançou seu primeiro modelo de inteligência artificial para geração de vídeo no ano passado, mas desde então seu trabalho foi eclipsado por projetos poderosos como OpenAI Sora e Luma AI Dream Machine, apresentados na semana passada. Agora a empresa decidiu responder aos concorrentes falando sobre o novo modelo Gen-3 Alpha.

Fonte da imagem: runwayml.com

A rede neural Gen-3 Alpha é, como prometeu o desenvolvedor, “a primeira de uma próxima série de modelos treinados pela Runway em uma nova infraestrutura construída para aprendizagem multimodal em larga escala”. Serão modelos de IA capazes de “representar e simular uma ampla gama de situações e interações semelhantes às encontradas no mundo real”.

O novo sistema permite gerar vídeos de alta qualidade, detalhados e altamente realistas com 10 segundos de duração – eles se distinguem por uma ampla gama de emoções nos personagens e uma câmera em movimento ao “filmar”. Um vídeo de 5 segundos leva 45 segundos para ser criado, enquanto vídeos de 10 segundos levam 90 segundos para aparecer. A empresa ainda não abriu o acesso geral ao novo modelo, mas nos “próximos dias”, como esclareceu a diretora técnica da Runway, Anastasis Germanidis, os assinantes pagos da plataforma poderão utilizá-lo (a partir de US$ 15 por mês ou a partir de US$ 144 por ano). ), e então, já este ano, e todos os outros.

O modelo Gen-3 Alpha é “treinado colaborativamente em vídeo e imagens” – uma “colaboração de uma equipe interdisciplinar de pesquisadores, engenheiros e artistas”, mas a empresa não divulgou as origens de todos os materiais da matriz de treinamento. “Temos uma equipe de pesquisa interna que supervisiona nosso treinamento e usamos conjuntos de dados internos cuidadosamente selecionados para treinar nossos modelos”, explicou um porta-voz da Runway.

A empresa também está “colaborando com organizações líderes de entretenimento e mídia para criar versões personalizadas do Gen-3”, que irão “gerar personagens mais consistentes e estilisticamente orientados e ajudar a atingir requisitos artísticos e narrativos específicos, entre outras coisas”, disse o desenvolvedor. Os nomes específicos não são citados, mas sabe-se que os produtos Runway foram utilizados em suas obras pelos diretores de filmes como “Everything, Everywhere, All at Once” e “The People’s Joker”. Há um formulário de solicitação no site da empresa que as empresas que desejam cooperar podem preencher – para elas o desenvolvedor preparará sua própria versão do Gen-3 Alpha. O custo deste modelo não está especificado.