Sberbank apresenta a rede neural de vídeo Kandinsky 4.1 para geração de vídeos em HD de 10 segundos

«O Sberbank anunciou a rede neural generativa de vídeo Kandinsky 4.1 na conferência de tecnologia GigaConf, que permite a criação de vídeos em HD de 10 segundos com base em uma descrição de texto ou imagem. No momento, participantes da conferência e designers profissionais já puderam testar o novo algoritmo.

Fonte da imagem: Steve Johnson / Unsplash

«O Kandinsky 4.1 Video proporciona um nível qualitativamente novo de vídeo generativo. O modelo se tornou muito superior em todos os aspectos: em conformidade com o prompt, qualidade visual, qualidade de geração de movimento e capacidade de modelar a física do mundo. Tais desenvolvimentos abrem oportunidades sem precedentes para designers, profissionais de marketing e representantes de outras indústrias criativas que trabalham na criação de conteúdo de vídeo de alta qualidade”, disse Andrey Belevtsev, vice-presidente sênior do Sberbank.

De acordo com os dados disponíveis, o Kandinsky 4.1 Video gera uma sequência de vídeo de até 10 segundos de duração em resolução SD (720×576 pixels) ou HD (1280×720 pixels). Os desenvolvedores treinaram a nova arquitetura do transformador de difusão com base em dados preparados por mais de 100 fotógrafos e artistas profissionais. Foi dada atenção especial à otimização dos processos de computação. Utilizando métodos de destilação e aceleração, foi possível reduzir o tempo de geração em mais de três vezes em comparação com o modelo da geração anterior.

O Kandinsky 1.4 Video permite a criação de vídeos com proporções de tela arbitrárias, permitindo que o conteúdo gerado seja adaptado a diferentes plataformas e tarefas de marketing. A nova versão do algoritmo estará disponível para todos em breve.