Adobe revela ferramenta de IA para edição de vídeo quadro a quadro (3DNews)

A Adobe revelou diversas ferramentas experimentais com inteligência artificial, ainda em desenvolvimento, projetadas para edição intuitiva de imagens, vídeos e áudio. Uma dessas ferramentas, desenvolvida como parte do Projeto Frame Forward, permite adicionar e remover vários objetos durante a edição de vídeo sem a necessidade de máscaras — o processo trabalhoso de selecionar objetos ou pessoas.

Fonte da imagem: Adobe

Em um vídeo de demonstração, a Adobe mostrou como o Frame Forward pode ser usado para remover facilmente um objeto de um vídeo. Essa ferramenta identificou, selecionou e removeu a mulher no primeiro quadro do vídeo, substituindo-a por um fundo com aparência natural. Essas alterações foram então aplicadas a todo o vídeo com apenas alguns cliques.

Os usuários também podem adicionar objetos ao quadro selecionando a área onde o objeto deve ser inserido e fornecendo mais detalhes ao algoritmo de IA por meio de descrições de texto. Essas alterações no primeiro quadro serão aplicadas a todo o vídeo. Os objetos inseridos podem se integrar perfeitamente ao vídeo, como a poça d’água que foi inserida no quadro, refletindo o gato que aparecia originalmente no vídeo.

Outra ferramenta de IA, o Project Light Touch, permite alterar a fonte de luz em fotos. Ela pode ser usada para mudar a direção da iluminação, criar um efeito de iluminação ambiente e controlar a difusão de luz e sombra. Essa ferramenta pode ser usada para adicionar iluminação dinâmica que pode ser movida pela área de edição, alterando como a luz incide ao redor e atrás de pessoas e outros objetos. A cor dessas fontes de luz pode ser alterada, permitindo ajustar a temperatura da iluminação e criar efeitos RGB vibrantes.

A ferramenta Project Clean Take permite alterar a narração com base em dicas de texto, eliminando a necessidade de regravar um clipe de vídeo ou áudio. O usuário pode alterar o estilo de fala ou o tom emocional da voz e até mesmo substituí-la completamente, se necessário.A função Clean Take preserva as características da voz original, permitindo a captura de palavras faladas. Ela é ideal para separar o ruído de fundo em fontes individuais, possibilitando ajustes de som detalhados e melhorando a inteligibilidade da fala.

Essas são apenas algumas das ferramentas de IA desenvolvidas pela Adobe e demonstradas na conferência Max. Entre outras, destacamos o Project Surface Swap, que permite alterar instantaneamente o material ou a textura de objetos e superfícies. Há também o Project Turn Style, que permite editar objetos em uma imagem rotacionando-os, de forma semelhante a modelos 3D. O Project New Depths permite editar fotos como se estivessem em um espaço 3D, onde o sistema determina automaticamente quando os objetos inseridos devem ser parcialmente ocultados pelo ambiente ao redor.

Todas essas ferramentas de IA ainda não estão disponíveis para o público. Não há previsão de quando elas serão integradas ao Adobe Creative Cloud ou ao aplicativo Firefly.