Inteligência artificial ensinada a “voz” de fotos

No início do ano passado, a rede social de genealogia MyHeritage lançou o Deep Nostalgia, um aplicativo web deepfake que deu vida a fotos antigas de parentes falecidos. A oferta se tornou viral, com mais de 100 milhões de usos desde o lançamento. Uma nova ferramenta chamada LiveStory oferece adicionar voz também.

Fonte da imagem: myheritage.com

Assim como no Deep Nostalgia, para criar uma nova apresentação, os usuários podem fazer upload de uma foto e usar algoritmos de aprendizado de máquina para transformá-la em um pequeno vídeo animado. O MyHeritage uniu forças com o projeto israelense D-ID, e os usuários do recurso têm a oportunidade de criar um retrato falado de um parente que conta uma história de vida. Claro, a gravação não soa como a voz real da pessoa na imagem, mas você pode escolher entre uma biblioteca de mais de 140 vozes com suporte para 31 idiomas. No futuro, a lista deles será expandida.

A história da pessoa da foto pode ser gerada automaticamente a partir do recurso de história da família já à disposição, ou compilada pelo próprio usuário, que deve escrever o texto na primeira pessoa – pode ser dividido em capítulos e ilustrado com fotos adicionais. O restante do trabalho é feito automaticamente: combinar imagens em um vídeo, converter texto em fala com base no modelo de voz selecionado, além de animar uma imagem do próprio familiar com articulação de fala e expressões faciais. Dependendo da extensão do texto, tudo isso leva de 30 segundos a vários minutos.

O sistema funciona de forma igualmente eficaz com imagens em preto e branco, coloridas ou coloridas, e o vídeo resultante pode ser editado posteriormente, se necessário, para que posteriormente possa ser enviado aos entes queridos. No futuro, será possível adicionar legendas e alterar a ordem dos capítulos. A ferramenta está disponível em um modelo freemium – todos os recursos são desbloqueados por assinatura.