A arquitetura visual generativa de inteligência artificial do Nvidia Edify atingiu um novo nível – ela oferece a geração de objetos 3D com base em uma descrição de texto. Shutterstock, Getty Images, Adobe, HP, Mattel e outros parceiros da Nvidia estavam interessados nas capacidades da plataforma.
Fonte da imagem: nvidia.com
O banco de fotos Shutterstock abriu acesso antecipado a uma API baseada na arquitetura Edify – a plataforma permite que artistas criem objetos tridimensionais ou cenas inteiras usando uma descrição de texto. Os desenvolvedores poderão testar os recursos de modelos de IA pré-treinados na arquitetura Edify usando dados da Getty Images e da Shutterstock por meio de uma API do pacote de microsserviços NIM da Nvidia. Treinado em conteúdo licenciado da Shutterstock, o modelo possui meios integrados de filtragem do conteúdo gerado; A exportação para os formatos 3D mais populares é suportada. Também é possível treinar e implantar modelos especializados de IA generativa na arquitetura Edify usando a plataforma Nvidia Picasso em recursos Nvidia DGX Cloud.
O gerador 3D proposto pela Shutterstock interessou à HP: objetos criados a partir de uma descrição de texto podem ser convertidos em modelos para impressoras 3D HP com possibilidade de sua posterior impressão. O projeto também foi útil para a Mattel: as ferramentas de IA ajudam os designers a visualizar as suas ideias para a criação de novos brinquedos através de comandos de texto, reduzindo assim a barreira técnica ao desenvolvimento do design. A arquitetura Nvidia Edify também alimenta o gerador de imagens 3D da Adobe para usuários Firefly e Creative Cloud.
A consultoria tecnológica Accenture Song, que já implantou a plataforma Omniverse da Nvidia, também implantou soluções baseadas em texto da Edify para criar cenas 3D em um ambiente realista para um gêmeo digital Land Rover Defender.
A Getty Images anunciou uma API Nvidia Edify na CES em janeiro, uma ferramenta que permite adicionar, remover ou substituir objetos em suas imagens e agora está disponível em Gettyimages.com e iStock.com. A partir de maio, a Getty Images oferecerá serviços para personalizar o modelo da Edify Foundation para combinar com a marca e o estilo visual da empresa cliente. Esses serviços funcionam sem a necessidade de utilização de código de programa: o cliente pode fazer upload de seu próprio conjunto de dados, consultar tags geradas automaticamente, criar tarefas para ajustar o modelo e revisar os resultados antes da implantação final. Por fim, a Getty Images oferecerá APIs para controle preciso da saída de imagens: a plataforma será capaz de gerar imagens a partir de miniaturas, controlando a profundidade de cores e segmentando fragmentos de imagens para trabalhar com cada objeto da cena individualmente.