A Nvidia descobriu como usar IA para gerar imagens precisas sem consultas de teste – não é adequado para todos

A Nvidia lançou uma ferramenta poderosa que permite aos desenvolvedores gerar imagens no Blender usando um modelo 3D como base, em vez de prompts de texto. A ferramenta tem um nome longo – AI Blueprint para IA generativa guiada em 3D – e já está disponível para download.

Fonte da imagem: Nvidia/YouTube

A essência da tecnologia é que o usuário pode montar uma cena no popular editor 3D Blender com a rede neural generativa FLUX.1 do Black Forest Lab, colocando edifícios, árvores, transportes e outros objetos e, então, com base nessa composição, a rede neural irá gerar uma imagem 2D realista e detalhada. Essa abordagem, como observa o The Verge, oferece mais controle do que as descrições de texto tradicionais. Por exemplo, você pode definir com precisão o ângulo, a localização dos elementos e até mesmo suas proporções, evitando edições demoradas.

Fonte da imagem: Nvidia/YouTube

«”Esta ferramenta utiliza uma cena 3D como estrutura, portanto, mesmo modelos rudimentares funcionarão, pois a própria rede neural refinará os detalhes”, explica a Nvidia. Observa-se que este método é especialmente útil quando é necessário obter um resultado específico, em vez de depender de geração aleatória. Por exemplo, se um designer estiver criando uma cidade com um certo número de prédios e carros, ele pode montar rapidamente uma cena no Blender, e o FLUX.1 a transformará em uma imagem final, eliminando a necessidade de ajustes contínuos nos prompts, tentando se aproximar do resultado desejado e mais preciso.

Fonte da imagem: Nvidia/YouTube

Em geral, a Nvidia posiciona seus AI Blueprints como “fluxos de trabalho prontos para uso e personalizáveis” que facilitam o desenvolvimento de aplicativos de IA generativos. Neste caso, a ferramenta inclui instruções passo a passo, exemplos de ativos e um ambiente pré-instalado para conveniência do usuário. No entanto, a ideia não é única: a Adobe também apresentou anteriormente um protótipo de uma solução semelhante, chamada Project Concept, em sua conferência MAX em outubro. No entanto, por enquanto, sua versão continua experimental, e não há rumores de um lançamento amplo.

Enquanto isso, uma nova ferramenta da Nvidia já está disponível para download, mas requer uma placa de vídeo potente – como uma RTX 4080 ou superior. Especialistas observam que tais tecnologias podem acelerar o trabalho de designers, artistas conceituais e estúdios de desenvolvimento de jogos que buscam resultados mais precisos ao trabalhar com geração de IA, além de reduzir o tempo necessário para selecionar prompts.