A rede neural NVIDIA Instant NeRF transforma fotos estáticas em objetos 3D em segundos

A NVIDIA apresentou sua versão da rede neural NeRF (Neural Radiance Field), que permite criar uma imagem tridimensional tridimensional a partir de apenas algumas dúzias de fotografias 2D estáticas tiradas em ângulos diferentes em apenas alguns segundos.

Fonte da imagem: NVIDIA

A própria rede neural NeRF foi desenvolvida por outros pesquisadores em 2020. A NVIDIA melhorou e introduziu sua própria versão, chamada Instant NeRF. Segundo a empresa, sua solução é a mais rápida do gênero. Como outras redes neurais NeRF, apresentadas pela NVIDIA Instant NeRF cria uma imagem tridimensional da cena com base em fotografias tiradas de diferentes ângulos. Quanto mais objetos você precisar transferir para o espaço 3D, mais fotos estáticas você precisará tirar, caso contrário, o resultado final terá um efeito desfocado.

A NVIDIA explica que as primeiras versões da rede neural NeRF podiam renderizar cenas 3D em minutos. No entanto, o treinamento de rede neural necessário para isso pode levar horas. A versão instantânea do NeRF treina em apenas alguns segundos porque usa o chamado método de codificação de grade de hash multi-resolução que é muito mais eficiente nos recursos da GPU. Uma rede neural pode funcionar mesmo usando um único acelerador gráfico, mas o melhor resultado é obtido ao utilizar várias placas de vídeo com núcleos tensores, que aceleram o trabalho dos algoritmos de IA.

De acordo com a NVIDIA, a tecnologia Instant NeRF pode ser usada para treinar robôs e sistemas de direção autônoma para que eles possam entender com mais eficiência os tamanhos e formas dos objetos no mundo real. A empresa também vê potencial para essa tecnologia ser usada em entretenimento e arquitetura, onde poderia gerar muito rapidamente objetos 3D do mundo real em um ambiente virtual para refinamento adicional pelos autores do projeto.