A Nvidia explicou na GDC 2024 como os parceiros estão usando suas tecnologias de inteligência artificial para criar representações digitais realistas de pessoas em atividades profissionais e aplicativos de jogos. As soluções mais populares são Nvidia ACE (Avatar Cloud Engine) para geração de fala e animação, Nvidia NeMo para geração de fala e Nvidia RTX para renderização com traçado de raio.
Fonte da imagem: blogs.nvidia.com
A Inworld AI demonstrou o Covert Protocol, um jogo desenvolvido com o apoio da Nvidia, no qual os jogadores podem se sentir como um detetive particular experiente – há oportunidades ampliadas para interagir com personagens não-jogadores. O projeto utiliza o Inworld Engine, que integra cognição, percepção e comportamento para ajudar a moldar a narrativa do jogo, bem como ambientes de jogo renderizados em RTX. O jogo também usa tecnologia de reconhecimento de fala Nvidia Riva e microsserviços Nvidia Audio2Face.
A plataforma digital UneeQ, especializada na criação de avatares 3D com tecnologia de IA para aplicativos empresariais, também adotou o microsserviço Audio2Face da Nvidia e o combinou com sua tecnologia proprietária Synanim ML. Isso aumentou o realismo dos avatares gerados por IA e os clientes da UneeQ melhoraram a qualidade do serviço para seus próprios clientes.
A Nvidia também falou sobre Neural Radiance Cache (NRC), um algoritmo de rastreamento de raios alimentado por IA projetado para lidar com fontes de luz indireta em cenas dinâmicas sem a necessidade de pré-processar iluminação estática com base em geometria e materiais. A tecnologia Nvidia Spatial Hash Radiance Cache (ShaRC) oferece os mesmos recursos, mas sem o uso de rede neural, com compatibilidade com qualquer GPU que suporte ray tracing em DirectX ou Vulkan.
Por fim, a Nvidia anunciou que em breve expandirá o número de jogos com suporte à tecnologia de upscaling DLSS 3.5, cuja principal vantagem é a solução Ray Reconstruction – reconstrução de ray tracing em vez de algoritmos padrão de redução de ruído. Suporte DLSS 3.5 chegando ao Black Myth: Wukong e Naraka: Bladepoint; já está disponível no Portal com RTX, e em breve aparecerá na versão beta da plataforma Nvidia RTX Remix, que permite adicionar ray tracing a jogos clássicos.