A NVIDIA, como parte de sua apresentação na Computex 2023, apresentou o serviço Avatar Cloud Engine (ACE) for Games, que tornará os personagens não-jogadores (NPCs) em jogos mais inteligentes. O serviço apresentado permitirá que os desenvolvedores criem seus próprios modelos de IA que lhes permitirão gerar uma fala mais natural para os NPCs, incluindo diálogos e movimentos.
Fonte da imagem: NVIDIA
“Conforme observado pela NVIDIA, os próprios desenvolvedores de middleware, ferramentas de desenvolvimento e jogos poderão usar o ACE for Games para criar e implantar modelos personalizados de IA para gerar fala, conversas e animações em seus softwares e jogos”.
«A IA generativa tem o potencial de revolucionar a forma como os jogadores interagem com os personagens do jogo e aumentar muito a imersão no jogo”, disse John Spitzer, vice-presidente de tecnologia da NVIDIA para desenvolvedores. “Com base em nossa experiência em IA e décadas de experiência trabalhando com desenvolvedores de jogos, a NVIDIA está liderando o caminho no uso de IA generativa em jogos”.
Com tecnologia NVIDIA Omniverse, o ACE for Games oferece modelos otimizados de IA para fala, conversa e animação de personagens, incluindo:
- NVIDIA NeMo – para criar, configurar e implantar modelos de linguagem nos próprios conjuntos de dados dos desenvolvedores. Modelos de linguagem maiores podem ser personalizados para se adequar às histórias e histórias de fundo dos personagens e são protegidos de conversas “contraproducentes ou inseguras” com NeMo Guardrails.
- NVIDIA Riva – para reconhecimento automático de fala e conversão de texto em fala. Este modelo permite que você tenha uma conversa natural em tempo real no jogo.
- NVIDIA Omniverse Audio2Face – para criar instantaneamente uma animação facial expressiva de um personagem de jogo para qualquer faixa de fala. O Audio2Face inclui conectores Omniverse para o Unreal Engine 5, para que os desenvolvedores possam adicionar animação facial diretamente aos personagens MetaHuman.
De acordo com a NVIDIA, os desenvolvedores podem integrar toda a solução NVIDIA ACE for Games ou usar apenas os componentes de que precisam.
A NVIDIA fez parceria com a startup Convai para demonstrar como os desenvolvedores em breve poderão usar o NVIDIA ACE for Games para criar NPCs. Focada no desenvolvimento de IA de conversação avançada para mundos de jogos virtuais, a Convai integrou os módulos ACE em sua plataforma de avatar em tempo real de ponta a ponta. Na demo chamada Kairos, os jogadores interagem com Jin, o dono do café. Embora seja um NPC, Jin responde a perguntas em linguagem natural de maneira realista e de acordo com a história de fundo da história, tudo com a ajuda de IA generativa.
Otimizadas para uma variedade de necessidades, as redes neurais NVIDIA ACE for Games oferecem uma variedade de opções em termos de tamanho, desempenho e qualidade. O ACE for Games ajudará os desenvolvedores a ajustar modelos para seus jogos e, em seguida, implantar por meio de sistemas de nuvem NVIDIA DGX ou diretamente para PCs GeForce RTX com debriefing em tempo real.
Por fim, a NVIDIA observou que desenvolvedores de jogos e startups já estão usando suas tecnologias generativas de IA para seus fluxos de trabalho:
- A GSC Game World está apresentando o Audio2Face ao seu próximo jogo STALKER 2 Heart of Chernobyl.
- Fallen Leaf, um desenvolvedor de jogos independente, usa Audio2Face para animar personagens em Fort Solis, um thriller de ficção científica em terceira pessoa ambientado em Marte.
- Charisma.ai, uma empresa de inteligência artificial que cria personagens virtuais, usa Audio2Face para animação em seu mecanismo de conversação.