A Nvidia exibiu o AI bot R2X, que vai ajudar no uso de um PC – houve alguns erros

A Nvidia revelou um protótipo de seu assistente R2X AI na CES 2025, que roda em PCs e roda diretamente no desktop da máquina. O assistente parece um personagem de um jogo de computador e ajuda você a navegar pelos aplicativos. Você pode conectar qualquer um dos modelos populares de linguagem grande ao assistente, incluindo OpenAI GPT-4o ou xAI Grok.

Fonte da imagem: nvidia.com

Os modelos Nvidia AI são responsáveis ​​pela visualização e animação do R2X. O usuário pode se comunicar com o R2X em chat de texto ou em formato de voz, é possível fazer upload de arquivos para o aplicativo e é possível transmitir uma imagem de IA da tela do computador ou de uma câmera. Com este projeto, a Nvidia pretende combinar tecnologias generativas de IA em jogos com modelos avançados de linguagem grande – idealmente criando um assistente de IA que se pareça com uma pessoa.

Aqui está o R2X da Nvidia, mas desenvolvido com Grok pic.twitter.com/kyOORQ1kR

—

A empresa pretende abrir o código do projeto no primeiro semestre de 2025. A Nvidia está posicionando-o como uma nova interface de usuário para desenvolvedores, permitindo que os usuários finais conectem seus produtos de IA favoritos na nuvem ou no local. Modelado a partir do recurso Recall da Microsoft, o aplicativo R2X também pode tirar capturas de tela continuamente e analisá-las usando IA, mas esse recurso está desabilitado por padrão. Se você ativá-lo, o sistema o ajudará a entender o software do seu computador ou, por exemplo, aconselhará no desenvolvimento de códigos de programas complexos.

—

Na prática, a Nvidia R2X ainda não funciona perfeitamente. Durante a demonstração da CES 2025, o avatar às vezes exibia um efeito de “vale misterioso”, onde o rosto do personagem congelava com uma expressão estranha; e seu tom às vezes dava a impressão de ser agressivo. O conselho do assistente de IA foi muito útil, mas houve algumas “alucinações” – ele ficou confuso com as funções do Adobe Photoshop e de repente parou de “ver” a imagem na tela. Em outra demonstração, ele compilou um resumo do conteúdo de um arquivo PDF carregado.

Aqui está o R2X nos ajudando a usar o preenchimento generativo no Adobe Photoshop (no entanto, ele nos deu instruções incorretas) pic.twitter.com/CDLjbduBEw

—

Para animar expressões faciais em uma conversa, foi utilizado o modelo Nvidia Audio2Face-3D AI, que nem sempre funcionou perfeitamente. No futuro, o R2X poderá participar de sessões de videochamadas em grupo do Microsoft Teams e até atuar como agente de IA, realizando determinadas ações na área de trabalho do computador.