Compressão de textura neural em jogos mostra economia recorde de memória de vídeo em placas de vídeo Nvidia e Intel

Desenvolvedores de jogos estão recorrendo cada vez mais a redes neurais para resolver o problema da memória de vídeo insuficiente. Como os tamanhos das texturas estão constantemente aumentando para alcançar uma experiência de jogo ultrarrealista, isso cria uma carga maior na VRAM. Um entusiasta publicou um vídeo demonstrando o funcionamento da tecnologia de compressão de texturas de rede neural (NTC) em placas de vídeo Nvidia e Intel. Testes demonstraram que a NTC pode reduzir significativamente a quantidade de memória de vídeo utilizada sem perda de qualidade de imagem.

Fonte da imagem: Compusemble / YouTube

A tecnologia NTC foi projetada como uma alternativa à compressão tradicional de texturas em bloco. Diferentemente dos métodos existentes, ela utiliza pequenas redes neurais especializadas com carga computacional mínima, configuradas para materiais de cena específicos. Isso permite reduzir o volume de texturas tanto na memória de acesso aleatório (RAM) quanto no dispositivo de armazenamento, melhorando simultaneamente a qualidade da renderização.

Por exemplo, no vídeo de demonstração, o tamanho original da textura do capacete era de 272 MB. Após a compactação de blocos, ele foi reduzido para 98 MB. O uso do NTC nos permitiu reduzi-lo para 11,37 MB sem perda de qualidade, o que é mais de 24 vezes menor que o original. Resultados semelhantes foram demonstrados em uma placa de vídeo Intel com um modelo T-Rex: após decodificar as texturas com NTC, elas ficaram mais nítidas e próximas do original do que com a compactação padrão.

O autor do vídeo, Compusemble, testou a tecnologia em um sistema com uma placa de vídeo Nvidia GeForce RTX 5090. De acordo com seus dados, o tempo de processamento de um quadro em resolução 4K aumentou de 0,045 ms para 0,111 ms — 2,5 vezes, mas isso ainda é insignificante em comparação com a duração total da renderização do quadro. Ao mesmo tempo, se você desabilitar o recurso Cooperative Vectors, desenvolvido pela Nvidia, Microsoft e outros participantes do setor, o tempo de processamento aumenta para 5,7 ms, o que torna o uso do NTC quase impossível sem aceleração de hardware.

Vale ressaltar que a tecnologia NTC ainda não é utilizada em projetos comerciais. No entanto, sua base técnica já está sendo formada. A NTC permitirá que os desenvolvedores reduzam a carga na memória de vídeo ou aumentem o nível de detalhes dos gráficos sem aumentar os requisitos de hardware. Espera-se que os primeiros jogos com suporte a NTC sejam lançados nos próximos anos.