O aplicativo NVIDIA Broadcast ajuda os streamers a limpar o som e melhorar a imagem

As transmissões de jogos estão experimentando um aumento real de popularidade este ano (inclusive devido a medidas de quarentena generalizadas contra COVID-19): o número de transmissões no Twitch cresceu 89% e os espectadores – 56%. Sem surpresa, os novos aceleradores de jogos NVIDIA Ampere prestam atenção especial ao processamento de vídeo.

Por exemplo, a NVIDIA equipou seus aceleradores com uma nova versão da unidade de codificação e decodificação de vídeo (NVENC), que promete qualidade excelente e descarrega a CPU para minimizar as taxas de quadros em jogos durante o streaming. Já escrevemos sobre o suporte de hardware para decodificação AV1 em Ampère. A NVIDIA está trabalhando em estreita colaboração com desenvolvedores de aplicativos populares de streaming como OBS, Discord, Streamlabs, Twitch Studio e Xsplit para melhorar a qualidade de streaming.

Qualidade de som, câmera e recursos visuais também desempenham um papel importante, mas nem todos podem pagar seu próprio estúdio ou câmeras, microfones e chroma key caros para melhorar a qualidade de seus streams. A NVIDIA está procurando resolver esse problema com a inteligência da GeForce RTX 3000 por meio de seu novo aplicativo Broadcast.

Ele contém três ferramentas alimentadas por IA:

• O cancelamento de ruído remove o ruído de fundo do microfone, como latidos de cachorro ou campainhas. Este recurso também pode ser usado para fluxos de entrada de áudio;
• O plano de fundo virtual permite que você substitua o plano de fundo da filmagem com a do jogo, outra imagem ou um efeito de desfoque. Na verdade, este é um análogo de um chroma key, mas sem uma tela verde;
• O enquadramento automático amplia a imagem e usa IA para rastrear os movimentos da cabeça, focalizando a câmera no streamer, mesmo se ele se mover para o lado – uma espécie de operador pessoal.

Esses recursos podem ser usados ​​não apenas para transmissão, mas também para videoconferência via Zoom ou para jogar com amigos via Discord. NVIDIA Broadcast é um complemento versátil projetado para funcionar com aplicativos populares de streaming, videoconferência e chat de voz. É compatível com todas as placas de vídeo NVIDIA GeForce RTX, TITAN RTX e Quadro RTX que apresentam Tensor Cores. Ou seja, não apenas a nova série GeForce RTX 30, mas a GeForce RTX 20.

A propósito, a eliminação efetiva de ruído usando AI pode ser verificada usando o utilitário RTX Voice, que a empresa prometeu lançar oficialmente para todas as placas de vídeo GeForce (anteriormente estava disponível apenas não oficialmente). Baixe o mesmo aplicativo NVIDIA Broadcast que estará disponível ainda este mês.