Nvidia DLSS 4 em detalhes: geração de múltiplos quadros e uma nova rede neural

Nvidia DLSS 4 em detalhes: geração de múltiplos quadros e uma nova rede neural 16 comentários

Imagem: Nvidia

Depois do DLSS 3, não é surpresa que o DLSS 4 venha em seguida. A ideia básica foi desenvolvida e o número de molduras artificiais foi aumentado. Mas essa não é a única mudança, o DLSS 4 também vem com uma nova rede neural que também deve trazer melhorias para tecnologias mais antigas.

Índice Geração de vários quadros e nova rede neural DLSS 4: antigo e novo na atualização DLSS SR e RR ficam mais bonitos, DLSS FG fica mais rápido e econômico. DLSS SR e RR são inicialmente uma versão beta. DLSS 4 Multi Frame Generation – Somente com RTX 5000, a taxa de quadros deve melhorar. Nvidia diz cerca de 70% mais FPS

Sumário :

DLSS 4: antigo e novo na atualização

DLSS Ray Reconstruction, DLSS Super Resolution e DLAA agora são calculados por uma rede neural recém-treinada, que é um modelo de transformador e, portanto, a mesma arquitetura básica do ChatGPT, por exemplo. Anteriormente eram utilizadas “redes neurais convolucionais” (CNN), mas segundo a Nvidia, isso atingiu o limite do que é possível.

Porque a CNN monitora principalmente os movimentos dos pixels em uma região específica em vários quadros. Se o pixel desaparecesse desta região, a informação obtida anteriormente também desapareceria. A nova rede neural baseada no “Vision Transformer”, por outro lado, pode observar pixels em toda a imagem e em múltiplas imagens e avaliar de forma independente sua importância. Você deve usar o dobro de parâmetros da rede antiga para que a nova rede possa entender melhor a imagem renderizada.

DLSS SR e RR ficam mais bonitos, DLSS FG fica mais rápido e econômico

Como resultado, a Nvidia cita melhor estabilidade de imagem, mais detalhes em movimento e menos fantasmas como melhorias esperadas com DLSS 4 para o algoritmo de super resolução. A reconstrução de raios DLSS também fornece melhor estabilidade e manuseio de imagem em ambientes de iluminação complexos.

Benefícios do Nvidia DLSS 4 (Imagem: Nvidia)

A geração de quadros DLSS 4 foi projetada para ser mais rápida que o DLSS 3 FG original. A nova rede neural deverá ser capaz de realizar essa tarefa 40% mais rápido. Isso poderia resolver uma desvantagem do DLSS FG que sempre apareceu nos jogos: um aumento bastante baixo no FPS. Essa mudança foi conseguida ao não utilizar mais o hardware de fluxo óptico nas unidades tensoras, sendo a função de fluxo óptico fornecida pela rede neural. Além disso, o consumo de memória teria sido reduzido; a rede neural precisaria de 30% menos VRAM para geração de quadros. A Nvidia cita como exemplo Warhammer 40.000: Darktide, onde a nova rede deve oferecer 10% mais FPS e ao mesmo tempo exigir 400 MB a menos de VRAM.

Nvidia DLSS 4 Super Resolution, DLSS 4 Ray Reconstruction e DLSS 4 Frame Generation não estarão disponíveis apenas nas novas placas gráficas GeForce RTX 5000, mas serão suportadas por todas as placas gráficas GeForce RTX. DLSS 4 FG está reservado para cartões RTX 4000 ou mais recentes.

DLSS SR e RR são inicialmente uma versão beta

Embora o DLSS 4 FG já esteja finalizado, o DLSS 4 SR e o DLSS 4 RR aparecerão pela primeira vez na versão beta. O feedback resultante deverá então ser incorporado na versão final assim que estiver pronta. As versões beta devem eventualmente ser instaladas por jogo usando o aplicativo Nvidia e a opção “DLSS Override”.

Desempenho do Nvidia DLSS 4 FG (versão: Nvidia)

Geração multiframe DLSS 4 – Somente com RTX 5000

O próximo novo recurso, DLSS 4 Multi Frame Generation, funcionará apenas nas novas placas gráficas GeForce RTX 5000 e, portanto, nas anunciadas GeForce RTX 5090, GeForce RTX 5080, GeForce RTX 5070 Ti e GeForce RTX 5070.

O DLSS MFG pega a ideia de geração de quadros DLSS e simplesmente dá um passo adiante. Não é mais uma única imagem gerada artificialmente, mas três são colocadas entre duas imagens renderizadas. Em outras palavras, de 5 imagens geradas com DLSS MFG, apenas 2 imagens são renderizadas e 3 imagens são geradas artificialmente.

Redes neurais operando simultaneamente a 5 por quadro devem ser possibilitadas pela nova rede neural do DLSS 4 e pelas novas unidades tensoras da arquitetura Blackwell. Sem isso, o cálculo dos quadros adicionais não aumentaria a taxa de quadros, mas a diminuiria. De acordo com a Nvidia, até 93% dos pixels da tela agora podem ser criados artificialmente com DLSS 4 SR + MFG.

DLSS 4 – mais de 93% dos pixels agora são gerados por inteligência artificial (Imagem: Nvidia)

O ritmo dos quadros deveria ser melhor

Diz-se que o DLSS 4 MFG tem uma taxa de quadros melhor que o DLSS 3 FG, porque este último não é mais executado pela CPU. Em vez disso, deve-se usar a chamada “medição de inversão de hardware”, o que significa que a saída das imagens agora é realizada pelo mecanismo de exibição da GPU. Isso dá à Nvidia muito mais controle sobre o ritmo de quadros, que agora deve funcionar simultaneamente com DLSS 4 Multi Frame Generation.

Nvidia anuncia cerca de 70% mais FPS

A Nvidia cita uma vantagem de desempenho do DLSS 4 MFG sobre a geração de quadros “normal” de 70%. A Nvidia mostra benchmarks para 6 jogos diferentes e há flutuações no uso de MFG. As vantagens nos diferentes benchmarks variam entre 39% e 133%. Tal como acontece com a geração de imagens, o benefício pode variar de título para título.

Benchmarks Nvidia DLSS 4 MFG (Imagem: Nvidia)

A nova rede neural de Super Resolução DLSS, DLSS Ray Reconstruction e DLSS Frame Generation é retrocompatível com jogos DLSS já disponíveis e pode ser atualizada, por exemplo, através do aplicativo Nvidia (relatório), o mesmo vale para DLSS Multi Frame Generation: suporta um jogo DLSS FG, pode opcionalmente ser atualizado para DLSS MFG com uma placa gráfica GeForce RTX 5000. A Nvidia menciona explicitamente essa possibilidade e fala sobre isso. 75 títulos que funcionarão com DLSS 4 MFG desde o primeiro dia. Contudo, isto pode não se aplicar a todos os títulos; a situação não é totalmente clara.

Substituição do Nvidia DLSS no aplicativo Nvidia (Imagem: Nvidia)

Além da capacidade de tornar os jogos “compatíveis com MFG” através do aplicativo Nvidia, também haverá jogos que suportam nativamente MFG DLSS. A funcionalidade é então exibida de acordo no menu gráfico. Alan Wake 2, Cyberpunk 2077, Indiana Jones and the Great Circle e Star Wars Outlaws suportarão DLSS 4 MFG nativamente no primeiro dia, com Black Myth: Wukong, Baraka: Bladepoint, Marvel Rivals e Microsoft Flight Simulator 2024 seguindo mais tarde. Os jogos ainda a serem lançados Black State, Doom: The Dark Ages e Dune: Awakening também suportarão DLSS 4 MFG desde o início.