Nvidia DLSS 4 en detalle: Multi Frame Generation y una nueva red neuronal

Nvidia DLSS 4 en detalle: Multi Frame Generation y una nueva red neuronal 16 comentarios

Imagen: NVIDIA

Después de DLSS 3, no sorprende que le siga DLSS 4. Se desarrolló la idea básica y se aumentó el número de marcos artificiales. Pero ese no es el único cambio, DLSS 4 también viene con una nueva red neuronal que también debería aportar mejoras a las tecnologías más antiguas.

Tabla de contenido Generación de cuadros múltiples y nueva red neuronal DLSS 4: lo antiguo y lo nuevo en la actualización de DLSS SR y RR se vuelven más bonitos, DLSS FG se vuelve más rápido y económico. DLSS SR y RR son inicialmente una versión beta de DLSS 4 Multi Frame Generation: solo con RTX 5000 se supone que la velocidad de fotogramas mejorará. Nvidia dice alrededor de un 70% más de FPS

Resumen :

DLSS 4: antiguo y nuevo en la actualización

DLSS Ray Reconstruction, DLSS Super Resolution y DLAA ahora se calculan mediante una red neuronal recién entrenada, que es un modelo transformador y, por lo tanto, tiene la misma arquitectura básica que ChatGPT, por ejemplo. Anteriormente se utilizaban “redes neuronales convolucionales” (CNN), pero según Nvidia, esto ha llegado al límite de lo posible.

Porque CNN monitorea principalmente los movimientos de píxeles en una región específica en múltiples fotogramas. Si el píxel desaparecía de esta región, la información obtenida anteriormente también desaparecía. La nueva red neuronal basada en “Vision Transformer”, por otro lado, puede observar píxeles en toda la imagen y en varias imágenes y evaluar de forma independiente su importancia. Debe utilizar el doble de parámetros que con la red anterior para que la nueva red pueda comprender mejor la imagen renderizada.

DLSS SR y RR se vuelven más bonitos, DLSS FG se vuelve más rápido y económico

Como resultado, Nvidia cita una mejor estabilidad de la imagen, más detalles en movimiento y menos imágenes fantasma como mejoras esperadas con DLSS 4 para el algoritmo de súper resolución. La reconstrucción de rayos DLSS también proporciona una mejor estabilidad y manejo de la imagen en entornos de iluminación complejos.

Beneficios de Nvidia DLSS 4 (Imagen: Nvidia)

La generación de cuadros DLSS 4 pretende ser más rápida que el DLSS 3 FG original. La nueva red neuronal debería poder realizar esta tarea un 40% más rápido. Esto podría solucionar un inconveniente de DLSS FG que siempre ha aparecido en los juegos: un aumento de FPS bastante bajo. Este cambio se logró al dejar de utilizar el hardware de flujo óptico en las unidades tensoriales, y la función de flujo óptico la proporcionaba la red neuronal. Además, se habría reducido el consumo de memoria; la red neuronal necesitaría un 30% menos de VRAM para la generación de tramas. Nvidia cita como ejemplo Warhammer 40,000: Darktide, donde la nueva red debería ofrecer un 10% más de FPS y al mismo tiempo requerir 400 MB menos de VRAM.

Nvidia DLSS 4 Super Resolution, DLSS 4 Ray Reconstruction y DLSS 4 Frame Generation no solo estarán disponibles en las nuevas tarjetas gráficas GeForce RTX 5000, sino que serán compatibles con todas las tarjetas gráficas GeForce RTX. DLSS 4 FG está reservado para tarjetas RTX 4000 o más nuevas.

DLSS SR y RR son inicialmente una versión beta

Si bien DLSS 4 FG ya es definitivo, DLSS 4 SR y DLSS 4 RR aparecerán por primera vez en versión beta. Los comentarios resultantes deberían incorporarse a la versión final tan pronto como esté lista. Las versiones Beta eventualmente deberían poder instalarse por juego usando la aplicación Nvidia y la opción “DLSS Override”.

Rendimiento de Nvidia DLSS 4 FG (versión: Nvidia)

Generación de fotogramas múltiples DLSS 4: solo con RTX 5000

La próxima característica nueva, DLSS 4 Multi Frame Generation, solo funcionará en las nuevas tarjetas gráficas GeForce RTX 5000 y, por lo tanto, en las anunciadas GeForce RTX 5090, GeForce RTX 5080, GeForce RTX 5070 Ti y GeForce RTX 5070.

DLSS MFG toma la idea de la generación de cuadros DLSS y simplemente la lleva un paso más allá. Ya no se genera artificialmente una sola imagen, sino que se colocan tres entre dos imágenes renderizadas. En otras palabras, de 5 imágenes generadas con DLSS MFG, solo 2 imágenes se renderizan y 3 imágenes se generan artificialmente.

Las redes neuronales que funcionan simultáneamente a 5 por cuadro deberían ser posibles gracias a la nueva red neuronal de DLSS 4 y las nuevas unidades tensoriales de la arquitectura Blackwell. Sin esto, calcular los fotogramas adicionales no aumentaría la velocidad de fotogramas, sino que la reduciría. Según Nvidia, ahora se pueden crear artificialmente hasta el 93% de los píxeles de la pantalla con DLSS 4 SR + MFG.

DLSS 4: más del 93% de los píxeles ahora se generan mediante inteligencia artificial (Imagen: Nvidia)

El ritmo del cuadro debería ser mejor

Se dice que DLSS 4 MFG tiene una mejor velocidad de fotogramas que DLSS 3 FG, porque este último ya no lo realiza la CPU. En su lugar, se debería utilizar la llamada “medición de inversión de hardware”, lo que significa que la salida de las imágenes la realiza ahora el motor de visualización de la GPU. Esto le da a Nvidia mucho más control sobre el ritmo de cuadros, que ahora debería funcionar de manera muy simultánea con DLSS 4 Multi Frame Generation.

Nvidia anuncia alrededor de un 70% más de FPS

Nvidia cita una ventaja de rendimiento de DLSS 4 MFG sobre la generación de cuadros “normal” del 70%. Nvidia muestra puntos de referencia para 6 juegos diferentes y hay fluctuaciones en el uso de MFG. Las ventajas en los diferentes puntos de referencia oscilan entre el 39 por ciento y el 133 por ciento. Al igual que con la generación de imágenes, el beneficio puede variar de un título a otro.

Puntos de referencia de Nvidia DLSS 4 MFG (Imagen: Nvidia)

La nueva red neuronal de DLSS Super Resolution, DLSS Ray Reconstruction y DLSS Frame Generation es compatible con los juegos DLSS ya disponibles y se puede actualizar, por ejemplo, a través de la aplicación Nvidia (informe), lo mismo ocurre con DLSS Multi Frame Generation: admite un juego DLSS FG, opcionalmente se puede actualizar a DLSS MFG con una tarjeta gráfica GeForce RTX 5000. Nvidia menciona explícitamente esta posibilidad y habla de ella. 75 títulos que funcionarán con DLSS 4 MFG desde el primer día. Sin embargo, es posible que esto no se aplique a todos los títulos; la situación no está del todo clara.

Anulación de Nvidia DLSS en la aplicación Nvidia (Imagen: Nvidia)

Además de la capacidad de hacer que los juegos sean “compatibles con MFG” a través de la aplicación Nvidia, también habrá juegos que admitan de forma nativa MFG DLSS. La funcionalidad se muestra entonces en consecuencia en el menú de gráficos. Alan Wake 2, Cyberpunk 2077, Indiana Jones and the Great Circle y Star Wars Outlaws admitirán DLSS 4 MFG de forma nativa desde el primer día, seguido de Black Myth: Wukong, Baraka: Bladepoint, Marvel Rivals y Microsoft Flight Simulator 2024 más adelante. Los juegos aún por lanzar Black State, Doom: The Dark Ages y Dune: Awakening también serán compatibles con DLSS 4 MFG desde el principio.