Nvidia DLSS 4 i detaljer: Multi Frame Generation og et nyt neuralt netværk

Nvidia 4 i detaljer: Multi Frame Generation og et nyt neuralt netværk 16 kommentarer

Nvidia DLSS 4 i detaljer: Multi Frame Generation og et nyt neuralt netværk

Billede: Nvidia

Efter DLSS 3 er det ingen overraskelse, at DLSS 4 følger. Grundideen blev udviklet og antallet af kunstige stel blev øget. Men det er ikke den eneste ændring, DLSS 4 kommer også med et nyt neuralt netværk, som også skulle bringe forbedringer til ældre teknologier.

Indholdsfortegnelse Multi-frame generation og nyt DLSS 4 neuralt netværk: gammelt og nyt i DLSS opdatering SR og RR bliver smukkere, DLSS FG bliver hurtigere og mere økonomisk. DLSS SR og RR er oprindeligt en betaversion af DLSS 4 Multi Frame Generation – Kun med RTX 5000 formodes billedhastigheden at blive bedre. Nvidia siger omkring 70% mere FPS

DLSS 4: gammelt og nyt i opdateringen

DLSS Ray Reconstruction, DLSS Super Resolution og DLAA beregnes nu af et nyuddannet neuralt netværk, som er en transformermodel og derfor den samme grundlæggende arkitektur som ChatGPT f.eks. Tidligere brugte man “convolutional neural networks” (CNN), men det har ifølge Nvidia nået grænsen for, hvad der er muligt.

Fordi CNN hovedsageligt overvåger pixelbevægelser i et bestemt område på tværs af flere billeder. Hvis pixlen forsvandt fra dette område, forsvandt den tidligere opnåede information også. Det nye neurale netværk baseret på “Vision Transformer” kan på den anden side observere pixels på tværs af hele billedet og på tværs af flere billeder og selvstændigt vurdere deres betydning. Du bør bruge dobbelt så mange parametre som med det gamle netværk, så det nye netværk bedre kan forstå det gengivne billede.

DLSS SR og RR bliver smukkere, DLSS FG bliver hurtigere og mere økonomisk

Som et resultat citerer Nvidia bedre billedstabilitet, flere bevægelige detaljer og mindre ghosting som forventede forbedringer med DLSS 4 for superopløsningsalgoritmen. DLSS-strålerekonstruktion giver også bedre billedstabilitet og håndtering i komplekse lysmiljøer.

Fordele ved Nvidia DLSS 4 Fordele ved Nvidia DLSS 4 (Billede: Nvidia)

DLSS 4 frame generation er beregnet til at være hurtigere end den originale DLSS 3 FG. Det nye neurale netværk skulle være i stand til at udføre denne opgave 40 % hurtigere. Dette kunne løse en ulempe ved DLSS FG, der altid har optrådt i spil: en forholdsvis lav stigning i FPS. Denne ændring blev opnået ved ikke længere at bruge den optiske flow-hardware i tensorenhederne, hvor den optiske flow-funktion blev leveret af det neurale netværk. Derudover ville hukommelsesforbruget være blevet reduceret; det neurale netværk ville have brug for 30 % mindre VRAM til framegenerering. Nvidia nævner Warhammer 40.000: Darktide som eksempel, hvor det nye netværk skulle tilbyde 10 % mere FPS og samtidig kræve 400 MB mindre VRAM.

Nvidia DLSS 4 Super Resolution, DLSS 4 Ray Reconstruction og DLSS 4 Frame Generation vil ikke kun være tilgængelige på de nye RTX 5000-, men vil blive understøttet af alle GeForce RTX-grafikkort. DLSS 4 FG er reserveret til RTX 4000 eller nyere kort.

DLSS SR og RR er oprindeligt en betaversion

Mens DLSS 4 FG allerede er endelig, vises DLSS 4 SR og DLSS 4 RR først i beta. Den resulterende feedback bør derefter inkorporeres i den endelige version, så snart den er klar. Betaversioner skulle i sidste ende kunne installeres pr. spil ved hjælp af Nvidia-appen og muligheden “DLSS Override”.

Nvidia DLSS 4 FG ydeevne Nvidia DLSS 4 FG ydeevne (version: Nvidia)

DLSS 4 multi-frame generation – Kun med RTX 5000

Den næste nye funktion, DLSS 4 Multi Frame Generation, vil kun fungere på de nye GeForce RTX 5000-grafikkort og derfor de annoncerede GeForce RTX 5090, GeForce RTX 5080, GeForce RTX 5070 Ti og GeForce RTX 5070.

DLSS MFG tager ideen om DLSS frame generation og tager det blot et skridt videre. Et enkelt billede er ikke længere kunstigt genereret, men tre er placeret mellem to gengivede billeder. Med andre ord, ud af 5 billeder genereret med DLSS MFG er kun 2 billeder gengivet og 3 billeder er kunstigt genereret.

Neurale netværk, der opererer samtidigt med 5 pr. frame, bør gøres mulige af det nye neurale netværk af DLSS 4 og de nye tensorenheder i Blackwell-arkitekturen. Uden dette ville beregning af de ekstra frames ikke øge billedhastigheden, men ville sænke den. Ifølge Nvidia kan op til 93 % af skærmpixel nu skabes kunstigt med DLSS 4 SR + MFG.

DLSS 4 – mere end 93% af pixels er nu genereret af kunstig intelligens DLSS 4 – mere end 93% af pixels er nu genereret af kunstig intelligens (Billede: Nvidia)

Frame pacing burde være bedre

DLSS 4 MFG siges at have en bedre billedhastighed end DLSS 3 FG, fordi sidstnævnte ikke længere udføres af CPU’en. I stedet skal der bruges såkaldt “hardware flip metering”, hvilket betyder, at outputtet af billederne nu udføres af GPU’ens display-motor. Dette giver Nvidia meget mere kontrol over frame pacing, som nu burde fungere meget sideløbende med DLSS 4 Multi Frame Generation.

Nvidia annoncerer omkring 70 % flere FPS

Nvidia nævner en ydeevnefordel ved DLSS 4 MFG frem for “normal” framegenerering på 70 %. Nvidia viser benchmarks for 6 forskellige spil, og der er udsving i MFG-brug. Fordelene i de forskellige benchmarks ligger mellem 39 procent og 133 procent. Som ved billedgenerering kan fordelen variere fra titel til titel.

Referencer Nvidia DLSS 4 MFG Nvidia DLSS 4 MFG benchmarks (Billede: Nvidia)

Det nye neurale netværk af DLSS Super Resolution, DLSS Ray Reconstruction og DLSS Frame Generation er bagudkompatibelt med allerede tilgængelige DLSS-spil og kan for eksempel opdateres via Nvidia-appen (rapport), det samme gælder for DLSS Multi Frame Generation: understøtter et DLSS FG spil, kan valgfrit opgraderes til DLSS MFG med et GeForce RTX 5000 grafikkort nævner eksplicit denne mulighed og taler om 75 titler, der vil fungere med DLSS 4 MFG fra dag ét. Dette gælder dog muligvis ikke for alle titler; situationen er ikke helt klar.

Nvidia DLSS Overide i Nvidia-appen Nvidia DLSS Overide i Nvidia-appen (Billede: Nvidia)

Udover muligheden for at gøre spil “MFG-kompatible” gennem Nvidia-appen, vil der også være spil, der native understøtter MFG DLSS. Funktionaliteten vises derefter i den grafiske menu. Alan Wake 2, Cyberpunk 2077, Indiana Jones and the Great Circle og Star Wars Outlaws vil understøtte DLSS 4 MFG indbygget på dag ét, med Black Myth: Wukong, Baraka: Bladepoint, Marvel Rivals og Microsoft Flight Simulator 2024, der følger senere. De endnu ikke-udgivet spil Black State, Doom: The Dark Ages og Dune: Awakening vil også understøtte DLSS 4 MFG fra starten.

Emner: Grafikkort CES 2025 GeForce Nvidia Nvidia CES 2025 pressekonference Kilde: Nvidia

Skriv en kommentar

Din e-mailadresse vil ikke blive publiceret. Krævede felter er markeret med *

Scroll to Top