Seit seiner Gründung steht NVIDIA an vorderster Front, wenn es darum geht, die erforderliche Rechenleistung bereitzustellen, damit Spieleentwickler immersive, realistische Welten erschaffen können. Von programmierbaren Shadern mit der GeForce 3 im Jahr 2001 bis hin zu Echtzeit-Raytracing mit der GeForce RTX 2080 Ti im Jahr 2018 und darüber hinaus haben die Innovationen von NVIDIA die grafischen Fähigkeiten erheblich verbessert. Allerdings bleibt es eine Herausforderung, Fotorealismus innerhalb der Beschränkungen eines 16-Millisekunden-Spielframes allein durch Brute-Force-Berechnungen zu erreichen.

NVIDIA DLSS 5 Resident Evil 9 GraceNVIDIA DLSS 5 Resident Evil 9 Grace (Bild © NVIDIA)

DLSS, das 2018 als KI-Technologie zur Leistungssteigerung eingeführt wurde, hat sich von der Aufskalierung von Auflösungen hin zur Generierung neuer Frames weiterentwickelt. Die diesjährige Vorstellung von DLSS 4.5 auf der CES demonstrierte das Potenzial der KI, indem 23 von 24 Pixeln auf dem Bildschirm gezeichnet wurden. Nun ist DLSS bereit, die visuelle Wiedergabetreue in Spielen zu revolutionieren.

Wo es bei DLSS 4 noch um die Steigerung der Anzahl an generierten Frames ging, will NVIDIA bei DLSS 5 scheinbar eine Art Filter über die Modelle legen. An den ganzen Beispielen sieht man, dass die Gesichter stark verändert sind und den Charakter verlieren, den die Entwickler eigentlich abgestimmt haben. Man erkennt Ruflektionen und Schatten im Augenbereich als auch Falten, die vorher nicht so stark ausgeprägt waren - aber auch eine Art übersteuerter Schärfe. Wir sehen hier auch Ähnlichkeiten zu KI-generierten Bildern, die eine gewisse, wiederholte Ähnlichkeit aufweisen. Vermutlich wird NVIDIA noch einiges anpassen und mit den Entwicklerstudios entsprechende Änderungen vornehmen.

NVIDIA DLSS 5 Hogwarts LegacyNVIDIA DLSS 5 Hogwarts Legacy (Bild © NVIDIA)

Entwicklung von DLSS

Während Video-KI-Modelle bei der Erzeugung fotorealistischer Pixel Fortschritte gemacht haben, arbeiten sie in der Regel offline und verfügen nicht über die präzise Steuerung, die für Echtzeitanwendungen wie Spiele erforderlich ist. DLSS 5 will dieses Problem durch den Einsatz eines KI-Modells lösen, das die Farb- und Bewegungsvektoren jedes Frames analysiert, um Szenen mit fotorealistischer Beleuchtung und Materialien zu versehen. Dieser Prozess ist an den 3D-Quellinhalten verankert und gewährleistet so Konsistenz über alle Frames hinweg.

DLSS 5 arbeitet in Echtzeit mit einer Auflösung von bis zu 4K und sorgt so für flüssiges und interaktives Gameplay. Das KI-Modell wird durchgängig trainiert, um komplexe Szenensemantiken wie Charaktere, Haare, Stoffe und Umgebungslichtverhältnisse aus einem einzelnen Frame zu erkennen. Dieses Verständnis ermöglicht es DLSS 5, visuell präzise Bilder zu erzeugen, die die Struktur und Intention der Originalszene beibehalten und gleichzeitig komplexe Elemente wie Subsurface Scattering auf der Haut, den Glanz von Stoffen und Licht-Material-Interaktionen im Haar verarbeiten.

NVIDIA DLSS 5 HogwartsNVIDIA DLSS 5 Hogwarts (Bild © NVIDIA)

DLSS 5 soll Spieleentwicklern detaillierte Einstellungsmöglichkeiten für Intensität, Farbkorrektur und Maskierung bieten, sodass Grafiker die Verbesserungen nahtlos an die einzigartige Ästhetik jedes Spiels anpassen können. Dennoch sind die Abweichungen an den Beispielen deutlich sichtbar. Der Integrationsprozess ist unkompliziert und nutzt das NVIDIA Streamline-Framework, das bereits von bestehenden DLSS- und NVIDIA Reflex-Technologien verwendet wird.

NVIDIA DLSS 5 Resident Evil 9NVIDIA DLSS 5 Resident Evil 9 (Bild © NVIDIA)

Wo DLSS 5 genutzt wird

DLSS 5 hat die Unterstützung vieler bekannter Publisher und Entwickler, darunter Bethesda, CAPCOM, Hotta Studio, NetEase, NCSOFT, S-GAME, Tencent, Ubisoft und Warner Bros. Games. Todd Howard von Bethesda Game Studios lobte das Potenzial der Technologie, beispiellosen Realismus zu bieten, ohne den künstlerischen Stil zu beeinträchtigen, und deutete Pläne an, DLSS 5 in zukünftige Titel wie Starfield zu integrieren.

Mit der KI-gestützten Funktionen will NVIDIA nun bei DLSS 5 einen anderen Weg einschlagen und die Frage ist hier, ob Gamer das so überhaupt wollen. Wir erwarten deutlich mehr Details vor der offiziellen Verfügbarkeit von DLSS 5. Zu klären ist weiterhin, welche Anforderungen DLSS 5 an die Grafikkarte hat und mit welchen Modellen das funktionieren wird.