Ángel Aller
— Unkonventioneller Geek.
Experte für Computer und Gaming
Was ist NVIDIA RTX Video Super Resolution oder VSR
NVIDIA RTX Video Super Resolution ist eine Technologie, die Pixel mittels KI verarbeitet, um die Qualität des übertragenen Videoinhalts zu verbessern. Das Team von Jensen Huang hat sich darauf konzentriert, das Problem der Videoübertragung in Google Chrome und Microsoft Edge zu lösen.
Laut NVIDIA macht die Videoübertragung heute fast 80% der Internetbandbreite aus. Wenn wir darüber nachdenken, wird am meisten Video auf Netflix, YouTube und Twitch übertragen.
Trotz der Fortschritte verwenden die meisten Menschen Monitore mit 1080p und viele 4K-Fernseher. Was NVIDIA betrifft, ist der PC, und die Browser müssen das Video skalieren, um die Bildschirmauflösung mit der Videoauflösung abzustimmen. Google, Mozilla, Edge und Opera haben sich nicht den Kopf zerbrochen, weil sie grundlegende Skalierungstechniken verwenden.
Was ist die Konsequenz? Bilder mit geringerer Qualität. Also, "Das grüne Team" beseitigt dies auf einen Schlag mit NVIDIA RTX Video Super Resolution. Auf die Frage, wie sie das machen, werden wir antworten, dass sie mit künstlicher Intelligenz den Inhalt mit niedriger Auflösung (480p, zum Beispiel) verbessern, um ihn auf 4K oder QHD zu skalieren.
Wir wissen, dass NVIDIA viel auf KI setzt, aber in diesem Fall hilft es ihnen, Artefakte zu entfernen und die Schärfe des Videos zu verbessern.
Es muss gesagt werden, dass diese Technologie nicht ganz neu ist, sondern 2019 mit NVIDIA SHIELD TV eingeführt wurde. Jetzt werden die Benutzer ihre RTX 40 und RTX 30 verwenden, um dies zu erreichen, und es scheint uns seltsam, dass sie die NVIDIA RTX 20 nicht einschließen, warum? Weil sie Tensor Cores für das gesamte VSR verwenden, und diese Hardwareteile sind auch in den Turing-Modellen vorhanden.
Wie funktioniert VSR
Das Problem bei der Videoübertragung liegt in den Blockkompressionsartefakten, die durch den Server, den Benutzer oder den Inhalt selbst verursacht werden. Wir können uns einig sein, dass traditionelle Skalierungen weit zurückgeblieben sind und eine schlechtere Leistung und ein schlechteres Bildergebnis liefern.
Wir haben gesagt, dass es KI verwendet, aber welches ist das Trainingsmodell? NVIDIA Video Super Resolution verwendet Deep Learning, genau wie DLSS 3.0. Dieses neuronale Netzwerk analysiert den Frame mit geringerer Auflösung und macht eine Vorhersage des Restbildes in der Auflösung, auf die es skaliert werden soll. Dieses Bild wird über ein "traditionelles" verbessertes Bild gelegt, um Fehler zu korrigieren und die Sägezahnkanten so anzupassen, dass sie mit der endgültigen Auflösung übereinstimmen.
In nur einem Schritt reduziert und verbessert es Kompressionsartefakte. Und diese Deep Learning-Netzwerk ist darauf trainiert, Kompressionsartefakte zu lernen, die wir bei niedrigen Auflösungen sehen.
Abgesehen vom Deep Learning-Teil sehen wir keinen großen Unterschied
Wie man RTX VSR installiert und aktiviert
Sie müssen nur eine NVIDIA RTX 4000 oder 3000 verwenden und ihre Treiber GeForce Game Ready auf die neueste Version aktualisieren. Sobald es installiert ist, müssen Sie es im NVIDIA Control Panel aktivieren.
Sie müssen zu "Bildeinstellungen anpassen" gehen und das Kästchen "RTX Videoverbesserung" aktivieren, indem Sie die Qualität von 1 bis 4 auswählen. Verstehen Sie diese Beziehung von "niedrigerer Leistung zu besserer Skalierungsverbesserung".
Daher verwendet NVIDIA mit VSR eine KI-Skalierung, um Inhalte mit niedriger Auflösung in eine höhere umzuwandeln, indem Bilder mit niedriger Auflösung durch Deep Learning geleitet und so Vorhersagen für hochauflösende Versionen gemacht werden.
Wie trainieren sie das Modell? Mit vielen Bildern in verschiedenen Auflösungen.
Welcher Browser unterstützt NVIDIA RTX Video Super Resolution
Wie es aussieht, funktioniert es nur in Google Chrome und Microsoft Edge. Auf diese Weise bleibt Mozilla Firefox außerhalb dieser großartigen Idee.