Am 8. März 2023 stellte Microsoft Edge eine neue Funktion namens Video Super-Resolution (VSR) vor, die maschinelle Lernalgorithmen verwendet, um die Qualität von in Edge angezeigten Videos mit niedrigerer Auflösung zu verbessern, indem blockartige Komprimierungsartefakte verworfen und die Videoauflösung hochskaliert werden.
Dennoch stellt die Video-Super-Resolution-Funktion (VSR) von Microsoft Edge einige Anforderungen, die Benutzer erfüllen müssen. Sie benötigen ein Gerät mit einer GPU der Nvidia RTX 20/30/40-Serie oder der AMD RX5700-RX7800-Serie. Die Videos, die sie verbessern möchten, sollten eine Auflösung von 720p oder niedriger und eine Mindestgröße von 192 Pixeln in Höhe und Breite haben. Die Videos sollten außerdem frei von Digital Rights Management-Technologien wie PlayReady oder Widevine sein. Außerdem sollte das Gerät an eine stabile Stromquelle angeschlossen werden.
Inhaltsverzeichnis
Wie funktioniert diese VSR (Video Super-Resolution)?
Wie hat Microsoft diese Funktion ins Leben gerufen? Sehen wir uns einige Details an.
ONNX Runtime und DirectML für effiziente GPU-Verarbeitung
VSR-Funktion von Microsoft Edge wird durch ONNX Runtime und DirectML-Technologien ermöglicht. Es kann von mehr Menschen verwendet werden, da es mit verschiedenen GPU-Marken kompatibel ist. Weitere Grafikkarten werden in Zukunft unterstützt, wenn sie über ausreichend Rechenleistung verfügen. Die im VSR-Design verwendete Technologie, die im Laufe der Zeit verfeinert wurde, um die Rechenleistung Ihrer Grafikkarte optimal zu nutzen. ONNX Runtime lädt ML-Modelle aus.onnx-Dateien, während DirectML die ML-Arbeitslast optimiert und bewertet, indem es verfügbare GPU-Funktionen wie native ML-Tensorverarbeitung nutzt. Dies führt dazu, dass VSR einen hohen Ausführungsdurchsatz bei einer hohen Framerate erreicht.
Lesen Sie auch: Warum Microsoft Edge nicht die beste Option für Mac-Benutzer ist
Installieren Sie nur notwendige Komponenten und Modelle, um Platz zu sparen
Um Speicherplatz auf Ihrem Gerät zu sparen, installiert Microsoft die erforderlichen Komponenten und Modelle für VSR nur, wenn eine kompatible GPU erkannt wird. Wenn „Edge Video Super Resolution“ unter den Komponenten in Edge Canary aufgeführt wird, bedeutet dies, dass Ihre GPU die Funktion unterstützen kann. Dieser Ansatz ermöglicht es Microsoft, verschiedene Modelle basierend auf den Fähigkeiten und der Leistung Ihres Geräts bereitzustellen.
Einführung in die DX12-Präsentationspipeline: Aktivieren von VSR in Microsoft Edge
Eine neue DX12-Präsentationspipeline wird für Microsoft Edge entwickelt VSR zu ermöglichen. Zuvor verwendete Chromium (das als Grundlage für Microsoft Edge dient) DX11 für die Videodecodierung und Rasterung, was zur Generierung von DX11-Texturen nach der Videodecodierung führte. Da DirectML jedoch ausschließlich mit DX12-Puffern arbeitet, muss eine flexible DX12-Pipeline in die Chromium-Engine in Microsoft Edge integriert werden, um VSR zu unterstützen. Diese neue Pipeline führt Shader aus, um DX11-Texturen in DirectML-Puffer/Tensoren umzuwandeln, die dann mit der ONNX-Laufzeit verwendet werden können.
Lesen Sie auch – So aktivieren oder deaktivieren Sie die Split-Screen-Funktion in Microsoft Edge
Aktivieren/Deaktivieren Sie VSR, wann immer Sie möchten
Sie können VSR jederzeit deaktivieren. Um die Video-Superauflösungsfunktion zu deaktivieren, kann man einfach auf das „HD“-Symbol in der Adressleiste klicken und den Schalter für „Videos verbessern“ wählen. Das Deaktivieren dieser Funktion bleibt auf allen Websites in den Edge-Browsereinstellungen bestehen und stellt alle Video-Super-Resolution-Funktionen wieder her, die weiterhin vom Grafikkartentreiber auf dem System des Benutzers unterstützt werden.
Lesen Sie auch – 8 Gründe, warum Microsoft Edge ist Der beste Browser für Mac
Verbesserte Videoqualität mithilfe von Modellen für maschinelles Lernen und Modellkomprimierung
Die Verbesserung der Videoqualität stellt das Verfahren dar, die Qualität von Videos zu verbessern. Dies wird durch den Einsatz von Modellen für maschinelles Lernen erreicht, um deren Auflösung, Kontrast und Lesbarkeit zu verbessern. Außerdem hat Microsoft ein KI-gestütztes Video-Super-Resolution-Modell entwickelt. Dies kann Videos mit schlechter Qualität auf qualitativ hochwertige hochskalieren, ohne Artefakte zu präsentieren. Darüber hinaus optimiert das Modell für Videos mit einer Auflösung von 360p oder weniger. Trotz eines leichteren Modells, das für höhere Auflösungen und Bildraten betrieben wird.
Die Videoverbesserungsmodelle werden von einem viel größeren Modell des Microsoft DeepSpeed-Teams destilliert und komprimiert. Der Trainingsprozess impliziert das Synthetisieren von Videopaaren mit niedriger und hoher Qualität unter Verwendung gängiger Videocodecs mit unterschiedlichen Komprimierungsstrategien. Die Modelle werden dann trainiert, um Strukturinformationen und hochfrequente Texturen unter Verwendung einer zweistufigen Trainingsstrategie wiederherzustellen, die mit Wahrnehmungs-und generativen gegnerischen Zielen optimiert wurde. Die Leistung der Modelle wird anhand von Metriken wie LPIPS und FVD bewertet.
Lesen Sie auch: 8 Gründe, warum Microsoft Edge nicht die beste Option für Mac-Benutzer ist
Transforming Your Video Streaming Experience…
Die Integration von Video Super Resolution ist eine bemerkenswerte Funktion. Es kann Ihr Video-Streaming-Erlebnis enorm verbessern und es immersiver und angenehmer machen. Darüber hinaus kann diese Funktion die Details und Schönheit Ihrer bevorzugten Inhalte verbessern und ihre Qualität erhöhen. Außerdem arbeitet das Team von Microsoft fleißig an der Verfeinerung der Modelle. Und Hardwareabdeckung, um sicherzustellen, dass mehr Benutzer von dieser überlegenen Erfahrung profitieren können.
Lesen Sie auch: So fügen Sie Schaltflächen auf der Symbolleiste in Microsoft Edge hinzu oder entfernen sie
Wann werden wir diese Funktion sehen unser Edge-Browser?
Microsft zufolge hat man damit begonnen, diese Funktion mit einer ausgewählten Gruppe von Kunden im Canary-Kanal zu testen. Sie planen außerdem, diese Funktion in den nächsten Wochen schrittweise auf mehr Kunden auszudehnen. Außerdem planen sie, die Liste der von unserem System unterstützten Grafikkarten in Zukunft zu erweitern.
Lesen Sie auch: So aktivieren oder deaktivieren Sie sicheres DNS über HTTPS (DoH) in Microsoft Edge