2023 年 3 月 8 日，Microsoft Edge 推出了一項稱為視頻超分辨率 (VSR) 的新功能，該功能使用機器學習算法通過消除塊狀壓縮偽影和提升視頻分辨率來豐富在 Edge 中觀看的低分辨率視頻的質量.
不過，Microsoft Edge 的視頻超分辨率 (VSR) 功能有一些用戶需要滿足的要求。他們需要配備 Nvidia RTX 20/30/40 系列或 AMD RX5700-RX7800 系列 GPU 的設備。他們想要增強的視頻的分辨率應為 720p 或更低，並且高度和寬度的最小尺寸為 192 像素。視頻還應不含 PlayReady 或 Widevine 等數字版權管理技術。此外，設備應插入穩定的電源。
目錄
此 VSR（視頻超分辨率）如何工作?
Microsoft 如何實現此功能?讓我們深入研究一些細節。
用於高效 GPU 處理的 ONNX 運行時和 DirectML
Microsoft Edge 的 VSR 功能ONNX Runtime 和 DirectML 技術使之成為可能。它可以被更多人使用，因為它兼容不同的 GPU 品牌。如果有足夠的計算能力，未來會支持更多的顯卡。 VSR 設計中採用的技術並隨著時間的推移不斷完善，以充分利用計算機的顯卡處理能力。 ONNX 運行時從.onnx 文件加載 ML 模型，而 DirectML 通過使用可用的 GPU 功能（例如本機 ML 張量處理）優化和評估 ML 工作負載。這導致 VSR 在高幀速率下實現高執行吞吐量。
另請閱讀-為什麼 Microsoft Edge 不是 Mac 用戶的最佳選擇
僅安裝必要的組件和模型以節省空間
為了節省設備空間，Microsoft 僅在檢測到兼容的 GPU 時才安裝 VSR 的必要組件和模型。如果您在 Edge Canary 的組件下看到“Edge Video Super Resolution”，則表示您的 GPU 可以支持該功能。這種方法允許 Microsoft 根據你的設備的功能和性能提供不同的模型。
引入 DX12 演示管道:在 Microsoft Edge 中啟用 VSR
為 Microsoft Edge 開發了新的 DX12 演示管道允許VSR。此前，Chromium（作為 Microsoft Edge 的基礎）使用 DX11 進行視頻解碼和光柵化，導致視頻解碼後生成 DX11 紋理。但是，由於 DirectML 僅使用 DX12 緩衝區運行，因此必須將靈活的 DX12 管道集成到 Microsoft Edge 中的 Chromium 引擎中以支持 VSR。這個新管道執行著色器以將 DX11 紋理轉換為 DirectML 緩衝區/張量，然後可以與 ONNX 運行時一起使用。
另請閱讀如何在 Microsoft Edge 中啟用或禁用分屏功能
隨時啟用/禁用 VSR
您可以隨時禁用 VSR。要禁用視頻超分辨率功能，只需單擊地址欄中的“高清”圖標，然後選擇“增強視頻”開關即可。禁用此功能將在 Edge 瀏覽器首選項中持續存在於所有站點，並恢復用戶系統上的顯卡驅動程序仍然支持的任何視頻超分辨率功能。
另請閱讀-Microsoft Edge 的 8 個原因適用於 Mac 的最佳瀏覽器
使用機器學習模型和模型壓縮提高視頻質量
視頻質量改進代表豐富視頻質量的過程。它通過使用機器學習模型來提高它們的分辨率、對比度和可讀性來實現這一點。此外，微軟已經形成了一個人工智能驅動的視頻超分辨率模型。這可以將劣質視頻升級為高質量視頻，而不會出現任何偽像。此外，該模型針對分辨率為 360p 或更低的視頻進行了優化。儘管更輕的模型可用於更高的分辨率和幀速率。
視頻增強模型由 Microsoft DeepSpeed 團隊從更大的模型中提煉和壓縮。訓練過程涉及使用具有不同壓縮策略的流行視頻編解碼器合成低質量和高質量視頻對。然後，使用針對感知和生成對抗目標優化的兩階段訓練策略，對模型進行訓練以恢復結構信息和高頻紋理。使用 LPIPS 和 FVD 等指標評估模型的性能。
另請閱讀-Microsoft Edge 不是 Mac 用戶最佳選擇的 8 個原因
改變您的視頻流體驗……
包含視頻超分辨率是一項值得注意的功能。它可以極大地增強您的視頻流體驗，使其更加身臨其境和愉悅。此外，此功能可以提升您喜歡的內容的細節和美感，從而提升其質量。此外，微軟的團隊正在努力完善模型。以及硬件覆蓋範圍，以確保更多用戶可以從這種卓越的體驗中受益。
另請閱讀-如何在 Microsoft Edge 的工具欄上添加或刪除按鈕
我們什麼時候會在 Microsoft Edge 中看到此功能我們的 Edge 瀏覽器?
根據 Microsft 的說法，他們已經開始在 Canary 頻道中與一組選定的客戶一起測試此功能。他們進一步計劃在接下來的幾週內逐步將此功能擴展到更多客戶。此外，他們還計劃在未來擴展我們系統支持的顯卡列表。
另請閱讀-如何在 Microsoft Edge 中啟用或禁用安全 DNS Over HTTPS (DoH)