圖片:VideoLAN
VideoLAN 推出了新版本的 VLC 媒體播放器，其中包括對 RTX 視頻超分辨率 (VSR) 的支持，這是 NVIDIA 借助 AI 和深度學習網絡提升低質量視頻的新技術。 VLC 3.0.19 RTX Vetinari 是流行媒體播放器“Vetinari”分支的特殊版本對於 RTX 升級，VideoLAN 已經確認，根據更改日誌，此版本的 VLC 在支持該功能的 NVIDIA GeForce RTX GPU（即 GeForce RTX 30 和 40 系列）上默認激活 VSR 升級。一些用戶聲稱 NVIDIA VSR 能夠像 madVR 一樣升級視頻，後者是 madshi 廣受歡迎的視頻渲染器，允許用戶從各種不同的視頻渲染器中進行選擇高質量的升級器，包括 GPU 密集型 NGU 模型，但基於在線共享的一些比較 (1, 2)，結果的接收肯定因用戶而異。
從NVIDIA 帖子:
RTX VSR是 AI 像素處理領域的一項突破，可顯著提高流媒體視頻內容的質量，超越邊緣檢測和特徵銳化。
塊狀壓縮偽影是流媒體視頻中的一個長期存在的問題。無論是服務器、客戶端還是內容本身的故障，傳統的放大問題往往會被放大，給觀看流媒體內容的人留下不太愉快的視覺體驗。
RTX VSR 減少或消除壓縮引起的偽像視頻——例如塊效應、邊緣周圍的振鈴偽影、高頻細節的沖刷和平坦區域的條帶——同時減少丟失的紋理。它還可以銳化邊緣和細節。
該技術使用深度學習網絡，可在單次傳遞中執行放大和壓縮偽影減少。網絡分析較低分辨率的視頻幀並預測目標分辨率下的殘差圖像。然後將此殘差圖像疊加在傳統的放大圖像之上，糾正偽影錯誤並銳化邊緣以匹配輸出分辨率。
深度學習網絡在具有各種壓縮級別的廣泛內容上進行訓練。它了解低分辨率或低質量視頻中存在的壓縮偽影類型，這些壓縮偽影在未壓縮圖像中不存在，作為網絡訓練的參考。採用廣泛的視覺評估以確保生成的模型對幾乎所有現實世界和遊戲內容都有效。
在我們的論壇上加入對這篇文章的討論…