流媒體革命！NVIDIA RTX VSR視頻超分辨率技術初體驗

2023-02-28 21:54:49來源：游俠網

【資料圖】

自從GeForce8800系列第一次引入CUDA以及它所代表的GPU計算以來，AI逐漸從科幻小說的幻想中走向現實世界。無論是在棋盤上干碎柯潔的圍棋AIAlphaGo還是這幾天不斷占據互聯網熱榜的ChatGPT，背后都是各種AI算法作為支撐。

而對于游戲玩家來說，AI進步帶來的最大變化可能就是NVIDIA隨著RTX20系Turing架構GPU引入的DLSS技術。通過使用預訓練的AI，DLSS允許用戶渲染一個較低分辨率的畫面并將它上采樣到設定的輸出分辨率，通過降低顯卡硬性負載的方式來提升游戲幀數。而隨著時代的發展，DLSS技術的效果表現也不斷得到打磨，甚至隨著RTX40系Ada架構GPU的發布我們還得到了能夠進一步無中生有提升幀數表現的DLSS幀生成功能，無論是性能表現還是畫面表現都得到了顯著提高。

DLSS的目的是提升幀數+畫質，但如果我們反其道而行之呢？不去提升幀率，而是通過AI將視頻本身進行超采樣呢？這就要提到我們這期視頻的主角-RTX視頻超分辨率（下文簡稱RTX VSR技術）了。

“RTX 視頻超分辨率 (RTX Video Super Resolution) ”是AI圖像處理放大技術，允許GeForce用戶在1440p或4K以AI增強的清晰度觀看更高分辨率的視頻。GeForce RTX 30和40系列GPU將處理Chrome或Edge瀏覽器上的低分辨率視頻，以提升視頻質量。

原理

RTX VSR技術最大的應用場景是流媒體領域，也就是我們平時在各種網絡平臺觀看的直播與視頻。無論是視頻上傳時的標準化的轉碼還是對所有視頻統一進行存儲、管理直到最后分發到用戶的設備上，這全套流程的成本都十分昂貴，因此幾乎所有流媒體平臺都選擇了壓縮碼率的方式來節約算力、帶寬與成本。這個過程中由于視頻碼率降低，最終的視頻上可能會呈現一些肉眼可見的偽影、殘像或噪點，這就是信息丟失。盡管這些信息丟失大概率并不影響觀眾去完整理解視頻，但它們仍然是十分影響觀看體驗的。

除了有損壓縮外，另外一個問題是低分辨率，這一點尤其在直播中最為明顯。在線直播不僅需要將主播電腦發出的視頻流實時復制到多個觀眾的設備中，還需要讓所有參與者都能看到其他觀眾發出的彈幕與禮物，因此對直播平臺也提出了更高的要求。為了為更多用戶提供服務，直播平臺一般只會提供相對較低分辨率的視頻流，例如1080P甚至更低，這在高分辨率顯示器上的觀看體驗顯然是不佳的。

對于這兩項常見的問題，RTX VSR技術都可以通過GeForce30系或40系顯卡中的RTXTensorCores與AI算法來嘗試修復這些信息，并為用戶提供更高分辨率且高清的畫面。通過將NVIDIATensor Core與最先進的AI圖像處理技術相結合，智能銳化和強化特征和邊緣，同時消除惱人的壓縮偽影。RTX VSR將適用于大多數在瀏覽器中播放的視頻，無論是通過斗魚，虎牙，嗶哩嗶哩等平臺觀看您喜愛的主播的直播，還是觀看他們其它的視頻內容。

只需要使用RTX30系或RTX40系GPU安裝Game Ready驅動 531.14或以上版本，并在NVIDIA控制面板中調整視頻圖像設置功能里啟用RTX VSR技術，就可以在Google Chrome（110.0.5481.105以上）或Microsoft Edge（110.0.1587.56以上）中體驗AI加持下的高清畫面。不過，由于需要使用顯卡中的Tensor Cores，RTX VSR技術會增大看視頻時的GPU占用。針對不同性能的顯卡，NVIDIA控制面板里提供了四種不同的預設，第4檔性能要求最高，但畫面效果也最好；第1檔性能要求最低，但畫面提升也沒有那么顯著，用戶可以綜合自己的需求選擇。

驅動下載地址：https://www.nvidia.cn/geforce/drivers/

標簽： NVIDIA

流媒體革命！NVIDIA RTX VSR視頻超分辨率技術初體驗

相關新聞

電競比賽

電競

熱點