3 月 9 日消息，英偉達(dá)日前通過新驅(qū)動(dòng)上線了RTX VSR 視頻超分辨率技術(shù)。今日，官方發(fā)文對(duì)該技術(shù)進(jìn)行了介紹。
官方表示，RTX VSR 是 AI 圖像處理的一個(gè)突破，它超越了傳統(tǒng)的邊緣檢測(cè)和特征銳化技術(shù)，極大地提升直播視頻內(nèi)容的質(zhì)量。
RTX VSR 可減少或消除因壓縮視頻而產(chǎn)生的偽影，如塊效應(yīng)、邊緣的振鈴偽影、高頻細(xì)節(jié)的消失和平坦區(qū)域的帶狀現(xiàn)象，同時(shí)減少紋理?yè)p失。它還能銳化邊緣和豐富細(xì)節(jié)。該技術(shù)使用深度學(xué)習(xí)網(wǎng)絡(luò)，在單次推理中進(jìn)行圖像放大和減少壓縮偽影。該網(wǎng)絡(luò)分析低分辨率的視頻幀并預(yù)測(cè)目標(biāo)分辨率下的殘差圖像。然后，殘差圖像被疊加到傳統(tǒng)的圖像增強(qiáng)上，糾正偽影錯(cuò)誤并銳化邊緣以匹配輸出分辨率。
該深度學(xué)習(xí)網(wǎng)絡(luò)使用不同壓縮程度的內(nèi)容進(jìn)行訓(xùn)練。它學(xué)習(xí)那些在未壓縮圖像中不存在，但存在于低分辨率或低質(zhì)量視頻中的壓縮偽影的類型，把這些偽影及其未壓縮圖像作為網(wǎng)絡(luò)訓(xùn)練的參考。深度學(xué)習(xí)網(wǎng)絡(luò)還進(jìn)行廣泛的視覺評(píng)估，確保生成的模型適用于幾乎所有的真實(shí)世界和游戲內(nèi)容。
目前，RTX VSR 需要使用 GeForce RTX 40 或 30 系列 GPU，適用于 Google Chrome 和 Microsoft Edge 瀏覽器中的視頻內(nèi)容。Chrome 瀏覽器(110.0.5481.105 或更高版本)和 Edge 瀏覽器(110.0.1587.56 版)近期已新增 RTX VSR 支持。要開啟該技術(shù)，請(qǐng)打開 NVIDIA 控制面板，并打開”調(diào)整視頻圖像設(shè)置”。勾選”RTX 視頻增強(qiáng)”下的超分辨率框，并選擇質(zhì)量 1 到 4 中的一個(gè)等級(jí) —— 質(zhì)量等級(jí)表示圖像增強(qiáng)的質(zhì)量并且也有賴于 GPU 性能。
