Nvidia新GPU驱动程序能以AI提高流媒体视频观看分辨率

Nvidia在GeForce RTX 40与30系列最新的GeForce Game Ready驱动程序,加入图片超级分辨率(Video Super Resolution,VSR)功能支持,用户只要使用微软Edge 110.0.1587.56或是Google Chrome 110.0.5481.105以上版本浏览器,就能将浏览器上低分辨率的流媒体视频,提升至4K分辨率。

GeForce RTX 40与30系列所支持的VSR,是以深度学习模型预测低分辨率图片,进而降低分辨率视频转换成高分辨率版本的技术,如此便能够使物体边缘清晰,动物毛发布现更细致等,过去Nvidia在SHIELD TV电视棒中应用这项技术,将480p的视频提升分辨率至1080p。

由于流媒体视频使用以区块为单位的压缩方法像进行编码,因此会出现块状压缩失真,Nvidia解释,在传统的画质提升算法的放大下,块状压缩失真会更加严重,严重影响低分辨率流媒体视频的观赏体验。

而RTX VSR技术能够通过边缘侦测和特征锐化,提升流媒体视频内容的品质,减少因为视频压缩产生的假影,并且避免材质失真。

RTX VSR在单次处理程序就能提升分辨率和减少压缩失真,Nvidia利用不同压缩程度的视频训练深度学习模型,因此模型了解低分辨率视频存在的压缩失真类型,可从输入的低分辨率视频影格,预测目标分辨率的残差图像(Residual Image),通过将残差图像叠加到经Bicubic分辨率提升算法处理的影格,就能校正假影错误和锐化边缘,最终产生高分辨率图片。