在2025年CES展会期间的RTX Blackwell编辑日活动上,Nvidia应用深度学习研究副总裁布莱恩·卡坦扎罗(Brian Catanzaro)登台,为大家揭开了DLSS 4的神秘面纱以及其背后不为人知的训练故事。
卡坦扎罗指出,DLSS 4实现了从卷积神经网络转向新型Transformer模型的革命性变化。而在这一重大变革的背后,是英伟达持续六年的不懈努力与学习。
据悉,英伟达拥有一台庞大的超级计算机,这台超级计算机堪称“巨无霸”,内部配备了数千张英伟达最新最强的GPU。在过去的六年里,它全年无休,每天24小时不间断地运行,只为提升DLSS的质量。
在这六年的持续运行中,英伟达的研究团队始终在对DLSS模型进行深入分析。当DLSS模型出现错误,导致游戏画面中产生鬼影、闪烁或模糊等问题时,他们会在众多游戏中仔细寻找并发现这些问题,然后深入探究问题的根源,试图弄清楚模型在图像绘制时为何会做出错误的选择。
为了不断优化DLSS模型,英伟达还在持续扩充其训练数据集。他们不断收集优秀画面的示例以及DLSS需要解决的各种困难问题,将这些宝贵的数据添加到训练集中,随后对模型进行重新训练。并且,重新训练后的模型会在数百款游戏中进行严格测试,以验证改进的效果,从而找出进一步提升DLSS的方法。
值得一提的是,在CES 2025上,DLSS 4多帧生成技术首次亮相,可与全套DLSS技术协同运行,与传统渲染技术相比,性能提升至高可达8倍,目前仅GeForce RTX 50系列GPU支持DLSS 4。该技术利用AI可为每个渲染帧额外生成多达3帧,通过对前后帧的分析,准确预测出每一帧的变化,并利用AI技术生成高质量的图像,可实现传统渲染8倍的性能提升。同时,DLSS 4还引入了图形行业首个Transformer模型实时应用,基于Transformer架构的DLSS超分辨率和光线重建模型,相比卷积神经网络(CNN)模型来说,具备2倍的参数量和4倍的计算量,在游戏场景中,能够提供更高的稳定性、更少的拖影、更高的细节和更强的抗锯齿能力,使画面更加清晰、流畅和逼真。
在游戏支持方面,DLSS 4首发当天已经支持超过75款游戏和应用程序,包括《赛博朋克2077》《战神:诸神黄昏安纳琼斯与大圈》《沙丘:觉醒》《毁灭战士:黑暗时代》等,《黑神话:悟空》将于今年晚些时候升级支持DLSS多帧生成,随着时间的推移,支持DLSS 4的游戏和应用数量将不断增加。