英伟达在新一代Blackwell架构GPU中推出了DLSS 4技术,引入了多帧生成技术,能够在每个传统渲染帧之间生成最多三个额外画面,从而显著提升帧率和画面流畅度。同时,这也是自2020年DLSS 2.0发布以来,英伟达对其AI模型进行的最大幅度升级。DLSS光线重建、DLSS超分辨率以及DLAA等功能都将由基于Transformer的AI模型驱动,这标志着视觉Transformer首次被应用于图形领域的实时渲染。
近期发布的NVIDIA DLSS SDK 310.3.0版本除了包含常规的错误修复和性能优化外,还确认了Transformer模型已结束测试阶段,正式投入实际应用。根据英伟达此前介绍,依托Transformer模型不断优化,未来几年图像质量有望持续提升。
新的Transformer模型通过增强时间稳定性、减少画面中的重影现象,并在动态场景中保留更多细节,从而有效提升整体画质表现。过去六年,DLSS一直依赖卷积神经网络(CNN)通过分析局部区域的变化来生成新像素,但目前已接近其技术极限。新型Transformer结构引入了视觉Transformer架构,利用自注意力机制对整个画面中的每个像素进行全局评估,并跨多个帧进行处理。
相比原有的CNN模型,Transformer使用了两倍以上的参数量,使得系统能够更深入地理解整个场景内容,从而生成更加稳定、细节更丰富、边缘更平滑的画面。尤其是在复杂的光线追踪场景中,新模型在图像质量方面的提升尤为明显。无论是在复杂光照条件下,还是在快速运动的场景中,画面稳定性更强,重影现象大幅减少,画面闪烁问题也得到了有效控制。

评论
更多评论