NVIDIA宣布推出DLSS3.5这是升级技术的下一个重大更新

导读 NVIDIA宣布推出DLSS3 5,这是升级技术的下一个重大更新,现在可以加速光线追踪,并通过AI使其看起来更好。NVIDIADLSS3 5使用AI加速光线追踪

NVIDIA宣布推出DLSS3.5,这是升级技术的下一个重大更新,现在可以加速光线追踪,并通过AI使其看起来更好。

NVIDIADLSS3.5使用AI加速光线追踪,提高所有RTXGPU的保真度

今天是DLSS在2018年科隆游戏展上首次推出的5周年纪念日。自此,该技术已成为NVIDIARTXGPU的基本组成部分,并且在NVIDIA的AI超级计算机始终努力工作的帮助下,不断进行增量更新,使该技术变得更好在训练模型时。继DLSS1之后,该公司推出了四项主要更新,如下所列:

今年,在Gamescom2023上,NVIDIA揭开了其第二个主要DLSS3更新(称为DLSS3.5)的面纱。在DLSS3.5中,NVIDIA通过帮助训练DLSS的相同AI模型专门增强了光线追踪。但要了解DLSS3.5的作用,我们必须了解光线追踪的传统工作原理。

典型的光线追踪照明管道首先生成具有材质和几何形状的场景。此时,没有应用任何光照效果。然后使用反射和全局照明等各种照明效果对该图像进行采样。

NVIDIADLSS3.5使用AI加速光线追踪,提高所有RTXGPU的保真度2

在下面的示例图像中,您可以看到场景没有完全覆盖,留下黑色像素,这些像素是照明信息中的间隙,并且这些空白空间留在那里,因为您无法拍摄足够的光线来填充每个像素,或者当它们会反弹,但分布不均匀。因此,结果是,无论场景中有多少光线,总会丢失像素。

NVIDIADLSS3.5使用AI加速光线追踪,提高所有RTXGPU的保真度3

这就是降噪器发挥作用的地方,它分析这些采样的光线并使用空间和时间技术填充缺失的像素。游戏引擎可以为每个闪电效果包含多个降噪器。降噪器完成工作后,合成RT图像,然后放大到原始分辨率。降噪器使用以下方法:

虽然这些降噪器可以针对某一特定标题进行手动调整,但它们可能会导致光照效果不准确、全局照明质量较低以及反射质量较低。此外,降噪器还可以去除放大所需的高频颜色数据,导致应用RT后的最终图像缺乏细节。

因此NVIDIA设计了一种新的解决方案来解决这些问题,最新一代的DLSS就在这里,DLSS3.5。DLSS3.5在DLSS管道中添加了一项全新功能,称为RR或射线重建。射线重建本质上是取代我们上面讨论的传统RT管道中使用的多个降噪器。

NVIDIADLSS3.5使用AI加速光线追踪,提高所有RTXGPU的保真度5

NVIDIA表示,RR的训练数据量是DLSS3的5倍,这就是为什么它使RR成为在游戏和引擎中实施的更明智的选择。RR经过训练,可以合并额外的引擎数据,识别不同的光线追踪效果,识别好坏的时间和空间像素,并保留高频数据以进行升级。

NVIDIADLSS3.5使用AI加速光线追踪,提高所有RTXGPU的保真度6

通过对传统降噪器和启用DLSS3.5的特写比较,我们可以看到新的超级采样技术保留了好像素并丢弃了坏像素,与简单地混合采样光线和像素的降噪器相比,光线追踪质量要好得多。导致照明不准确。这种巨大的差异是由于离线训练的巨大数据集而实现的,并且其计算强度远远高于实时可用的数据集。

NVIDIADLSS3.5使用AI加速光线追踪,提高所有RTXGPU的保真度7

在运行PortalRTX和Cyber​​punk2077的多个比较图像中,我们可以看到DLSS3.5及其神经训练数据集提供了极其优越的RT照明,看起来更加真实,不会使图像看起来模糊或留下丢失的照明点。

照明再次只是RT的一个方面,反射也利用了新的AI模型,提供了更少模糊的图像,因为原始图像的数据被保留,而不是像降噪器那样混合在一起。这会导致最终渲染图像中的反射更加清晰。

NVIDIADLSS3.5使用AI加速光线追踪,提高所有RTXGPU的保真度8

更好的RT质量和更好的性能

那么所有RT优点都意味着它会对GPU造成负担,对吗?事实并非如此,启用DLSS3.5的光线重建将带来比普通DLSS3更好的性能。在《赛博朋克2077》的一个示例中,我们可以看到关闭DLSS和使用各种AI技术之间的性能差异。

NVIDIADLSS3.5使用AI加速光线追踪,提高所有RTXGPU的保真度9

关闭DLSS并启用RT-Overdrive(路径追踪)时,游戏可产生21FPS。启用DLSS2超分辨率后,您可以将FPS大幅提高3倍以上,同时保持良好的IQ(图像质量),而DLSS3使用FG(帧生成)技术进一步将其提升到一个新的水平,提供更高的性能。然后,我们新推出了DLSS3.5,它在这些基础上添加了比DLSS3更好的性能,同时也是RT优点的视觉奇观。您可以看到DLSS3.5如何比其他方法更真实地填充墙壁和各种表面上的闪电。

NVIDIA解释说,导致性能提高的一个方面是他们可以用单个AI模型取代多个丹尼尔,最终性能将取决于游戏的不同。此外,DLSS3.5将不仅仅局限于游戏,还拥有主要的内容创作和Pro优势。D5渲染器也将获得DLSS3.5更新,允许使用RT渲染图像,尽显其荣耀!

在集成方面,NVIDIA表示,他们将使光线重建与实现超分辨率一样容易使用插件实现。开发人员只需关闭内部降噪器,因为信息必须传递到DLSSAI模型。因此,从集成的角度来看,这听起来不错,我们预计未来一年会有更多RR增强型游戏。