在科隆游戏展2024前夕解禁的《黑神话:悟空》让许多玩家直接变成了天命人,直接拉开了一年一度游戏盛宴的序幕。在众神仙斗法的德国科隆,一款3A游戏发布肯定是不够的,NVIDIA一口气多项硬件、技术和新游戏支持连发,又将游戏体验向前推进了一步。在开展前期,我们有幸参加了NVIDIA媒体预沟通会,现在不妨让我们花点时间,一起了解NVIDIA在什么领域放了大招。

打开网易新闻 查看精彩图片

RTX有600款游戏和应用了

可以说大力水手DLSS是推动游戏体验提升的因素,这是一个需要硬件、驱动、游戏设计相结合的过程,需要花费大量的时间和精力进行推广。在科隆游戏展上,NVIDIA宣布支持RTX的游戏和应用已经超过了600款,相比这项技术刚推出仅有两位数的游戏和软件支持,RTX通过DLSS已经发生了质变。

打开网易新闻 查看精彩图片

在过去数年中,NVIDIA研究团队一直在深挖利用DLSS改善游戏的实际体验,寻找在后摩尔定律时代寻找一种仍然能保持性能高速增长的方式。DLSS 2.x进化到DLSS 3就是很好的例子。

DLSS 3运行的前提是第四代Tensor Core,第四代Tensor Core的FP16、BF16、TF32、INT8、INT4性能相对前一代提升两倍以上,并增加了FP8 Transformer Engine,给AI加速提供了性能基础。而DLSS本质是一种卷积自编码器,在DLSS 3上NVIDIA团队找到了利用光流加速器(Optical Flow Acceleration,OFA)与DLSS相结合的办法,构建出了一个更为立体的分析方式,将卷积自编码器的输入源扩展到几个部分,分别是:之前帧与当下帧,由光流加速器生成的光流场、游戏运动矢量和深度等数据。

打开网易新闻 查看精彩图片

可以这么理解,DLSS 3并非单一技术,而是软硬件协同的打包方案,在软件层面,DLSS 3使用AI超分辨率生成,AI生成帧,加入对NVIDIA Reflex支持。在硬件层面,DLSS 3需要在第四代Tensor Core上运行,并利用改进的光流加速器帮助DLSS 3像素级的测量场景,最后云端的NVIDIA超级计算机则夜以继日的寻找提升高质量图像的途径。

DLSS 3在光流加速器的搭配下实现了脱离GPU渲染重建高分辨率方法,让GPU渲染的部分大幅减少,以两帧为例,DLSS 3会承担起第一帧的3/4的工作和第二帧的所有工作,实际上GPU只需要完成其中的1/8的渲染即可,从而节省了大量的计算资源。

打开网易新闻 查看精彩图片

在科隆游戏展上宣布支持NVIDIA DLSS的游戏还包括,《龙腾世纪:影障守护者》,《沙丘:觉醒》,在未来无疑将会有更多游戏加入到NVIDIA DLSS阵营中。具体的参考如下:

《龙腾世纪:影障守护者》,支持DLSS 3、Reflex和光线追踪

《沙丘:觉醒》,支持DLSS 3和Reflex

《最终幻想16》,支持DLSS 3、DLAA和Reflex

黑神话:悟空》,支持DLSS 3和全景光线追踪

《半衰期2 RTX版》,支持DLSS 3.5和全景光线追踪

打开网易新闻 查看精彩图片
打开网易新闻 查看精彩图片

《黑神话:悟空》很带劲

《黑神话:悟空》作为当下最热门的游戏,同样也是DLSS 3的受益者,特别是对于追求最高画质的同学而言,开启全景光线追踪是提升体验的重要途径。NVIDIA展示了全景光线追踪开启和关闭之后的差距,比如山涧小溪波光和石头青苔上的漫反射。

打开网易新闻 查看精彩图片

再比如光线打入水下石头的光泽。

打开网易新闻 查看精彩图片

全景光线追踪实际上是路径追踪(Path Tracing),它是光线追踪(Ray Tracing)的扩展,可以获得更真实的光照效果,当然也需要更强的算力甚至GeForce RTX 40专门硬件的支持。为了实现全局光照,路径追踪会从交点出发,随机生成光线路径,这些路径可以包括反射、折射和散射等多种光照效果。每条路径都在不断跟踪光线的传播,直至光线离开场景或者被吸收。光线路径会被进行随机采样,累积每条路径的光照信息,最终生成像素的颜色值。

这样的做法可以更自然的处理全局光照效果,包括光照、光线的多次反射和折射、漫反射等。同时也因为进行随机采样,光照能够接近于真实,但代价就是需要更多的算力资源。

因此我们会看到在4K分辨率,影视级画质,开启最高全景光线追踪的前提下,所有GPU运行都会感到非常大的压力,这时候唯有依靠DLSS 3通过AI提升游戏的整体流畅度,也从而让包括GeForce RTX 4060在内的所有GeForce RTX 40系列GPU都可以流畅运行《黑神话:悟空》。

打开网易新闻 查看精彩图片

从目前的情况来看,《黑神话:悟空》先支持的是DLSS 3,与《赛博朋克2077》类似,会在后续的升级中进而支持DLSS 3.5。

让细节提升25倍!

另一款《星球大战:亡命之徒》则将一步到位,支持光追和DLSS 3.5规格。在DLSS 3.5中,光线追踪会引入一套名为光线重建技术,将AI驱动的神经渲染器变成GeForce RTX GPU光追中的一部分,原本人工调整的降噪器被替换成AI网络实现,也就是由GPU接手游戏制作过程中,代替制作团队的手工添加,从而获得光线重建加速,利用全新的AI模型,实现游戏中的密集光追和应用中创建更高质量光线追踪图像效果。

从数据量上来看,DLSS 3.5训练数据是DLSS 3的5倍,可以识别出不同的光线追踪效果,并通过时间、空间数据做出更明智的决策,通过保留高频信息实现高质量的光线追踪图像升级。

打开网易新闻 查看精彩图片

另外《半衰期2》也将会制作一个全景路径追踪搭配DLSS 3.5的版本,这也是NVIDIA RTX REMIX项目的一个部分,即利用RTX Remix替换掉了原版游戏中的低分辨率材质,转而使用更高清、包含丰富多边形的模型。只需要很短的制作周期,就能让老游戏焕然一新,之前的《传送门RTX版》就是这样做的。

其中《半衰期2 RTX版》的Nova Prospekt卡关将在科隆游戏展上首次亮相,不仅包含了全景光线追踪、DLSS 3.5,也替换了高分辨率模型,4K纹理提升了800%,细节是原版游戏的25倍。

打开网易新闻 查看精彩图片

NVIDIA ACE联动《解限机》

NVIDIA ACE在科隆游戏展上也再次迎来更新,包括更新了NVIDIA Nemotron-4 4B NIM小模型在本地实现AI加速。小模型相对大模型而言对硬件和存储要求更低,能够在本地PC上运行,利用单个GPU实现快速响应和加速,对游戏的体验也更为友好。

打开网易新闻 查看精彩图片
打开网易新闻 查看精彩图片

重点是这项技术开始在西山居的《解限机》付诸实践,有西山居旗下的Amazing Seasun Games团队实现,通过自然语音与助手进行自然交互,就能在游戏准备界面更换机甲、装备等工作,当然,作为AI NPC,你也可以尝试跟助手唠嗑。

打开网易新闻 查看精彩图片

将运动清晰度提升至1000Hz

最后一项关于玩家的重要更新来自G-SYNC。NVIDIA宣布与著名的芯片厂商MTK(MediaTek)展开合作,对,就是近期开始不断挑战骁龙SoC的那家联发科。NVIDIA与MTK将推出全新的G-SYNC芯片,给电竞显示器提供更丰富的G-SYNC技术。

打开网易新闻 查看精彩图片

如果你有关注这两年的G-SYNC,会发现显示器领域升级也非常大,比如2023年推出了ULMB2(超低动态模糊技术 2)以及今年CES2024期间推出的G-SYNC Pulsar。

打开网易新闻 查看精彩图片

G-SYNC Pulsar是目前所有显示技术的集大成者,你可以将其看成是可变刷新率 (VRR) 技术的新一代升级技术,以往在做显示器设置时,我们只能在可变刷新和超低动态模糊 (ULMB)中二选一,现在G-SYNC Pulsar已经可以做到全都要,并且在今年发布的ROG Swift PG27显示器上,将运动清晰度提升至1000Hz,这是非常恐怖的。

打开网易新闻 查看精彩图片

实现G-SYNC Pulsar技术的本质是根据显示器的刷新率,调整背光脉冲与屏幕刷新周期之间的同步关系,因此需要硬件与软件的双重配合,NVIDIA与MTK合作主要目的就是可以打包一个完整的解决方案,让更多的OEM厂商可以付诸实践。

打开网易新闻 查看精彩图片
打开网易新闻 查看精彩图片
打开网易新闻 查看精彩图片

在科隆游戏展2024上,将会有三款显示器宣布支持,包括AOC AGON PRO AG276QSG2,Acer Predator XB273U F5和ASUS ROG Swift 360Hz PG27AQNR。在NVIDIA官网也提供了完整的显示器选购列表,最高可达97英寸,用电视玩顶级3A大作的选择越来越多了。

打开网易新闻 查看精彩图片
打开网易新闻 查看精彩图片

另外NVIDIA GeForce NOW流媒体游戏库也更新到了2000款,包括《黑神话:悟空》、《星球大战:亡命之徒》和《最终幻想16》,不过与国内关系不大,这里不做重点介绍了。

打开网易新闻 查看精彩图片

随着AI应用的崛起,单机游戏和联网游戏都开始更依赖于GPU算力,显然无论AI还是GPU,这些都是NVIDIA最擅长的领域,对DLSS乃至全景光追的支持已经成为3A大作的必选项,NVIDIA不断更新的新技术也注定影响未来的游戏体验。对于玩家而言,准备好一张GeForce RTX 40系列的GPU,无疑是很有必要的。