英伟达最新AI升采样技术可改变游戏光照和材质效果
英伟达在周一的GTC大会上宣布了DLSS 5技术，根据早期反响来看，这将是一个引发争议的更新，一些人称其为"AI垃圾"，认为它不可接受地改变了艺术创作意图。英伟达CEO黄仁勋称这是"图形领域的GPT时刻——将手工渲染与生成式AI相结合，在保持艺术家创作表达所需控制力的同时，实现视觉真实感的巨大飞跃"。
在支持DLSS 5的游戏中，该工具可以立即为光照和阴影提供显著改善，但与之前使用机器学习来缩小高低画质设置差距的升采样版本不同，这个版本应用生成式AI重新处理光照和材质，添加了感觉全新的细节。英伟达今天展示的《生化危机：安魂曲》、《星空》、《霍格沃茨遗产》和《EA体育FC》等游戏示例看起来确实更加逼真，但DLSS 5版本的变化看起来与我们在摄影、视频和其他创意领域看到的"AI垃圾"更新类似。
据英伟达介绍，"AI模型经过端到端训练，能够理解复杂的场景语义，如角色、头发、织物和半透明皮肤，以及正面光照、背光或阴天等环境光照条件——所有这些都通过分析单个帧完成。DLSS 5然后利用其深度理解生成视觉精确的图像，处理皮肤次表面散射、织物精致光泽和头发光材质相互作用等复杂元素，同时保持原始场景的结构和语义。"
最显著的影响是DLSS 5似乎对角色模型的外观进行了重大改变。在《安魂曲》的案例中，覆盖在原始资源上的生成式AI让主角Grace Ashcroft看起来完全不同，就像她使用了Instagram滤镜，让嘴唇更饱满，涂抹了浓重的眼影。
它在《星空》中的应用产生了类似诡异的效果，仿佛锐度被调到最大，明亮的高光让角色的面部特征和头发看起来像舞台灯光效果，尽管他们站在没有这种光照的环境中。英伟达引用贝塞斯达游戏工作室总监托德·霍华德的话说："当英伟达向我们展示DLSS 5并让它在《星空》中运行时，看到它如何让游戏焕发生机真是令人惊叹。我们已经体验过了，迫不及待想让所有人都试试。"
DLSS 5可以在高达4K分辨率下实时运行，虽然它肯定会满足一些期待在更多游戏中看到照片级真实感的玩家和开发者，但这种效果并不适合所有人。游戏开发者Mike Bithell写道："当你绝对、肯定地不希望在游戏体验中有任何艺术指导时使用。看到有人认真对待这种荒谬的东西令人失望。真是一团糟。"
不过，英伟达表示它为游戏开发者提供了控制选项，让他们决定DLSS 5如何影响游戏外观，因此到它正式发布时，游戏内效果可能与我们现在看到的不同。
英伟达表示，DLSS 5通过两种方式尊重艺术创作意图：
将游戏每帧的颜色和运动矢量输入模型，将输出锚定在源3D内容中。通过为开发者提供详细控制选项，如强度和颜色分级。艺术家可以使用这些控制来调整混合、对比度、饱和度和伽马值，并确定在何处以及如何应用增强效果以保持游戏独特的美学风格。开发者还可以遮罩特定对象或区域，使其不受增强效果影响。
DLSS 5将于今年秋季推出，目前仅确认与精选游戏兼容，除了前面提到的游戏外，还包括《上古卷轴VI：湮灭重制版》和《刺客信条：影》等大作。
Q&A
Q1：DLSS 5与之前版本有什么不同？
A：DLSS 5与之前版本的主要区别是它应用生成式AI重新处理游戏的光照和材质，添加全新细节，而不是像之前版本那样仅使用机器学习来缩小高低画质设置的差距。它能够理解复杂场景语义并生成视觉精确的图像。
Q2：DLSS 5会改变游戏角色的外观吗？
A：是的，DLSS 5会对角色模型外观进行显著改变。例如在《生化危机：安魂曲》中，主角Grace Ashcroft看起来完全不同，像使用了滤镜效果。在《星空》中，角色面部特征和头发会有舞台灯光般的明亮高光效果。
Q3：开发者能控制DLSS 5的效果吗？
A：能够。英伟达为游戏开发者提供了详细的控制选项，包括强度和颜色分级调整。艺术家可以调整混合、对比度、饱和度和伽马值，决定增强效果的应用位置和方式，甚至可以遮罩特定对象或区域使其不受影响。
热门跟贴