Nvidia 展示交互式 NPC 和 DLSS 3.5 光线重构技术，今年秋季将在所有 RTX GPU 上推出

除了宣布 半条命 2 RTX 重制版重制版之外，Nvidia 还展示了其 RTX 技术的一些改进。其中包括针对游戏中的非玩家角色（NPC）的大型语言模型（LLM），以及通过光线重构提供更好光照效果的 DLSS 3.5 重大更新。

Nvidia ACE 和 NeMo SteerLM

NPC 增加了游戏世界的沉浸感，但对于开发人员来说，在游戏中对所有 NPC 进行独特编程是一项艰巨的任务。Nvidia 首次展示其Avatar Cloud Engine (ACE)(ACE），它利用人工智能为 NPC 带来智能。

ACE依赖于三个主要的人工智能组件--NeMo LLM、Riva自动语音识别（ASR）和文本到语音（TTS）功能，以及可以从音频源创建面部动画的Omniverse Audio2Face。

现在，该公司正在利用 NeMo SteerLM 增强 ACE，这是一种 LLM，可为 NPC 添加个性和情感，从而增加真实感。SteerLM 允许玩家定义和微调角色互动，其方式与使用自然语言提示引导 LLM 的方式类似。SteerLM 还允许开发人员让模型受到游戏世界中事件的影响。

DLSS 3.5 为所有 RTX GPU 带来光线重建功能

Nvidia 推出的 DLSS 3 带有帧生成功能，可利用 RTX 40 系列 GPU 中的第四代张量内核和光流加速器。现在，在 Gamescom 2023 大会上，Nvidia 将在 DLSS 3.5 中加入光线追踪管线功能。

传统的光线追踪管道会对光线进行采样，以获得反射和全局光照，然后进行去噪处理。在 DLSS 中，这是在较低分辨率下进行的，然后再放大。然而，使用去噪器虽然很重要，但可能会导致光照不准确，同时还有可能去除颜色等信息。

目前，开发人员使用的是Nvidia Real-time Denoiser（NRD(NRD），它比之前使用的时空方差引导滤波（SVGF）解决方案有了很大改进。 有传言称Nvidia 将在即将推出的 RTX 50 Blackwell 显卡中直接在 RT 管线中加入去噪加速器。

不过这只是猜测，RTX 50 还有几年才会面世。就目前而言，Nvidia 的目标是通过 DLSS 3.5 克服去噪限制，推出人工智能驱动的光线重构（RR）。

该公司表示，RR 是在比 DLSS 3 多 5 倍的数据基础上训练出来的，是一个卓越的解决方案，经过训练可以识别运动矢量和光线追踪效果，同时能够区分好像素和像素。人工智能网络还经过训练，能够保留重要信息，生成高质量的升频。

据 Nvidia 称，切换 DLSS 3.5 不会对整体游戏性能产生重大影响。与明确在 RTX 40 系列 GPU 中使用光流加速器的 DLSS 3.0 Frame Generation (FG) 不同，DLSS 3.5 RR 将在所有 RTX 显卡上运行。

DLSS 3.5 将于今年秋季在《赛博朋克 2077》、《幻影自由城》、《传送门》等游戏中使用：Phantom Liberty》、《Portal with RTX》和《Alan Wake 2》等游戏，Omniverse、Chaos Vantage 和 D5 Render 等平台也将支持 DLSS 3.5。