Nvidia 将其 AI 化身带到游戏中，它们可以与玩家实时互动。有语音对话。和面部动画 当前视点

(资料图)

nvidia 在 Computex 2023 上宣布了 ACE for Games。Nvidia 刚刚发布了 ACE for Games，这是其Omniverse Avatar Cloud Engine的一个版本，可以实时为游戏中的 NPC 制作动画并发出声音。首席执行官黄仁勋解释说，ACE for Games 集成了文本到语音、自然语言理解——或者用黄的话说，“基本上是一个大型语言模型”——和自动面部动画。都在 ACE 保护伞下。从本质上讲，AI 创建的 NPC 将听取玩家的输入，例如向 NPC 提问，然后生成角色内的响应，大声说出对话，并在 NPC 说话时动画化 NPC 的脸。Huang 还在 AI 初创公司 Convai 的虚幻引擎 5 制作的实时演示中展示了这项技术。它设置在赛博朋克环境中，因为它当然是（对不起，凯蒂），并显示玩家走进一家拉面店并与店主交谈。所有者没有脚本对话，但会实时回答玩家的问题并派他们执行临时任务。您可以在此处亲自观看演示。这非常令人印象深刻，毫无疑问，这是对游戏未来如何利用这项技术的一种展望。正如 Huang 所说，“AI 将成为未来电子游戏的重要组成部分。”当然，他会这么说。Nvidia 是最有可能从 AI 需求突然激增中获益的公司，其 AI 加速器的销售。我们已经看到 ChatGPT 在游戏中的一些基本集成，例如当 Chris 将它添加到他的 Skyrim 伴侣时，它未能解决一个简单的难题。但是这个新的 ACE 平台确实显得更加精致和实时。我们不知道运行 ACE for Games 演示需要什么，只是它还运行了光线追踪和 DLSS。它现在可能需要比普通 GeForce GPU 更高的性能才能运行，或者需要基于云的组件。Huang 没有透露细节，但我相信我们会听到更多关于这个工具的消息，因为有些游戏实际上已经开始使用它了。 “支持 NVIDIA ACE for Games 的神经网络针对不同的功能进行了优化，具有各种尺寸、性能和质量权衡。ACE for Games 代工服务将帮助开发人员为他们的游戏微调模型，然后通过 NVIDIA DGX Cloud 进行部署， GeForce RTX PC 或本地进行实时推理，”Nvidia 说。“这些模型针对延迟进行了优化——这是游戏中沉浸式、响应式交互的关键要求。”延迟在这里将是一个很大的问题。当 NPC 从云中加载响应时，我不想受到相当于尴尬的停顿。到目前为止，Nvidia 已经确认了两款游戏使用 ACE for Games 的面部动画技术组件，称为 Audio2Face。那是《潜行者 2：切尔诺贝利之心》和《落叶》，但希望我们能得到一些结合整个平台的例子。我很想在演示之外看到这项技术的实际应用。