“自主意识” NPC？英伟达公布了一项可能颠覆游戏开发的 AI 技术 ...

BLOG宣传大使

译 / 安德鲁
游戏 NPC 不再千篇一律执行预设指令、根据玩家对话自由发挥的情况，可能要出现在游戏里了？英伟达最近公布的一项新 AI 技术就指向了这种可能性。



AI 生成技术正在从根本上改变游戏行业，从设计开发、到游玩方式。游戏开发者正在探索，怎样在 2D、3D 的内容创作管线中利用 AI 技术。这其中有一些让人兴奋的要点：在于 AI 带来了 " 在游戏运行过程中创作内容 " 的能力，这在更早期的阶段原本是无法实现的。
% T8 z+ F. y0 M' t: M0 l! V6 B随着游戏变得越来越复杂，游戏对于 NPC 的刻画也在不断进步。面部表情更丰富、台词量更大、与玩家的交互方式也更多样。
但当前玩家与 NPC 的交互方式，依然是偏程式化的、目的性明显，因为对话选项有限，玩家与 NPC 的交谈、交互都只是为了推动游戏内的故事发展。
( g2 V% K% A% ?( R' @5 y而现在，生成式 AI 则可以改善 NPC 的交谈方式，创造出能够随时间推进而长期存在的性格，并对玩家的行为做出更特别的响应，让 NPC 的塑造显得更生动。
在 COMPUTEX 2023 展会上，英伟达公布了 NVIDIA Avatar Cloud Engine ( ACE ) for Games。这是一项 AI 模型定制服务，通过 AI 驱动的自然语言互动让 NPC 表现得更为智能，从而改变游玩方式。
游戏开发者、中间件和工具软件的开发者，都可以利用 NVIDIA ACE for Games 在游戏、软件中部署定制的对话文本、语音以及动画的 AI 模型。
以下内容来自英伟达官方技术博客《Generative AI Sparks Life into Virtual Characters with NVIDIA ACE for Games》，由 DeepL AI 翻译完成：
用 AI 基础模型的最新突破生成 NPC
优化的人工智能基础模型包括以下内容：
9 U# L8 c  r8 W6 H* CNVIDIA NeMo：提供基础语言模型和模型定制工具，因此你可以为游戏角色进一步调整模型。这些模型可以根据需要进行端到端整合，也可以进行任意组合。这种可定制的大型语言模型（LLM）能够实现符合游戏世界的特定角色背景故事和个性。
2 c- U) }3 M% C  n. jNVIDIA Riva：提供自动语音识别（ASR）和文本转语音（TTS）功能，实现与 NVIDIA NeMo 的实时语音对话。
# l; a) N' M; JNVIDIA Omniverse Audio2Face：只需一个音源，就能立即为游戏角色创建富有表现力的面部动画。Audio2Face 具有适用于虚幻引擎 5 的 Omniverse 连接器，因此用户可以直接为 MetaHuman 角色添加面部动画。
您可以通过 NeMo 模型对齐技术为 NPC 带来活力。首先，采用行为克隆，使基础语言模型能够根据指令执行角色扮演任务。为了进一步使 NPC 的行为与预期相一致，在未来，你可以应用人类反馈的强化学习（RLHF），在开发过程中接收设计师的实时反馈。
( ?) z. z5 K$ }3 V0 Q7 x在 NPC 完全对齐后，最后一步是应用 NeMo Guardrails，它为 NPC 增加了可编程的规则。这个工具包可以协助你建立准确、适当、符合主题和安全的游戏角色。NeMo Guardrails 原生支持 LangChain，这是一个用于开发 LLM 支持的应用程序的工具包。
英伟达为各种规模的中间件、工具和游戏开发者提供灵活的部署方法。实现 NVIDIA ACE for Games 的神经网络针对不同的能力进行了优化，并在尺寸、性能和质量方面进行了不同的权衡。
- d9 h6 o; e6 W; sACE for Games 代工服务将帮助你对游戏模型进行微调，然后通过 NVIDIA DGX 云、GeForce RTX PC 或企业内部进行部署，以便进行实时推理。你还可以实时验证模型的质量，并测试性能和延迟，以确保模型在部署前符合特定标准。
3 k* P0 F, D* z  S$ c! K为游戏创建端到端的化身 / 头像解决方案
, R8 |) M7 D$ x: ?: g为了展示如何利用 ACE for Games 来构建 NPC，英伟达与 Convai 公司合作，帮助其优化 ACE 模块并将其整合到产品中，Convai 公司是一家为在游戏和虚拟世界中创建和部署 AI 角色而建立平台的初创公司。
6 s4 C5 P+ W6 \7 }! v"Convai 公司创始人兼首席执行官 Purnendu Mukherjee 表示：" 通过 NVIDIA ACE for Games，Convai 公司的工具可以实现所需的延迟和质量，从而以具有成本效益的方式向几乎所有的开发者提供 AI 非游戏角色。
* K( U# Z, d6 n, |4 {% \% f1 uConvai 将英伟达 Riva 用于语音转文字和文字转语音功能，英伟达 NeMo 用于驱动对话的 LLM，而 Audio2Face 则用于从语音输入中获得 AI 驱动的面部动画。
' u* S& Y6 Z! O* l! ^视频 1. 英伟达 Kairos 演示展示了身临其境的 NPC Jin，以及利用最新的英伟达 RTX 和英伟达 DLSS 技术打造的拉面店。
如视频 1 所示，这些模块被无缝集成到 Convai 服务平台中，并被输入到虚幻引擎 5 和 MetaHuman 中，将身临其境的 NPC Jin 带入到生活中。由 NVIDIA Lightspeed Studios 艺术团队创作的拉面店场景，在虚幻引擎 5 的 NVIDIA RTX 分支（NvRTX 5.1）中运行。该场景使用 RTX Direct Illumination（RTXDI）进行渲染，用于光线追踪照明和阴影，同时使用 NVIDIA DLSS 3 以获得最大性能。
游戏开发者已经在使用现有的 NVIDIA 生成式 AI 技术进行游戏开发：
欧洲领先的游戏开发商之一 GSC Game World 正在其即将推出的游戏《S.T.A.L.K.E.R. 2: Heart of Chornobyl》中采用 Audio2Face。
独立游戏开发商 Fallen Leaf 也在 Fort Solis 中使用 Audio2Face 制作角色面部动画，这是一款发生在火星的第三人称科幻惊悚游戏。
以生成性人工智能为重点的公司，如 Charisma.ai，正在利用 Audio2Face 为他们的对话引擎提供动画。
+ y1 H. g$ ^# ]3 `0 _. B内容来源：
/ E+ J8 E& O1 A% \2 Fhttps://developer.nvidia.com/blog/generative-ai-sparks-life-into-virtual-characters-with-ace-for-games/
" M( P2 |$ d. Z4 Z( c0 J9 k游戏葡萄编译
游戏葡萄招聘内容编辑，