“自主意识” NPC？英伟达公布了一项可能颠覆游戏开发的 AI 技术 ...

BLOG宣传大使

译 / 安德鲁
+ \  f7 E: ^; S5 D! U- f游戏 NPC 不再千篇一律执行预设指令、根据玩家对话自由发挥的情况，可能要出现在游戏里了？英伟达最近公布的一项新 AI 技术就指向了这种可能性。
3 L9 V8 `2 K  {% p  b
, N& `, V& q9 h7 I2 K& K
. ^; P- z8 A6 z* E; M) b1 j: g6 q
AI 生成技术正在从根本上改变游戏行业，从设计开发、到游玩方式。游戏开发者正在探索，怎样在 2D、3D 的内容创作管线中利用 AI 技术。这其中有一些让人兴奋的要点：在于 AI 带来了 " 在游戏运行过程中创作内容 " 的能力，这在更早期的阶段原本是无法实现的。
随着游戏变得越来越复杂，游戏对于 NPC 的刻画也在不断进步。面部表情更丰富、台词量更大、与玩家的交互方式也更多样。
6 E9 s9 R( ~5 K1 d$ K; [4 w' u* G但当前玩家与 NPC 的交互方式，依然是偏程式化的、目的性明显，因为对话选项有限，玩家与 NPC 的交谈、交互都只是为了推动游戏内的故事发展。
而现在，生成式 AI 则可以改善 NPC 的交谈方式，创造出能够随时间推进而长期存在的性格，并对玩家的行为做出更特别的响应，让 NPC 的塑造显得更生动。
! r  B% j3 J4 G3 z在 COMPUTEX 2023 展会上，英伟达公布了 NVIDIA Avatar Cloud Engine ( ACE ) for Games。这是一项 AI 模型定制服务，通过 AI 驱动的自然语言互动让 NPC 表现得更为智能，从而改变游玩方式。
游戏开发者、中间件和工具软件的开发者，都可以利用 NVIDIA ACE for Games 在游戏、软件中部署定制的对话文本、语音以及动画的 AI 模型。
+ |2 K! U9 _. ?( T" e以下内容来自英伟达官方技术博客《Generative AI Sparks Life into Virtual Characters with NVIDIA ACE for Games》，由 DeepL AI 翻译完成：
& [/ e& E; z% K1 k用 AI 基础模型的最新突破生成 NPC
. i5 ^2 G6 i6 L! r0 ^# ?4 U6 m3 x. v优化的人工智能基础模型包括以下内容：
NVIDIA NeMo：提供基础语言模型和模型定制工具，因此你可以为游戏角色进一步调整模型。这些模型可以根据需要进行端到端整合，也可以进行任意组合。这种可定制的大型语言模型（LLM）能够实现符合游戏世界的特定角色背景故事和个性。
$ C4 ~* V8 y$ ]" |$ ^NVIDIA Riva：提供自动语音识别（ASR）和文本转语音（TTS）功能，实现与 NVIDIA NeMo 的实时语音对话。
7 E/ c; _1 U% P" e  T9 vNVIDIA Omniverse Audio2Face：只需一个音源，就能立即为游戏角色创建富有表现力的面部动画。Audio2Face 具有适用于虚幻引擎 5 的 Omniverse 连接器，因此用户可以直接为 MetaHuman 角色添加面部动画。
8 V  v8 \- @4 ]+ ]您可以通过 NeMo 模型对齐技术为 NPC 带来活力。首先，采用行为克隆，使基础语言模型能够根据指令执行角色扮演任务。为了进一步使 NPC 的行为与预期相一致，在未来，你可以应用人类反馈的强化学习（RLHF），在开发过程中接收设计师的实时反馈。
在 NPC 完全对齐后，最后一步是应用 NeMo Guardrails，它为 NPC 增加了可编程的规则。这个工具包可以协助你建立准确、适当、符合主题和安全的游戏角色。NeMo Guardrails 原生支持 LangChain，这是一个用于开发 LLM 支持的应用程序的工具包。
3 u) ^% w5 R3 L2 j9 k  B- V( M* w) @5 F  J英伟达为各种规模的中间件、工具和游戏开发者提供灵活的部署方法。实现 NVIDIA ACE for Games 的神经网络针对不同的能力进行了优化，并在尺寸、性能和质量方面进行了不同的权衡。
ACE for Games 代工服务将帮助你对游戏模型进行微调，然后通过 NVIDIA DGX 云、GeForce RTX PC 或企业内部进行部署，以便进行实时推理。你还可以实时验证模型的质量，并测试性能和延迟，以确保模型在部署前符合特定标准。
为游戏创建端到端的化身 / 头像解决方案
为了展示如何利用 ACE for Games 来构建 NPC，英伟达与 Convai 公司合作，帮助其优化 ACE 模块并将其整合到产品中，Convai 公司是一家为在游戏和虚拟世界中创建和部署 AI 角色而建立平台的初创公司。
"Convai 公司创始人兼首席执行官 Purnendu Mukherjee 表示：" 通过 NVIDIA ACE for Games，Convai 公司的工具可以实现所需的延迟和质量，从而以具有成本效益的方式向几乎所有的开发者提供 AI 非游戏角色。
8 ], x, ^3 L1 |# q& c/ P- ~+ O/ p% dConvai 将英伟达 Riva 用于语音转文字和文字转语音功能，英伟达 NeMo 用于驱动对话的 LLM，而 Audio2Face 则用于从语音输入中获得 AI 驱动的面部动画。
( W9 E4 q( Y2 w; E+ P) S2 z视频 1. 英伟达 Kairos 演示展示了身临其境的 NPC Jin，以及利用最新的英伟达 RTX 和英伟达 DLSS 技术打造的拉面店。
如视频 1 所示，这些模块被无缝集成到 Convai 服务平台中，并被输入到虚幻引擎 5 和 MetaHuman 中，将身临其境的 NPC Jin 带入到生活中。由 NVIDIA Lightspeed Studios 艺术团队创作的拉面店场景，在虚幻引擎 5 的 NVIDIA RTX 分支（NvRTX 5.1）中运行。该场景使用 RTX Direct Illumination（RTXDI）进行渲染，用于光线追踪照明和阴影，同时使用 NVIDIA DLSS 3 以获得最大性能。
游戏开发者已经在使用现有的 NVIDIA 生成式 AI 技术进行游戏开发：
欧洲领先的游戏开发商之一 GSC Game World 正在其即将推出的游戏《S.T.A.L.K.E.R. 2: Heart of Chornobyl》中采用 Audio2Face。
独立游戏开发商 Fallen Leaf 也在 Fort Solis 中使用 Audio2Face 制作角色面部动画，这是一款发生在火星的第三人称科幻惊悚游戏。
0 U) Z( w* s) C' ~6 Z2 g以生成性人工智能为重点的公司，如 Charisma.ai，正在利用 Audio2Face 为他们的对话引擎提供动画。
& W7 w7 }& c6 @# G" d4 m+ u内容来源：
https://developer.nvidia.com/blog/generative-ai-sparks-life-into-virtual-characters-with-ace-for-games/
游戏葡萄编译
" W: F* o2 ]* |. e7 B, l游戏葡萄招聘内容编辑，