“自主意识” NPC？英伟达公布了一项可能颠覆游戏开发的 AI 技术 ...

BLOG宣传大使

译 / 安德鲁
1 V5 W& G+ w0 \% ]游戏 NPC 不再千篇一律执行预设指令、根据玩家对话自由发挥的情况，可能要出现在游戏里了？英伟达最近公布的一项新 AI 技术就指向了这种可能性。
9 m" {' S( P' k( s& o/ x

8 H' k7 w* O5 X/ @
! z  i4 n, [; M' uAI 生成技术正在从根本上改变游戏行业，从设计开发、到游玩方式。游戏开发者正在探索，怎样在 2D、3D 的内容创作管线中利用 AI 技术。这其中有一些让人兴奋的要点：在于 AI 带来了 " 在游戏运行过程中创作内容 " 的能力，这在更早期的阶段原本是无法实现的。
( B: V0 L! D* |" ~- v$ T+ O0 @& Z随着游戏变得越来越复杂，游戏对于 NPC 的刻画也在不断进步。面部表情更丰富、台词量更大、与玩家的交互方式也更多样。
$ P( A4 E- n4 K' t6 Z4 B. U但当前玩家与 NPC 的交互方式，依然是偏程式化的、目的性明显，因为对话选项有限，玩家与 NPC 的交谈、交互都只是为了推动游戏内的故事发展。
* z. x8 S$ M$ Q* [% |而现在，生成式 AI 则可以改善 NPC 的交谈方式，创造出能够随时间推进而长期存在的性格，并对玩家的行为做出更特别的响应，让 NPC 的塑造显得更生动。
2 e! z/ A2 R: @" P" g在 COMPUTEX 2023 展会上，英伟达公布了 NVIDIA Avatar Cloud Engine ( ACE ) for Games。这是一项 AI 模型定制服务，通过 AI 驱动的自然语言互动让 NPC 表现得更为智能，从而改变游玩方式。
5 p: ~8 @! |2 l: s游戏开发者、中间件和工具软件的开发者，都可以利用 NVIDIA ACE for Games 在游戏、软件中部署定制的对话文本、语音以及动画的 AI 模型。
' c; w9 W' ^7 w5 G/ ]- A+ c以下内容来自英伟达官方技术博客《Generative AI Sparks Life into Virtual Characters with NVIDIA ACE for Games》，由 DeepL AI 翻译完成：
用 AI 基础模型的最新突破生成 NPC
8 ~: X) d( s2 V5 `& B  k优化的人工智能基础模型包括以下内容：
NVIDIA NeMo：提供基础语言模型和模型定制工具，因此你可以为游戏角色进一步调整模型。这些模型可以根据需要进行端到端整合，也可以进行任意组合。这种可定制的大型语言模型（LLM）能够实现符合游戏世界的特定角色背景故事和个性。
NVIDIA Riva：提供自动语音识别（ASR）和文本转语音（TTS）功能，实现与 NVIDIA NeMo 的实时语音对话。
, D3 }" p& _9 Y& w) tNVIDIA Omniverse Audio2Face：只需一个音源，就能立即为游戏角色创建富有表现力的面部动画。Audio2Face 具有适用于虚幻引擎 5 的 Omniverse 连接器，因此用户可以直接为 MetaHuman 角色添加面部动画。
您可以通过 NeMo 模型对齐技术为 NPC 带来活力。首先，采用行为克隆，使基础语言模型能够根据指令执行角色扮演任务。为了进一步使 NPC 的行为与预期相一致，在未来，你可以应用人类反馈的强化学习（RLHF），在开发过程中接收设计师的实时反馈。
  I! Z  ]6 e8 }# m7 k) q在 NPC 完全对齐后，最后一步是应用 NeMo Guardrails，它为 NPC 增加了可编程的规则。这个工具包可以协助你建立准确、适当、符合主题和安全的游戏角色。NeMo Guardrails 原生支持 LangChain，这是一个用于开发 LLM 支持的应用程序的工具包。
1 M; s+ X) q5 m' x- Y; ]& Z$ T英伟达为各种规模的中间件、工具和游戏开发者提供灵活的部署方法。实现 NVIDIA ACE for Games 的神经网络针对不同的能力进行了优化，并在尺寸、性能和质量方面进行了不同的权衡。
5 k+ S. F6 z! P& V* e* X+ QACE for Games 代工服务将帮助你对游戏模型进行微调，然后通过 NVIDIA DGX 云、GeForce RTX PC 或企业内部进行部署，以便进行实时推理。你还可以实时验证模型的质量，并测试性能和延迟，以确保模型在部署前符合特定标准。
% u6 z/ R. P& o% k为游戏创建端到端的化身 / 头像解决方案
( J5 [; Y  M" v7 H  Z0 X& O: T为了展示如何利用 ACE for Games 来构建 NPC，英伟达与 Convai 公司合作，帮助其优化 ACE 模块并将其整合到产品中，Convai 公司是一家为在游戏和虚拟世界中创建和部署 AI 角色而建立平台的初创公司。
/ A/ f  X$ e4 e/ X1 n& q; N"Convai 公司创始人兼首席执行官 Purnendu Mukherjee 表示：" 通过 NVIDIA ACE for Games，Convai 公司的工具可以实现所需的延迟和质量，从而以具有成本效益的方式向几乎所有的开发者提供 AI 非游戏角色。
Convai 将英伟达 Riva 用于语音转文字和文字转语音功能，英伟达 NeMo 用于驱动对话的 LLM，而 Audio2Face 则用于从语音输入中获得 AI 驱动的面部动画。
5 S( T9 S* ^* f3 W2 Z& a$ S视频 1. 英伟达 Kairos 演示展示了身临其境的 NPC Jin，以及利用最新的英伟达 RTX 和英伟达 DLSS 技术打造的拉面店。
: {4 l) K* X7 F2 I+ v" Y# @如视频 1 所示，这些模块被无缝集成到 Convai 服务平台中，并被输入到虚幻引擎 5 和 MetaHuman 中，将身临其境的 NPC Jin 带入到生活中。由 NVIDIA Lightspeed Studios 艺术团队创作的拉面店场景，在虚幻引擎 5 的 NVIDIA RTX 分支（NvRTX 5.1）中运行。该场景使用 RTX Direct Illumination（RTXDI）进行渲染，用于光线追踪照明和阴影，同时使用 NVIDIA DLSS 3 以获得最大性能。
游戏开发者已经在使用现有的 NVIDIA 生成式 AI 技术进行游戏开发：
* m% f! e6 R# U% R欧洲领先的游戏开发商之一 GSC Game World 正在其即将推出的游戏《S.T.A.L.K.E.R. 2: Heart of Chornobyl》中采用 Audio2Face。
独立游戏开发商 Fallen Leaf 也在 Fort Solis 中使用 Audio2Face 制作角色面部动画，这是一款发生在火星的第三人称科幻惊悚游戏。
% P1 G, U; ^1 t: V4 `以生成性人工智能为重点的公司，如 Charisma.ai，正在利用 Audio2Face 为他们的对话引擎提供动画。
4 w7 X% i( S* p5 H: R内容来源：
( E/ h( M' X8 O1 _' C1 Lhttps://developer.nvidia.com/blog/generative-ai-sparks-life-into-virtual-characters-with-ace-for-games/
游戏葡萄编译
游戏葡萄招聘内容编辑，