|
|
译 / 安德鲁& u* n2 `6 E' B5 U& A" e
游戏 NPC 不再千篇一律执行预设指令、根据玩家对话自由发挥的情况,可能要出现在游戏里了?英伟达最近公布的一项新 AI 技术就指向了这种可能性。2 b5 L/ Q( U& k" P4 ^2 h
& Q: q: K, c8 d. N# T1 j
2 Z# M1 Q# B. Q7 P5 g$ T3 g( j) }% R5 M" @5 o
AI 生成技术正在从根本上改变游戏行业,从设计开发、到游玩方式。游戏开发者正在探索,怎样在 2D、3D 的内容创作管线中利用 AI 技术。这其中有一些让人兴奋的要点:在于 AI 带来了 " 在游戏运行过程中创作内容 " 的能力,这在更早期的阶段原本是无法实现的。
) o5 Q$ e% O8 r随着游戏变得越来越复杂,游戏对于 NPC 的刻画也在不断进步。面部表情更丰富、台词量更大、与玩家的交互方式也更多样。4 A6 O) \3 P+ W6 ]/ c& E
但当前玩家与 NPC 的交互方式,依然是偏程式化的、目的性明显,因为对话选项有限,玩家与 NPC 的交谈、交互都只是为了推动游戏内的故事发展。
$ J" ^. A) H, m/ g9 m( @+ B; e而现在,生成式 AI 则可以改善 NPC 的交谈方式,创造出能够随时间推进而长期存在的性格,并对玩家的行为做出更特别的响应,让 NPC 的塑造显得更生动。
9 q* W8 C) T: G& A3 G' }6 }: t( m在 COMPUTEX 2023 展会上,英伟达公布了 NVIDIA Avatar Cloud Engine ( ACE ) for Games。这是一项 AI 模型定制服务,通过 AI 驱动的自然语言互动让 NPC 表现得更为智能,从而改变游玩方式。
$ q8 d# {5 Y. n. h4 l游戏开发者、中间件和工具软件的开发者,都可以利用 NVIDIA ACE for Games 在游戏、软件中部署定制的对话文本、语音以及动画的 AI 模型。# l6 G( V4 } \2 m; d/ o
以下内容来自英伟达官方技术博客《Generative AI Sparks Life into Virtual Characters with NVIDIA ACE for Games》,由 DeepL AI 翻译完成:5 F' ] D- `* k% u* K
用 AI 基础模型的最新突破生成 NPC7 o: T& i' ?' C7 q
优化的人工智能基础模型包括以下内容:! J/ B3 b0 j' _) b# ~; k5 t
NVIDIA NeMo:提供基础语言模型和模型定制工具,因此你可以为游戏角色进一步调整模型。这些模型可以根据需要进行端到端整合,也可以进行任意组合。这种可定制的大型语言模型(LLM)能够实现符合游戏世界的特定角色背景故事和个性。( }/ W7 z& c, D( c$ y
NVIDIA Riva:提供自动语音识别(ASR)和文本转语音(TTS)功能,实现与 NVIDIA NeMo 的实时语音对话。; J2 f8 c, m7 o/ H+ P) e4 u3 ^
NVIDIA Omniverse Audio2Face:只需一个音源,就能立即为游戏角色创建富有表现力的面部动画。Audio2Face 具有适用于虚幻引擎 5 的 Omniverse 连接器,因此用户可以直接为 MetaHuman 角色添加面部动画。' X# r0 {, \+ ^: l% I7 q1 S0 [
您可以通过 NeMo 模型对齐技术为 NPC 带来活力。首先,采用行为克隆,使基础语言模型能够根据指令执行角色扮演任务。为了进一步使 NPC 的行为与预期相一致,在未来,你可以应用人类反馈的强化学习(RLHF),在开发过程中接收设计师的实时反馈。3 Z, K! w& s2 { ]5 b$ K/ W7 e
在 NPC 完全对齐后,最后一步是应用 NeMo Guardrails,它为 NPC 增加了可编程的规则。这个工具包可以协助你建立准确、适当、符合主题和安全的游戏角色。NeMo Guardrails 原生支持 LangChain,这是一个用于开发 LLM 支持的应用程序的工具包。# R/ }7 \+ h. V. u0 f
英伟达为各种规模的中间件、工具和游戏开发者提供灵活的部署方法。实现 NVIDIA ACE for Games 的神经网络针对不同的能力进行了优化,并在尺寸、性能和质量方面进行了不同的权衡。3 B! a$ e& Y- e x
ACE for Games 代工服务将帮助你对游戏模型进行微调,然后通过 NVIDIA DGX 云、GeForce RTX PC 或企业内部进行部署,以便进行实时推理。你还可以实时验证模型的质量,并测试性能和延迟,以确保模型在部署前符合特定标准。
% ?% A: r2 T% r. r为游戏创建端到端的化身 / 头像解决方案
1 A( R$ C3 [2 T" j5 K为了展示如何利用 ACE for Games 来构建 NPC,英伟达与 Convai 公司合作,帮助其优化 ACE 模块并将其整合到产品中,Convai 公司是一家为在游戏和虚拟世界中创建和部署 AI 角色而建立平台的初创公司。7 y) v5 C" t! ?
"Convai 公司创始人兼首席执行官 Purnendu Mukherjee 表示:" 通过 NVIDIA ACE for Games,Convai 公司的工具可以实现所需的延迟和质量,从而以具有成本效益的方式向几乎所有的开发者提供 AI 非游戏角色。( W" X; H3 ~/ F9 X
Convai 将英伟达 Riva 用于语音转文字和文字转语音功能,英伟达 NeMo 用于驱动对话的 LLM,而 Audio2Face 则用于从语音输入中获得 AI 驱动的面部动画。: q, w) c; P5 q7 Z& g
视频 1. 英伟达 Kairos 演示展示了身临其境的 NPC Jin,以及利用最新的英伟达 RTX 和英伟达 DLSS 技术打造的拉面店。" y/ E Q# f# p: W8 n0 ~
如视频 1 所示,这些模块被无缝集成到 Convai 服务平台中,并被输入到虚幻引擎 5 和 MetaHuman 中,将身临其境的 NPC Jin 带入到生活中。由 NVIDIA Lightspeed Studios 艺术团队创作的拉面店场景,在虚幻引擎 5 的 NVIDIA RTX 分支(NvRTX 5.1)中运行。该场景使用 RTX Direct Illumination(RTXDI)进行渲染,用于光线追踪照明和阴影,同时使用 NVIDIA DLSS 3 以获得最大性能。
, e p0 C; H' t& [: ^游戏开发者已经在使用现有的 NVIDIA 生成式 AI 技术进行游戏开发:2 w. G. [# [' L5 T
欧洲领先的游戏开发商之一 GSC Game World 正在其即将推出的游戏《S.T.A.L.K.E.R. 2: Heart of Chornobyl》中采用 Audio2Face。
6 _1 I0 d- i% [' j9 s& u/ n独立游戏开发商 Fallen Leaf 也在 Fort Solis 中使用 Audio2Face 制作角色面部动画,这是一款发生在火星的第三人称科幻惊悚游戏。
P: q* I7 b. M以生成性人工智能为重点的公司,如 Charisma.ai,正在利用 Audio2Face 为他们的对话引擎提供动画。
$ N5 R7 t; p Q内容来源:
' e4 l1 J$ \* dhttps://developer.nvidia.com/blog/generative-ai-sparks-life-into-virtual-characters-with-ace-for-games/
0 {* z& l1 P: Q: j/ q' R游戏葡萄编译/ M) ?9 y0 s0 l% Q9 ~0 S& O
游戏葡萄招聘内容编辑, |
本帖子中包含更多资源
您需要 登录 才可以下载或查看,没有账号?立即注册
×
|