NVIDIA 利用 ACE 自主意识游戏角色重新定义游戏 AI

数十年前，游戏领域已经开始使用“AI”（人工智能）一词。 非玩家角色 (NPC) 通常遵循严格的规则来模仿智能行为、推动剧情发展并与玩家进行脚本化互动。 然而，随着智能语言模型的兴起，游戏 AI 正在迎来一场真正的智能革命。 

在 CES 2025，NVIDIA 推出的 NVIDIA ACE 自主意识游戏角色重新定义了游戏 AI。

2023 年首次亮相的 NVIDIA ACE 是一整套 RTX 加速的数字人技术，可借助生成式 AI 使游戏角色栩栩如生。

目前，NVIDIA 正在将 ACE 的应用范围从对话型 NPC 扩展至拥有自主意识的游戏角色，能够利用 AI 像真人玩家一样感知、计划和行动。在生成式 AI 的加持下，ACE 将打造生动、动态的游戏世界，队友能够理解并支持玩家完成目标，而敌人则能灵活地应对玩家的战术。

为这些拥有自主意识的游戏角色提供支持的是全新的 ACE 小语言模型 (SLM)，它们能够以类似真人玩家的频率进行规划，而这正是做出符合现实的决策所需要的；另外还有用于视觉和音频的多模态语言模型，这些模型能让人工智能角色听到音频提示并感知它们所处的环境。

NVIDIA 正在与顶尖游戏开发者合作，将 ACE 自主意识游戏角色融入游戏之中。玩家可以在“绝地求生 (PUBG: BATTLEGROUNDS)”、“inZOI”和《永劫无间手游》PC 版 (NARAKA: BLADEPOINT MOBILE PC VERSION) 中与类似真人玩家的 AI 玩家和队友互动。 玩家不但可以在“传奇 5 (MIR5)”中挑战不断学习并适应玩家游戏风格的 AI Boss，还可以在 AI People、 Dead Meat 和“动物朋克 (ZooPunk)”中体验 AI 赋能 NPC 带来的全新游戏机制。

让我们从一个简单的真人玩家决策模型开始。

决策的核心在于与自己的内心对话，反复问一个相同的问题：“下一步我该怎么做？”

要回答这一问题，我们需要一些关键数据。

1. 来自周围世界的信息
2. 我们的动机和愿景
3. 对过去事件和经历的记忆

例如，假设你听到手机铃声——这是由你的感官产生的外部感知。你应该接听吗？

你知道自己在等一个电话，不想错过。你的动机和记忆相结合，为你提供决定下一步行动所需的一切。这就是认知。

你选择接电话--这是一个人认知的行动和结果。

这些感知、认知和行动通常会存储在我们的记忆中，以便在日后决策时调用。

开发者不可能用传统的基于规则的 AI 系统来模仿真人玩家的这些特征，因为变数太大。但是，在生成式 AI 和基于描述人类如何对世界做出反应的数万亿语句训练的大语言模型的帮助下，我们可以开始模拟类似真人玩家的决策制定。

NVIDIA ACE 自主意识游戏角色由一系列生成式 AI 模型提供感知、认知、动作和渲染支持，使开发者能够在游戏中创建像真人玩家一样思考、感觉和行动的 AI 智能体。

为了让我们的 SLM (小语言模型) 做出正确的决策，必须向自主游戏角色提供高频率的感知数据流。我们采用了多种模型和技术来捕捉这些感知数据：

• 音频
  • NemoAudio-4B-Instruct - 这是一种新的音频 + 文本输入和文本输出 SLM（小语言模型），能够描述游戏环境的声景
  • Parakeet-CTC-XXL-1.1B-Multilingual - Transcribes multilingual audio to text
• 视觉
  • NemoVision-4B-128k-Instruct - 这是一种新的音频 + 图像输入和文本输出 SLM（小语言模型），能够进行简单的空间理解
• 游戏状态
  • 游戏本身即为游戏世界中最好的信息来源之一。游戏状态可以转录为文本，以便于 SLM（小语言模型）对游戏世界进行推理

根据我们的电竞研究，大多数游戏玩家每秒会做出 8-13 个微小决策，即“子动作”。这些可能是修正瞄准方向或决定何时使用技能等简单任务，或者决定开始重新评估策略等更为复杂的任务。

一般而言，认知任务非常频繁，因此需要一个小语言模型来执行任务，以满足延迟和吞吐量的要求。用于认知的 ACE SLM（小语言模型） 包括：

• Mistral-Nemo-Minitron-8B-128k-Instruct - 一种最先进的小语言模型，在指令跟踪能力方面名列前茅，这是自主意识游戏角色的一项关键能力。
• Mistral-Nemo-Minitron-4B-128k-Instruct - 是同一种类型的模型，只不过体积更小
• Mistral-Nemo-Minitron-2B-128k-Instruct - 是更轻量级的版本！只需 1.5GB 的 显存 即可运行

行动有多种形式，从语言表达、游戏动作到长期规划等。为了有效地执行行动，开发者可结合使用模型和策略：

• 行动选择 - 考虑到游戏中可采取的行动有限，SLM（小语言模型） 可以选择最合适的行动（如下面的 “inZOI” ）
• 文本转语音 - 优秀的文本转语音模型（如 Elevenlabs.io 或 Cartesia）可用于将文本响应转换为听觉响应
• 战略规划 - 在处理和推理大量数据时，这些智能体可以接触到更大的模型，从而提供更高水平、更低频率的战略。通常情况下，这是云 LLM API 或对 SLM 的一系列 CoT  (思维链) 提示
• 反思 - 重要的行动之一是反思先前行动的结果。“我做出了正确的选择吗？”这种行动可以随着时间的推移产生更好的未来行动，并允许角色进行自我纠正。

记忆对于自主游戏角色至关重要，它能让角色回忆起之前的感知、行动和认知。它也有助于追踪在当前环境下可能不太相关的长期目标和动机。利用一种名为 “检索增强生成”（RAG）的技术，开发人员可以使用相似性搜索来 “记住 ”与当前提示相关的信息：

• E5-Large-Unsupervised - 利用 NVIDIA 游戏内推理 SDK，开发者可以在游戏过程中使用我们优化的嵌入模型。

通过综合运用上述模型和技术，我们的合作伙伴已经打造出首款支持自主意识游戏角色体验让我们一同展望未来。

NVIDIA ACE 角色充当自主战术小队成员，会服从命令、收集分享战利品并与敌人交战。他们通过独立感知和理解周围发生的动态事件来提供战略建议，并采取必要的步骤完成动作或命令，而无需玩家额外提示或协助。

在 AI 的加持下，利用上述各项技术，他们的自主意识和能力创造出通常只有与真人队友才能体验到的动态游戏体验。

“绝地求生 (PUBG: BATTLEGROUNDS)”定义了战术竞技类游戏，玩家在游戏中争夺最后的胜利。以激烈的战术玩法、逼真的战斗场景和广阔的地图为特色，“绝地求生 (PUBG: BATTLEGROUNDS)” 自 2017 年推出以来已成为一种文化现象，至今每天仍是 Steam 最热玩的五大游戏之一。

2025 年， PUBG IP 系列将通过 PUBG Ally 推出协同游戏角色 (CPC)。Ally 采用 NVIDIA ACE 构建，利用 Mistral-Nemo-Minitron-8B-128k-instruct 小语言模型，使AI队友能够使用游戏专用术语进行交流，提供实时战略建议，寻找和分享战利品，驾驶车辆，并使用游戏中的武器与其他真人玩家作战。

“PUBG IP 系列的 PUBG Ally 和 inZOI 的 Smart Zoi 是全球最先使用 NVIDIA ACE 打造 CPC (陪玩角色) 的游戏，正在为玩家开启全新的独特体验。在 KRAFTON，我们对 ACE 自主意识游戏角色的可能性以及借助 AI 如何提升我们创造游戏的方式感到激动。” —— Kangwook Lee, Head of Deep Learning Division, KRAFTON

《永劫无间手游》PC 版 (NARAKA: BLADEPOINT MOBILE PC VERSION) 将在 3 月添加基于 NVIDIA ACE 技术的本地推理 AI 队友功能，“永劫无间 (NARAKA: BLADEPOINT)"PC 版也将在 2025 年内发布此功能。该游戏将是首款采用 NVIDIA ACE 和大语言模型在 PC 端侧实现 AI 队友功能的国产游戏，将无拘战斗体验提升至全新水平。“永劫无间 (NARAKA: BLADEPOINT)"每周在 Steam 上都是十大热门游戏之一，其手游版在手机、平板电脑和 PC 上吸引了数百万玩家。

在《永劫无间手游》PC 版 (NARAKA: BLADEPOINT MOBILE PC VERSION) 的生存竞技模式中，多达 40 名玩家将在庞大的战场中进行角逐。这些玩家将利用独特的移动技能、战斗技巧和受东方文化启发的武器，在激烈的战斗中进行连击、招架和反击，争夺最终胜利。

在游戏中，由 NVIDIA ACE 提供支持的 AI 队友可以与玩家组队，并肩作战，找到所需的特定道具，交换装备，提供解锁技能的建议，并做出有助于取得胜利的战斗决策。

“NVIDIA 能够帮助游戏开发者利用 AI 技术突破预期界限。我们在《永劫无间手游》PC 版 (NARAKA: BLADEPOINT MOBILE PC VERSION) 中使用 NVIDIA ACE 创建 AI 自主角色，打造在 PC 端侧运行的 AI 队友，自然流畅地协助玩家参与史诗级战斗。”——胡志鹏，网易高级副总裁，雷火事业群负责人

KRAFTON 的 "inZOI" 是 Steam 上愿望单前十游戏之一。这款即将推出的生活模拟游戏能让玩家改变游戏世界的任何方面，创造独特的故事和体验。inZOI 采用虚幻引擎 5 开发，其逼真的图形让玩家可以利用游戏中易于使用的创作工具自由地将自己的想象力形象化。玩家不仅可定制角色的外观和装备，还能使用各种自由移动的家具和建筑来打造梦想家园。

基于 NVIDIA ACE 构建的 inZOI 引入了 Smart Zoi，即陪玩角色 (CPC)，其反应速度和逼真程度超过以往的任何游戏。玩家将体验到全面的社区模拟，城市中的每一个 ZOI 都会在其生活目标的驱动下自主行动，并对周围的环境和发生的事件做出反应，从而产生更深层次的沉浸感和复杂的社会状况。

下面的视频通过对 LM (语言模型) 前和 LM  (语言模型) 后场景的对比，展示了尖端的设备 LM (语言模型) 技术对 inZOI 中角色互动和行为的深远影响。

NVIDIA ACE 角色也可以在单人游戏、合作游戏以及多人游戏中扮演对手角色。

与传统的脚本化 Boss 不同，玩家面对的敌人会持续从玩家行为和行动中学习，反击玩家最常用的策略、能力和法术，迫使玩家做出调整。与具有动态调整攻击能力的 Boss 对抗，要求玩家提高游戏水平，而并非简单地学习攻击模式。进入大型多人游戏世界，敌方派系会根据玩家的战术不断调整。游戏的可能性是无穷的，有了动态人工智能，没有两场战斗是相同的，使游戏更加刺激和引人入胜。

Wemade Next 的 “传奇 5 (MIR5)”是广受欢迎的“传奇(Legend of Mir)” 系列游戏的最新作品，它将利用 NVIDIA ACE 为玩家提供独特的 Boss 对战体验。在 ACE 技术的帮助下，Boss 能从之前与玩家的对战中学习，适应玩家在大型多人在线角色扮演游戏 (MMORPG) 中使用的战术、技能和装备。

“传奇 5 (MIR5)”的 AI 会评估当前面对的真人玩家的装备和设置，将其与过去的对战进行比较，然后确定取得胜利的最佳行动方案。借助于 ACE 技术，Boss 对战将独一无二，如果玩家再次击杀已经被打败的 Boss，这次的战斗结果将会完全不同。这样会让玩家时刻保持警惕，使游戏更具吸引力。

“我们与 NVIDIA 携手合作，利用 NVIDIA ACE 自主意识游戏角色开启了游戏的新时代。“传奇 5 (MIR5)”的 AI Boss 是游戏界的一个里程碑时刻，它让每个游戏环节都能遇到独特的 Boss。我们很高兴看到这项技术改变游戏。”—— Jung Soo Park, CEO, Wemade Next

一些开发者正在利用 NVIDIA ACE 制作全新类型的游戏，在这些游戏中，对话、对抗和互动完全由玩家行为和AI反应驱动。这些角色不仅可以对话，还能在游戏中采取行动，为玩家提供全新的沉浸式游戏互动方式。

Meaning Machine 的 Dead Meat 是一款即将上线的谋杀解谜游戏，玩家可通过语音或键盘向嫌疑人提出任何问题。想知道嫌疑人的不在场证据吗？想要与他们探讨人生的意义吗？表达你的爱意？玩家的话语拥有神奇的力量，无所不能。你可以说服、操纵、威胁嫌疑人，甚至让他们吐露内心的秘密。审讯室就是你的沙盘，想象力不足是唯一的限制。

CES 2025 上展示了 Dead Meat 在 GeForce RTX 50 系列 GPU 上的实时运行效果，首次在本地生成对话。在此之前，这款游戏使用云端 LLM（大语言模型），但 Meaning Machine 通过与 NVIDIA 合作，创建了一个可在本地 “设备上 ”运行的 Dead Meat 版本。

新版《Dead Meat》使用了 Meaning Machine 的 Game Conscious AI™、NVIDIA ACE 和 NVIDIA Mistral-NeMo-Minitron-8B-128K 小语言模型 (SLM)、Eleven Labs 的文本到语音 (TTS) 以及 Open AI 的 Whisper 自动语音识别 (ASR)，提供了与云端运算相同的角色深度，但现在对话文本是本地 GPU上生成的。

为达成这样的对话质量，Meaning Machine 使用自身的对话数据对 NVIDIA 小语言模型进行微调，然后将该模型与其 Game Conscious™ 系统集成。准备好在今年晚些时候释放你内心的侦探精神吧，敬请关注 Dead Meat 的 Steam 页面 ，了解即将推出的演示内容。

“AI People” 是 GoodAI 推出的一款独特沙盒游戏，玩家可与 AI 驱动的 NPC 一起创建并演绎场景，NPC 可与其他 NPC、所处的环境以及玩家之间自主互动，营造出一种动态的、由 AI 生成的叙事。

每个 NPC 都采用大语言和语音识别模型构建，在 GeForce RTX GPU 上本地运行或云端运行，能自主地与环境及环境中的对象互动。这些 NPC 会学习、体验情感、追求目标、产生梦想、交谈，为玩家创造可经历的动态故事。

观看下面的 AI People 视频，抢先了解这种全新的游戏体验：

“暗影火炬城 (F.I.S.T.: Forged In Shadow Torch)” 是一款广受好评的类银河战士恶魔城游戏，支持 DLSS、Reflex 和光线追踪技术。该游戏的开发商钛核游戏现已发布一款未来项目的技术 demo- "动物朋克 (ZooPunk)" 。

钛核游戏的 AI 技术 demo 采用 NVIDIA ACE、Audio2Face 技术，并首次在端侧实现游戏内 Stable Diffusion 图像生成，引导玩家在云海之上的漂浮厨房展开对话和互动。

玩家可与盟友讨论在任务中收集到的情报，亦可前往码头设计一艘新战舰，帮助雷顿 (Rayton) 与机械帝国作战。借助本地托管的 Stable Diffusion 图像生成功能，玩家可请求制作新的战舰图样，并通过文本转语音输入调整其喷漆效果，无需逐一调整众多滑块。

敬请关注钛核游戏网站，了解更多关于即将推出项目的详情。

除了为自主意识游戏角色提供支持外，开发者还利用 ACE 技术来推动在游戏中使用 NVIDIA Audio2Face 进行的 AI 赋能的面部动画和唇部同步。使用 Audio2Face，开发人员可以轻松地为以前只有基本唇部动作的角色制作动画。配音演员录制台词，然后将其输入 Audio2Face，在这里角色的面部、眼睛、舌头和嘴唇会相应地生成动画，为开发者节省大量的时间和金钱。

Survios 的“异形：侠盗入侵 (Alien: Rogue Incursion)”采用了 NVIDIA Audio2Face 技术，目前已登录 PCVR 和 PSVR2。作为一款动作恐怖虚拟现实游戏，“异形：侠盗入侵 (Alien: Rogue Incursion)”的原创故事让玩家完全沉浸在异形宇宙的恐怖氛围中。这款游戏由异形迷为异形迷打造。

在玩家的生存之旅中会遇到一些人形幸存者，他们都由 Audio2Face 提供支持，根据配音演员录制的对话生成逼真的面部动画。

完美世界游戏旗下的“诛仙世界 (World of Jade Dynasty)”是一款基于虚幻引擎 5 的大型多人在线角色扮演游戏，也是热门游戏“诛仙 (Jade Dynasty)”的续作。在游戏中，玩家可以体验到百人大战的快感、秘境开荒的刺激、云海御剑的自由。无论是 PVP、PVE 还是 PVX 爱好者，都有一条独特的修仙之路在等着你。

在“诛仙世界 (World of Jade Dynasty)”最新的演示视频中，开发者团队展示了应用 NVIDIA Audio2Face 为游戏中角色添加中英文配音的进展，并深入解析了如何根据音频文件中检测到的不同变量，动态调整动画的幕后过程。如果需要进一步调整，开发者当然可以深入参与修改，根据具体需求对对话和动画进行精细调整，以更好地适应特定场景。

借助生成式 AI，玩家将体验到全新的游戏形态，使游戏提升到全新高度。顶级游戏开发公司已经开始在 “绝地求生 (PUBG: BATTLEGROUNDS)”、 “inZOI”、 “传奇 5 (MIR5)”和 《永劫无间手游》PC 版 (NARAKA: BLADEPOINT MOBILE PC VERSION) 等大型游戏中展示这种可能性。这些例子只是冰山一角，敬请期待精彩无限的 2025 年。

了解有关 NVIDIA ACE、未来开发和抢先体验计划的详情。访问 GeForce.cn，了解 NVIDIA RTX 技术和 GeForce RTX GPU 在最新游戏中的更多应用。此外，请务必查看我们所有其他 GeForce RTX 50 系列公告，了解我们如何进一步提升游戏和应用体验，并推出推动 PC 行业发展的全新创新技术。