G-Assist 项目会从玩家处接收语音或文本输入,以及游戏窗口中内容截图。游戏截图被输入到 AI 视觉模型中,这些模型可为大型语言模型 (LLM) 提供上下文感知和对特定的应用程序的理解,而 LLM 是连接到游戏知识数据库 (如 wiki) 的。LLM 的输出基于游戏中正在发生的情况,作出富有洞察力的个性化响应 (来自 AI 的文本或语音)。
NVIDIA 和 Studio Wildcard 合作,在《方舟:生存飞升》(ARK:Survival Ascended) 的演示 Demo 中展示该技术。G-Assist 项目可帮助回答有关生物、物品、背景知识、任务、关卡 BOSS 等方面的问题。由于G-Assist 项目具有游戏环境感知和上下文理解功能,能根据玩家的游戏进程提供个性化回复。
G-Assist 项目还能配置玩家的游戏系统,以获得最佳游戏性能和能效。它可以提供性能指标的深入理解,根据玩家的硬件优化图形设置,进行安全超频,甚至在保持性能目标的同时智能降低功耗。
我们期待 AI 助手能够改变我们与喜爱的游戏和应用进行互动的方式。不妨想象一下,在图片或视频应用中,你可以通过复杂的创意工作流快速获得基于情景感知的帮助;或者让 AI 助手分析你的多人游戏回放,然后为你提供策略指导,让你在比赛中提升排名。G-Assist 项目可让你提前洞见这样的未来。
G-Assist 项目并不会像我们在 2017 年愚人节预言视频中展示的那样替你玩游戏,但是它能帮助你在喜爱的游戏中获得更多乐趣,并让你能够在遇到棘手的 Boss 时随时获得帮助。想让 AI 助手为你叫外卖?现在还不行,不过我们肯定会考虑添加该功能!
如需了解更多详情,请查看我们的 G-Assist 项目专题文章。