7月25日，备受期待的《永劫无间》手机游戏正式开始公开测试，该手机游戏预下载阶段便荣登App Store不收费总榜TOP1！游戏中最新引入的语音AI队友功能，迅速吸引了广大玩家的关注和好评。

这一创造方法由网易24职业室联合网易伏羲AI实验室共同研发，作为全球首款游戏Copilot队友，该功能依托于最前沿的AI大模型推理技术，成功塑造了和真人玩家尝试相媲美的AI队友。AI队友不仅能够自主执行跑图、搜索物资、参和战斗、跑圈等战略动作，更能在战斗中提供辅助和救援，通过天然语音和玩家进行双给无缝沟通。

《永劫无间》手机游戏上线当日，网易伏羲AI技术负责人睿风应邀在「2024骁龙游戏技术赏」上发表演讲，第一次公开同享《永劫无间》手机游戏中语音AI队友的技术寻觅和应用成果。该活动主题为高通企业循例在ChinaJoy前夕举办的年度盛会，现在，高通企业携手网易伏羲等产业合作伙伴，共同探讨移动技术创造怎样赋能前沿数字娱乐尝试。

因演讲当日恰逢《永劫无间》手机游戏公开测试上线，睿风无法到达现场，因此通过连线方法进行同享。下面内容是他的演讲实录：

大家好，我是来自网易伏羲的睿风，很高兴能够参与「骁龙游戏技术赏」。

（网易伏羲AI技术负责人睿风现场连线同享画面）

网易伏羲成立于2024年9月份，是国内第壹个面给游戏行业进行AI研究的人工智能实验室，大家以“创建人工智能和游戏交叉领域的全球一流实验室”为宗旨，运用人工智能尖端技术为玩家营造新世代的游戏尝试，同时也借助游戏平台的海量数据和仿真环境，推动人工智能技术的进步。

自2024年成立到现在，网易伏羲已经在多款游戏中落地大量的AI方法。例如大家在《逆水寒》端游中首创AI照片捏脸方法和智能养育体系，在《永劫无间》端游中，大家上线了基于强化进修技术的噩梦人机方法，利用AI反外挂技术定位和处罚违规玩家确保公正游戏环境。去年大家在现象级游戏《逆水寒》手机游戏中落地了大量创造的AI应用，包括智能NPC、文字捏脸、大宋头条、UGC剧组玩法等等，打造了全球首款AI游戏，也获取了玩家们的高度认可和欢迎。

现在，大家在今天正式上线的《永劫无间》手机游戏中，率先公开了全球首创的语音AI队友方法。在这个方法中，玩家可以邀请智能AI队友进行一场完整的游戏尝试。玩家可以通过语音交互的方法，直接跟AI进行探讨。这个AI队友首先能听懂指挥，搜装送装、团战配合样样精通；其次能实时观察战况，汇报决定因素信息并答疑解惑；除了这些之后AI队友还具备强大的战斗能力，博弈强、配合好；最后该AI队友还能自在探讨，给予玩家较高的心情价格。

为了能实现这个能听、能说还能做的AI队友，网易伏羲基于多年的技术积累，结合语音识别、语义领会、文本生成、语音合成、强化进修、模仿进修等多项AI技术，化解了大量的技术难题。为了实现跟真人队友几乎无异的语音交互尝试，大家给这个方法设定了多少技术指标。

首先相比于唤醒词或手动按钮触发的交互方法，全开麦的实时语音交互对大家提出了更多的技术挑战，其中最核心的就是噪音检测和非交互内容识别的能力，为了尽也许降低误触率，大家运用网易伏羲的有灵众包平台，在开发期就采用自动数据闭环方法，通过持续采集各种机型和项目成员们的真正尝试数据，不断优化模型效果。

其次，为了让AI能够精确识别玩家指令并做出最合理的行为决策，大家不仅引入了天然语言领会技术来提高指令识别能力，而且采用了基于指令的强化进修技术，让模型能够根据指令和实时的战场情形，做出最合理的行为决策，实现了尽也许遵循玩家指令的基础上，又保持较高强度的游戏能力。

最后，为了达到极低的交互尝试速度，大家做了大量的工程优化职业。当前线上的实时响应时长最短可以实现300ms内的语音和行为响应，最长响应时长也能控制1s左右，从而实现了让探讨不延迟，让配合更及时。

正如前面提到的，这个语音AI队友方法对于时延特别敏感，为了给用户带来更极点的交互尝试，伏羲跟高通进行了深入合作，将部分AI推理从云端GPU迁移到第三代骁龙8移动平台的NPU上。

何故大家要去做端侧推理？首先就是低时延，相比于基于云的推理，端侧推理可以节省网络传输带来的时刻延迟，特别是对于一些网络条件不太好的地区的玩家，这部分的时延降低带来的收益是特别可观的，从而给这部分玩家带来更好的游戏尝试。其次从企业层面来说，AI推理从云端迁移到端侧，可以充分利用玩家的终端算力，降低服务运行成本。大家了解目前云端的GPU服务都是相对贵的，为了控制成本，很多AI服务都会对应用做一些运用限制或让玩家采用付费运用的方法，而端侧推理可以让这部分玩家自在地尝试AI方法。

当前在《永劫无间》手机游戏的AI队友方法中，网易伏羲跟高通已经迁移了部分AI能力到端侧，目前正在做更多深入合作。大家期望未来可以将更多AI能力，包括大语言模型（LLM），语音合成（TTS）等技术适配到手机终端，给玩家们带来更好的游戏尝试。