永劫无间手游公测开启：AI语音队友引热议，全球首款Copilot玩法解析

泪为你流

7月25日，那备受众人期待的《永劫无间》手游正式拉开公测的帷幕，在这之前它于预下载阶段就荣耀登上了App Store免费的全部榜单里名列前茅！游戏之中全新被引入的语音AI队友功能，快速地把广大玩家的目光给吸引住了，还收获了众多好评。

这一创新玩法是由网易24工作室，和网易伏羲AI实验室一起共同研发的，它身为全球首款游戏Copilot队友，此功能依靠着最前沿的AI大模型推理技术，成功塑造出了和真人玩家体验相媲美的AI队友。AI队友不光能够自行去执行跑图、搜索物资、参与战斗、跑圈等战术动作，还能够在战斗里提供辅助和救援，借助自然语音跟玩家展开双向无缝沟通。

在《永劫无间》手游上线当日之时，网易伏羲AI技术负责人睿风受到邀请，在「2024骁龙游戏技术赏」这个活动上发表演讲，他首次公开去分享《永劫无间》手游里语音AI队友的技术探索以及应用成果。该活动是高通公司按照惯例在ChinaJoy前夕举办的年度盛会，在今年，高通公司联合网易伏羲此类产业合作伙伴，一起探讨移动技术创新怎样去赋能前沿数字娱乐体验。

演讲当日，正好是《永劫无间》手游公测上线之日，睿风没办法抵达现场，因此借助连线的形式来进行分享，下面是他的演讲实录：

各位好呀，我是源于网易伏羲的睿风，满心欢喜能够参与「骁龙游戏技术赏」 。

（网易伏羲AI技术负责人睿风现场连线分享画面）

网易伏羲，在2017年9月份成立，是针对游戏行业开展AI研究的国内首个，人工智能实验室，以“创建人工智能与游戏交叉领域且处于世界一流水平的实验室”作为宗旨，运用人工智能前沿技术，为玩家打造新世代的游戏体验，还借助游戏平台的大量数据以及仿真环境，推动人工智能技术进步。

从2017年成立一直到现在，网易伏羲在好多款游戏里让大量的AI玩法得以落地。比如说，在《逆水寒》端游里，我们率先创造了AI照片捏脸玩法以及智能养育系统，在《永劫无间》端游中，我们推出了基于强化学习技术的噩梦人机玩法，靠着AI反外挂技术来确定违规玩家的位置，并对其进行处罚，以此保证公平的游戏环境。去年，我们于现象级游戏《逆水寒》手游里边，落地了好多创新的AI应用，像智能NPC，文字捏脸，大宋头条，UGC剧组模式诸如此类，打造出全球首款AI游戏，还得到了玩家们非常高的认可与欢迎。

今年，我们于今日正式上线的《永劫无间》手游里，率先推出有全球首创的语音AI队友玩法，在这个玩法这儿，玩家能够邀请智能AI队友去进行一场完整的游戏体验，玩家能够借由语音交互举措，直接同AI展开交流，这个AI队友首先能够听懂指挥，搜装送装、团战配合各方面均非常精通，其次能够实时观察战况，汇报关键信息同时答疑解惑，此外AI队友还拥有强大的战斗能力，博弈强且配合佳，最后该AI队友还能够自由交流，给予玩家较高的情绪价值。

网易伏羲凭借多年技术积累，结合语音识别、语义理解、文本生成、语音合成、强化学习、模仿学习等多项 AI 技术，解决诸多技术难题，目的是达成那个兼能听、说与做之事的 AI 队友。为企及跟真人队友几无差别的语音交互体验，我们为此玩法设定若干技术指标。

起初相较于借助唤醒词或者手动按下按钮才可催生的交互形式而言，完全开启麦克风的实时语音交互给我们带来更为繁多的技术方面的挑战，这里面最为关键核心的就是针对噪音进行检测以及对并非交互范畴内的内容予以识别的能力，为了能够尽可能地削减误触发生的概率情况，我们选用网易伏羲所拥有的有灵众包平台，在开展开发工作的期间就已采用自动数据形成闭环的方式，凭借持续不断地收集各种各样不同机型以及项目团队里头成员们的真实体验所产生的数据，进而持续不断地优化模型所呈现出来的效果。

其次，为能使AI精准识别玩家指令，进而做出極其合理的行为决策，我们不光引入自然语言理解技术，以此提升指令识别能力 ，还采用基于指令的强化学习技术 ，致使模型按照指令以及实时的战场状态 ，做出最为合理的行为决策 ，达成在尽可能遵循玩家指令的情形下 ，又维持较高强度的游戏能力 。

其一，为了达到极低的交互体验速度这项指标，我们开展了大量的工程优化事宜，其二，当前线上实现了实时响应时长最短300ms内的语音和行为响应，其三，最长响应时长能够也限定在1s左右，其四，由此达成了交流无延迟，完成让配合更及时这一目标 。

像之前所讲的那样，这个语音AI队友的玩法，对时延极为敏感，为了给用户带去更为极致的交互体验，伏羲和高通展开了深度合作，把部分AI推理，从云端GPU转移到第三代骁龙8移动平台的NPU上。

我们为何要去开展端侧推理呢？一来是存在低时延的情况，相较于基于云的推理，端侧推理能够节省网络传输所产生的时间延迟，尤其是针对一些网络条件欠佳地区的玩家而言，这部分时延降低所带来的收益颇为可观，进而给这部分玩家带来更为优质的游戏体验。二来从公司层面来讲，AI推理从云端转移至端侧，能够充分运用玩家的终端算力，能够降低服务运行成本。现阶段，我们清楚云端的GPU服务都相对昂贵，出于对控制成本的需求，许多AI服务会针对应用实施一些使用限制，或者让玩家采取付费使用的形式，然而端侧推理能够使这部分玩家自由自在地体验AI玩法 。

当下，于《永劫无间》手游的 AI 队友玩法里头，网易伏羲与高通已然把部分 AI 能力转移到了端侧，此刻正展开更多深度合作。我们期待往后能够把更多 AI 能力，涵盖大语言模型（LLM）、语音合成（TTS）等技术，适配至手机终端，为玩家予以更佳的游戏体验。