备受瞩目的《永劫无间》手游在7月25日正式开启公测,这款备受期待的作品在预下载阶段便在App Store的免费总榜上占据显赫位置。其独特的卖点——全新的语音AI队友功能,迅速吸引了广大玩家的注意与赞誉。
此创新玩法由网易24工作室与网易伏羲AI实验室联手打造,是全球首款游戏Copilot队友。依托于领先的AI大模型推理技术,AI队友成功实现了与真人玩家体验相媲美的互动体验。不仅能够自主执行跑图、搜索物资、参与战斗、跑圈等战术动作,还能在战斗中提供辅助和救援,通过自然语音与玩家进行双向无缝沟通。
网易伏羲AI技术负责人睿风在「2024骁龙游戏技术赏」上,通过远程连线的方式分享了《永劫无间》手游中语音AI队友的技术探索和应用成果。此次活动是高通公司一年一度的ChinaJoy前夕盛会,汇聚了众多产业合作伙伴,共同探讨移动技术创新如何赋能前沿数字娱乐体验。
网易伏羲,作为国内首个专注于游戏行业的AI研究实验室,自成立以来,已成功在多款游戏中落地多项AI玩法。在《逆水寒》端游中,开创了AI照片捏脸玩法和智能养育系统;在《永劫无间》端游中,引入了基于强化学习技术的噩梦人机玩法,并利用AI反外挂技术确保游戏公平性。去年,网易伏羲在《逆水寒》手游中推出的AI应用,如智能NPC、文字捏脸、大宋头条、UGC剧组模式等,不仅展示了全球首款AI游戏的魅力,也赢得了玩家的高度认可。
在《永劫无间》手游的公测版本中,首次推出了全球首创的语音AI队友玩法。玩家能够邀请智能AI队友一同进行游戏,通过语音交互与AI进行交流。AI队友不仅能够理解玩家的指令,执行搜装、送装、团战配合等任务,还能实时观察战况,提供关键信息和解答疑问。此外,AI队友具备强大的战斗能力,能够与玩家默契配合,同时提供情绪价值,增强游戏的沉浸感。
为了实现这一创新的语音AI队友玩法,网易伏羲团队基于多年的技术积累,综合运用了语音识别、语义理解、文本生成、语音合成、强化学习、模仿学习等多项AI技术,攻克了大量技术难题。为了提供近乎完美的语音交互体验,团队特别关注了全开麦实时语音交互的挑战,通过网易伏羲的有灵众包平台,采用自动数据闭环方式,持续优化模型效果,以减少误触率。
在确保AI能够精准识别玩家指令并做出合理决策方面,团队不仅引入了自然语言理解技术,还采用了基于指令的强化学习技术,使模型能够根据指令和实时战场状态,做出最优行为决策,平衡了遵循玩家指令与保持高游戏能力之间的关系。
为了提升交互体验的速度,团队进行了大量的工程优化工作,使得当前线上实时响应时长最短可达300ms,最长也不超过1s,确保交流不延迟,配合更及时。
为了优化用户体验,网易伏羲与高通进行了深入合作,将部分AI推理从云端GPU迁移到第三代骁龙8移动平台的NPU上。此举不仅降低了时延,提高了网络条件不佳地区玩家的游戏体验,也有效降低了服务运行成本,让更多玩家能自由体验AI玩法。
目前,部分AI能力已在《永劫无间》手游的AI队友玩法中实现端侧推理,未来网易伏羲计划将更多AI技术,包括大语言模型(LLM)、语音合成(TTS)等,适配到手机终端,为玩家带来更多惊喜的游戏体验。