游戏社交、强互动性，高沉浸式体验游戏语音|组团开黑，离不开游戏语音这一“外挂”！Nertc for Wwise 游戏语音解决方案解析

龙年春节将至，想好跟亲朋好友们组什么局了吗？

每逢春节，对于我们游戏人来说，必定少不了新年“开黑局”，和老友们相会于游戏之巅，连麦唠嗑，吐槽对手，来一场酣畅淋漓之战，并与老友们道一声“新年快乐”，送出诚挚的新年祝福~

(图片来源：网络）

从古至今，“游戏”都是生活中不可或缺的一项社交内容，从过去的投壶、蹴鞠、踢毽子，再到如今五花八门的电子游戏，你会发现，无论游戏再如何更迭，本质都是人与人之间的互相联系、协作与配合。

展望 2024 年的中国游戏市场，仍面临着前所未有的挑战，经济增长放缓、消费降级、人口老龄化和出生率下降......方方面面都直接影响到游戏市场的整体表现。用户基数与玩家游戏时间的增长放缓，游戏行业进入到“存量博弈”的时代，在这样一个极度内卷的大环境下，对于游戏厂商而言，稳中求变，唯有不断形成自己的竞争优势，提升玩家体验并能长久留住用户才是正解。

说到提升玩家体验，肯定绕不过“游戏社交”这一话题，无社交，不游戏。不管是 MMO、SLG 中的强社交，还是动作游戏中的弱社交，无论是游戏里随机匹配的陌生社交，还是游戏外的熟人组队“开黑”，“社交”一直是游戏世界中尤为重要的一环。游戏作为一个天然的社交平台，能为玩家提供丰富的话题和场景，同时玩家的竞技心理与分享欲也能通过社交来得以满足。社交也从最开始的文字交流，也逐步发展为音频多场景实时互动，而游戏语音的强互动性，高沉浸式体验，由刚开始最不起眼的游戏功能之一变成了如今影响玩家体验的关键因素，也越来越受到游戏开发商的重视。

(图片来源：网络）

如今，游戏语音技术随着互联网的发展也得到了飞跃式的突破，从双人聊天到万人大房互动，从第三方语音软件工具到语音 PaaS 的 SDK，从简单的语音交流到沉浸式语音体验......这些变化都是游戏厂商在提升玩家体验道路上的一次次重大升级。出色的游戏语音体验能够大幅提升玩家的社交活跃度和留存率，但游戏语音在不同游戏中的应用场景不尽相同，想要打造极致的游戏语音体验，开发者同样也面临着诸多挑战。

例如，除了游戏语音互动外，游戏音频在玩法表现中也扮演了重要的角色，包括背景音乐（BGM）和音效等。然而，当开发者们在处理这两个方面时，常常面临一些难点：他们需要分别使用音频引擎，并且接入专门的语音 RTC SDK，虽然他们都属于游戏中的声音，但需要对接不同的技术服务商，这增加了本不必要的开发工作量。此外，对于手游而言，游戏音效和语音通常属于不同的音量系统，导致玩家在使用和关闭语音时产生音量跳变。为了实现回声消除，语音不得不使用较低的通话音量，这直接影响了音效的质量，从而影响玩家的游戏体验。

(图片来源：网络）

大家都知道，网易本身孵化了众多爆款游戏，网易云信在满足内部游戏对语音需求的同时，围绕游戏引擎进行了诸多的适配，其中包含语音引擎，比如 Nertc for Wwise 游戏语音解决方案，能帮助游戏厂商将游戏语音与游戏场景完美融合，实现混响、衍射、阻隔等效果，还原真实世界中的声音。近期，许多业内朋友也纷纷都来问我，并表示了极大的兴趣，我们也来详细聊一聊其中的奥妙。

首先，来谈一谈沉浸式语音体验。游戏语音发展至今，玩家的需求已经从单一的能语音聊天，转向更贴近现实场景的沉浸式体验需求—— 从“听个声”到“听得真”。

最为明显的就是强语音诉求的 FPS 游戏。举个血淋淋的亲身经历，当你没有听清楚耳机里传来的脚步声，突然转角遇到手持消音 AK47 的隔壁壮汉，又或者你正在开心舔包时，压着脚步摸过来的四位开黑佬，对着你背后一通扫射......连踩到石子的轻微响动都可能扭转整个游戏局势，可见在游戏中，玩家能“听得真”尤为重要。

如果声音有 3D 感，玩家的沉浸感和真实感就会提升很多。3D 音效，也称为空间音效（Spatial Sound），是通过在音频信号中添加空间信息，让听众可以感受到声音来自于特定的位置和空间环境，给游戏玩家带来更沉浸式、更真实的声音效果。

(图片来源：网络）

例如在玩 FPS 游戏过程中，你左后方的脚步声，同伴在你右边换弹夹的声音，又或是左后方窗户被打碎的声音.....你都能通过 3D 音效很好地感知，依靠游戏内的空间音效来判断对手身处的位置，听着真声儿来完成绝命一击。

本质上，3D 音效就是基于人耳的一些特殊心理声学效应，通过一些声学相关算法计算模拟，仿造出似乎存在但实际虚构的声音。网易云信提供的 3D 音效 AI 方案就能够将声音来源方向模拟成来自三维空间的特定位置，包括前后左右和上下，从而营造出更加真实和沉浸的音频体验，而且，这一技术已经成功集成到网易云信音视频 SDK 中，正迅速落地到各种游戏项目中。

再来说说环境噪声，相信大家都有过这样的体验——在游戏语音开黑时，跟队友紧张配合到一半，如果其中一名队友身处网吧，对方耳机里传来嘈杂且尖锐的环境音是十分糟心的体验，甚至会影响整个团队的发挥！那么，在这种场景下，降噪就成为了提升游戏体验的基本项。

(图片来源：网络）

音频降噪中最具挑战的噪声类型有两种：非平稳噪声和瞬态噪声。传统的 AI 降噪方案往往无法很好地平衡噪声与音质，通常噪声没了，通话也受到了牵连，要达成两者的平衡，只能提升成本。

网易云信为解决游戏厂商这一窘境，给出了自研 “AI 降噪”算法，在有效降噪、提升音质的同时，还做到了降本增效。这项技术通过智能分析环境音成分，自动甄别并过滤环境噪声。开启 AI 降噪后，在嘈杂的环境中能针对背景人声、键盘声等非平稳噪声进行定向降噪，并提升对环境稳态噪声的控制，保留更纯粹的人声，对于瞬态噪声，比如呼喊声、敲桌子声、关门声、桌椅挪动声等，也能更有效地抑制。

经常玩儿手游的朋友都知道，手游平台的语音一直存在着一个割裂游戏体验的问题：玩家一开麦克风，游戏声音就会如电话音一般，让体验割裂。此外，很多游戏场景都和音乐有着密切关联，比如在《天谕》中，游戏中的玩家可以连麦、合唱，甚至使用游戏音乐伴奏，但传统的音频处理方案会对音乐造成损失，例如，音乐经过 AGC 和 NS 后，音乐信号就会被处理得忽大忽小、断断续续。

针对以上痛点，网易云信也同样交出了最佳答卷：回声消除智能 AEC（声学回声消除）算法和 AI 音乐检测模型。游戏语音不仅完成了回声消除，还能让游戏保持媒体音量，开麦也不会影响游戏声音的品质，AI 音乐检测模型算法通过一个轻量级的神经网络，实时对声音场景进行三分类：音乐、语音和噪声。在检测出信号是否具备音乐这一信息后，当音乐信号进入系统时，通过动态调节其它算法模块，保证音乐质量。

（图片：游戏语音在《天谕》中的社交化应用）

对于大多数游戏类型，语音虽然不是游戏中的核心功能，但游戏作为当下网络时代的天然社交平台，语音功能不仅为游戏带来更多增益价值，还能助力游戏开发者活跃游戏玩家，提升玩家游戏体验感和留存度。期待在不久的未来，我们能看到语音模块更多有趣的变化！

感兴趣的朋友，戳我了解游戏语音解决方案详情。