一起学（抖音快手）音视频，还在等机会

本文链接：https://blog.csdn.net/qq_58071132/article/details/137188443

合唱也要高音质

唱歌的人都有一个共同的心理需求，就是希望别人夸自己唱得好听。音质在合唱场景下就显得尤为重要了。而影响实时合唱音质的因素主要包括：音频采样率、码率、延时。

**采样率：**是每秒从连续信号中提取并组成离散信号的采样个数。采样率越高，音频听起来越接近真实声音。

**码率：**它是指经过编码（压缩）后的音频数据每秒钟传输所表示的数据量（比特）。码率越高，意味着每秒采样的信息量就越大，对这个采样的描述就越精确，音质越好。

假设网络状态稳定不变，那么采样率越高、码率越高，音质就越好，但是相应单个采样信息量就越大，传输时间可能会相对更长。也就是说，高音质也可能会影响延时。

敲黑板：解题思路

之前我们提到，因解决方案的不同，“音频”有着不同的含义，这与你的实现逻辑有关。

1.音频=歌声+伴奏

在采集端，我们传输的音频如果是包括歌声与伴奏。那么就意味着是这样的逻辑，如下图。

歌手A先获得伴奏；
A 将歌声与伴奏在本地混音后传输给 B；
B 根据A的音频进行演唱，这时 B 可以听到合唱的效果；
B 将合唱后的混音传输给 A，A 就可以听到合唱效果了。

在这种传输方式下，如果要保证 A 能听到合唱效果，会有两段“端到端延时”，即第2、3步产生的。由于B听到的是A的歌声与伴奏，所以该方案能保证 B 的体验。但由于伴奏传输给 B，B 的歌声又需要再传输回到 A，A 听到的伴奏与B的声音其实之间有很大延时。如果按照上文的延时推断，你需要付出更多的努力，才能让端到端的延时降低到歌手A能接受的程度。

2.音频=歌声

在这里，并不是说不要伴奏了。为了解决伴奏、歌声之间的延时问题，我们还有一种方法，就是通过云端将伴奏同时传输给A和B，那么基本可以保证两者能在同一秒听到同一个音符。接下来要解决的就只是歌声的传输了。基本实现逻辑如下，也是我们自己的实现方式：

声网从服务器或本地获取合唱伴奏；
声网通过 SD-RTN™ 将伴奏，实时同步发送给歌手 A 和 B；
歌手 A 和 B 会同时听到伴奏，然后根据伴奏开始自己的演唱；
SD-RTN™ 会实时的将A的歌声传给B端，同样，B 的歌声也会被实时的传输到 A 端；
歌手A和B都能实时听到伴奏和对方的歌声；
同时，观众可以实时听到两个歌手的合唱效果。

这种实现逻辑的好处在于，A、B几乎同时听到伴奏，同时演唱，两者可以实时听到对方的声音。要解决的问题就是降低各自歌声传输到对方的这段端到端延时了。相对来讲，更加简单。

除此之外，其实在线下场景中大家可以看到，很多歌手在唱歌的时候通常都会佩戴耳返，那这个耳返的作用效果在线上实时场景中也是非常关键：

（1）歌手用来监听自己的声音和伴奏，并调节自己音色和情感，这个对延时要求特别高

（2）叠加音效和美声，歌手能听到更极致的音效体验

Agora SDK提供统一接口的低延时K歌耳返功能，通过与手机厂商的深度技术合作，可为K歌、直播类App提供适配不同手机品牌、不同手机机型的耳返应用，我们将传统耳返100-300毫秒的延时降低至50ms以内，结合 Agora 音频整体解决方案，实现超低延时、超低噪声、极致音效的耳返体验。

在github获取我们的合唱Demo，自己动手试试吧

https://github.com/AgoraIO-Usecase/Online-Chorus/

我的NDK模块开发学习之路

什么所提到的知识点，我已经给大家做了一些整理有系统的导图，和资料视频。需要的朋友可以私信我【NDK】或者直接点击下面链接即可领取我分享给你，有不对的地方也欢迎指出，一起交流共同进步。

Android学习PDF+架构视频+面试文档+源码笔记

音视频的开发，往往是比较难的，而这个比较难的技术就是NDK里面的技术。音视频/高清大图片/人工智能/直播/抖音等等这年与用户最紧密，与我们生活最相关的技术一直都在寻找最终的技术落地平台，以前是windows系统，而现在则是移动系统了，移动系统中又是以Android占比绝大部分为前提，所以AndroidNDK技术已经是我们必备技能了。

要学习好NDK，其中的关于C/C++，jni，Linux基础都是需要学习的，除此之外，音视频的编解码技术，流媒体协议，ffmpeg这些都是音视频开发必备技能。