WebRTC VoiceEngine综合应用示例（二）——音频通话的基本流程

最新推荐文章于 2023-08-15 22:31:51 发布
最新推荐文章于 2023-08-15 22:31:51 发布
阅读量697 收藏
点赞数
分类专栏： 配置 文章标签： webrtc

下面将以实现一个音频通话功能为示例详细介绍VoiceEngine的使用，在文末将附上相应源码的下载地址。这里参考的是voiceengine\voe_cmd_test。

第一步是创建VoiceEngine和相关的sub-apis

[cpp]  view plain  copy
  在CODE上查看代码片 派生到我的代码片
  1. //  
  2.     // Create VoiceEngine related instance  
  3.     //  
  4.     webrtc::VoiceEngine* ptrVoE = NULL;  
  5.     ptrVoE = webrtc::VoiceEngine::Create();  
  6.   
  7.     webrtc::VoEBase* ptrVoEBase = NULL;  
  8.     ptrVoEBase = webrtc::VoEBase::GetInterface(ptrVoE);  
  9.   
  10.     webrtc::VoECodec* ptrVoECodec = NULL;  
  11.     ptrVoECodec = webrtc::VoECodec::GetInterface(ptrVoE);  
  12.   
  13.     webrtc::VoEAudioProcessing* ptrVoEAp = NULL;  
  14.     ptrVoEAp = webrtc::VoEAudioProcessing::GetInterface(ptrVoE);  
  15.   
  16.     webrtc::VoEVolumeControl* ptrVoEVolume = NULL;  
  17.     ptrVoEVolume = webrtc::VoEVolumeControl::GetInterface(ptrVoE);  
  18.   
  19.     webrtc::VoENetwork* ptrVoENetwork = NULL;  
  20.     ptrVoENetwork = webrtc::VoENetwork::GetInterface(ptrVoE);  
  21.   
  22.     webrtc::VoEFile* ptrVoEFile = NULL;  
  23.     ptrVoEFile = webrtc::VoEFile::GetInterface(ptrVoE);  
  24.   
  25.     webrtc::VoEHardware* ptrVoEHardware = NULL;  
  26.     ptrVoEHardware = webrtc::VoEHardware::GetInterface(ptrVoE);  
然后可以选择设置tracefile的路径，这里我们还会对麦克风以及回放的声音做一个录制，所以也一并指明路径。

[cpp]  view plain  copy
  在CODE上查看代码片 派生到我的代码片
  1. //  
  2.     //Set Trace File and Record File  
  3.     //  
  4.     const std::string trace_filename = "webrtc_trace.txt";  
  5.     VoiceEngine::SetTraceFilter(kTraceAll);  
  6.     error = VoiceEngine::SetTraceFile(trace_filename.c_str());  
  7.     if (error != 0)  
  8.     {  
  9.         printf("ERROR in VoiceEngine::SetTraceFile\n");  
  10.         return error;  
  11.     }  
  12.     error = VoiceEngine::SetTraceCallback(NULL);  
  13.     if (error != 0)  
  14.     {  
  15.         printf("ERROR in VoiceEngine::SetTraceCallback\n");  
  16.         return error;  
  17.     }  
  18.     const std::string play_filename = "recorded_playout.wav";  
  19.     const std::string mic_filename = "recorded_mic.wav";  
接下来是初始化，获取VoiceEngine的版本号

[cpp]  view plain  copy
  在CODE上查看代码片 派生到我的代码片
  1. //  
  2.     //Init  
  3.     //  
  4.     error = ptrVoEBase->Init();  
  5.     if (error != 0)  
  6.     {  
  7.         printf("ERROR in VoEBase::Init\n");  
  8.         return error;  
  9.     }  
  10.     error = ptrVoEBase->RegisterVoiceEngineObserver(my_observer);  
  11.     if (error != 0)  
  12.     {  
  13.         printf("ERROR in VoEBase:;RegisterVoiceEngineObserver\n");  
  14.         return error;  
  15.     }  
  16.     printf("Version\n");  
  17.     char tmp[1024];  
  18.     error = ptrVoEBase->GetVersion(tmp);  
  19.     if (error != 0)  
  20.     {  
  21.         printf("ERROR in VoEBase::GetVersion\n");  
  22.         return error;  
  23.     }  
  24.     printf("%s\n", tmp);  
这里同时还注册了一个VoiceEngineObserver对象，可以根据相应的error code输出信息，比如当检测到键盘敲击的噪音时会给出提示。这个类的定义如下

[cpp]  view plain  copy
  在CODE上查看代码片 派生到我的代码片
  1. class MyObserver : public VoiceEngineObserver {  
  2. public:  
  3.     virtual void CallbackOnError(int channel, int err_code);  
  4. };  
  5.   
  6. void MyObserver::CallbackOnError(int channel, int err_code) {  
  7.     // Add printf for other error codes here  
  8.     if (err_code == VE_TYPING_NOISE_WARNING) {  
  9.         printf("  TYPING NOISE DETECTED \n");  
  10.     }  
  11.     else if (err_code == VE_TYPING_NOISE_OFF_WARNING) {  
  12.         printf("  TYPING NOISE OFF DETECTED \n");  
  13.     }  
  14.     else if (err_code == VE_RECEIVE_PACKET_TIMEOUT) {  
  15.         printf("  RECEIVE PACKET TIMEOUT \n");  
  16.     }  
  17.     else if (err_code == VE_PACKET_RECEIPT_RESTARTED) {  
  18.         printf("  PACKET RECEIPT RESTARTED \n");  
  19.     }  
  20.     else if (err_code == VE_RUNTIME_PLAY_WARNING) {  
  21.         printf("  RUNTIME PLAY WARNING \n");  
  22.     }  
  23.     else if (err_code == VE_RUNTIME_REC_WARNING) {  
  24.         printf("  RUNTIME RECORD WARNING \n");  
  25.     }  
  26.     else if (err_code == VE_SATURATION_WARNING) {  
  27.         printf("  SATURATION WARNING \n");  
  28.     }  
  29.     else if (err_code == VE_RUNTIME_PLAY_ERROR) {  
  30.         printf("  RUNTIME PLAY ERROR \n");  
  31.     }  
  32.     else if (err_code == VE_RUNTIME_REC_ERROR) {  
  33.         printf("  RUNTIME RECORD ERROR \n");  
  34.     }  
  35.     else if (err_code == VE_REC_DEVICE_REMOVED) {  
  36.         printf("  RECORD DEVICE REMOVED \n");  
  37.     }  
  38. }  
以上完成了前期准备的工作，下面首先开始对网络的设置。如果是在本机上进行测试的话，ip地址直接写127.0.0.1即可，同时要注意的是，remote port和local port要一致。

[cpp]  view plain  copy
  在CODE上查看代码片 派生到我的代码片
  1. //  
  2.     //Network Settings  
  3.     //  
  4.     int audiochannel;  
  5.     audiochannel = ptrVoEBase->CreateChannel();  
  6.     if (audiochannel < 0)  
  7.     {  
  8.         printf("ERROR in VoEBase::CreateChannel\n");  
  9.         return audiochannel;  
  10.     }  
  11.     VoiceChannelTransport* voice_channel_transport = new VoiceChannelTransport(ptrVoENetwork, audiochannel);  
  12.     char ip[64] = "127.0.0.1";  
  13.     int rPort = 800;//remote port  
  14.     int lPort = 800;//local port  
  15.     error = voice_channel_transport->SetSendDestination(ip, rPort);  
  16.     if (error != 0)  
  17.     {  
  18.         printf("ERROR in set send ip and port\n");  
  19.         return error;  
  20.     }  
  21.     error = voice_channel_transport->SetLocalReceiver(lPort);  
  22.     if (error != 0)  
  23.     {  
  24.         printf("ERROR in set receiver and port\n");  
  25.         return error;  
  26.     }  
上面出现的VoiceChannelTransport类的定义如下

[cpp]  view plain  copy
  在CODE上查看代码片 派生到我的代码片
  1. // Helper class for VoiceEngine tests.  
  2. class VoiceChannelTransport : public webrtc::test::UdpTransportData {  
  3. public:  
  4.     VoiceChannelTransport(VoENetwork* voe_network, int channel);  
  5.   
  6.     virtual ~VoiceChannelTransport();  
  7.   
  8.     // Start implementation of UdpTransportData.  
  9.     void IncomingRTPPacket(const int8_t* incoming_rtp_packet,  
  10.         const size_t packet_length,  
  11.         const char* /*from_ip*/,  
  12.         const uint16_t /*from_port*/) override;  
  13.   
  14.     void IncomingRTCPPacket(const int8_t* incoming_rtcp_packet,  
  15.         const size_t packet_length,  
  16.         const char* /*from_ip*/,  
  17.         const uint16_t /*from_port*/) override;  
  18.     // End implementation of UdpTransportData.  
  19.   
  20.     // Specifies the ports to receive RTP packets on.  
  21.     int SetLocalReceiver(uint16_t rtp_port);  
  22.   
  23.     // Specifies the destination port and IP address for a specified channel.  
  24.     int SetSendDestination(const char* ip_address, uint16_t rtp_port);  
  25.   
  26. private:  
  27.     int channel_;  
  28.     VoENetwork* voe_network_;  
  29.     webrtc::test::UdpTransport* socket_transport_;  
  30. };  
  31.   
  32.   
  33. VoiceChannelTransport::VoiceChannelTransport(VoENetwork* voe_network,  
  34.     int channel)  
  35.     : channel_(channel),  
  36.     voe_network_(voe_network) {  
  37.     uint8_t socket_threads = 1;  
  38.     socket_transport_ = webrtc::test::UdpTransport::Create(channel, socket_threads);  
  39.     int registered = voe_network_->RegisterExternalTransport(channel,  
  40.         *socket_transport_);  
  41. #if !defined(WEBRTC_ANDROID) && !defined(WEBRTC_IOS)  
  42.     if (registered != 0)  
  43.         return;  
  44. #else  
  45.     assert(registered == 0);  
  46. #endif  
  47. }  
  48.   
  49. VoiceChannelTransport::~VoiceChannelTransport() {  
  50.     voe_network_->DeRegisterExternalTransport(channel_);  
  51.     webrtc::test::UdpTransport::Destroy(socket_transport_);  
  52. }  
  53.   
  54. void VoiceChannelTransport::IncomingRTPPacket(  
  55.     const int8_t* incoming_rtp_packet,  
  56.     const size_t packet_length,  
  57.     const char* /*from_ip*/,  
  58.     const uint16_t /*from_port*/) {  
  59.     voe_network_->ReceivedRTPPacket(  
  60.         channel_, incoming_rtp_packet, packet_length, PacketTime());  
  61. }  
  62.   
  63. void VoiceChannelTransport::IncomingRTCPPacket(  
  64.     const int8_t* incoming_rtcp_packet,  
  65.     const size_t packet_length,  
  66.     const char* /*from_ip*/,  
  67.     const uint16_t /*from_port*/) {  
  68.     voe_network_->ReceivedRTCPPacket(channel_, incoming_rtcp_packet,  
  69.         packet_length);  
  70. }  
  71.   
  72. int VoiceChannelTransport::SetLocalReceiver(uint16_t rtp_port) {  
  73.     static const int kNumReceiveSocketBuffers = 500;  
  74.     int return_value = socket_transport_->InitializeReceiveSockets(this,  
  75.         rtp_port);  
  76.     if (return_value == 0) {  
  77.         return socket_transport_->StartReceiving(kNumReceiveSocketBuffers);  
  78.     }  
  79.     return return_value;  
  80. }  
  81.   
  82. int VoiceChannelTransport::SetSendDestination(const char* ip_address,  
  83.     uint16_t rtp_port) {  
  84.     return socket_transport_->InitializeSendSockets(ip_address, rtp_port);  
  85. }  
完成了网络的设置后，进行编解码器的设置。这里简单的由用户选择使用哪一个编码器，当然还可以进一步对编码器的参数进行设置

[cpp]  view plain  copy
  在CODE上查看代码片 派生到我的代码片
  1. //  
  2. //Setup Codecs  
  3. //  
  4. CodecInst codec_params;  
  5. CodecInst cinst;  
  6. for (int i = 0; i < ptrVoECodec->NumOfCodecs(); ++i) {  
  7.     int error = ptrVoECodec->GetCodec(i, codec_params);  
  8.     if (error != 0)  
  9.     {  
  10.         printf("ERROR in VoECodec::GetCodec\n");  
  11.         return error;  
  12.     }  
  13.     printf("%2d. %3d  %s/%d/%d \n", i, codec_params.pltype, codec_params.plname,  
  14.         codec_params.plfreq, codec_params.channels);  
  15. }  
  16. printf("Select send codec: ");  
  17. int codec_selection;  
  18. scanf("%i", &codec_selection);  
  19. ptrVoECodec->GetCodec(codec_selection, cinst);  
  20. error = ptrVoECodec->SetSendCodec(audiochannel, cinst);  
  21. if (error != 0)  
  22. {  
  23.     printf("ERROR in VoECodec::SetSendCodec\n");  
  24.     return error;  
  25. }  
接下来进行录制设备和播放设备的设置

[cpp]  view plain  copy
  在CODE上查看代码片 派生到我的代码片
  1. //  
  2.     //Setup Devices  
  3.     //  
  4.     int rd(-1), pd(-1);  
  5.     error = ptrVoEHardware->GetNumOfRecordingDevices(rd);  
  6.     if (error != 0)  
  7.     {  
  8.         printf("ERROR in VoEHardware::GetNumOfRecordingDevices\n");  
  9.         return error;  
  10.     }  
  11.     error = ptrVoEHardware->GetNumOfPlayoutDevices(pd);  
  12.     if (error != 0)  
  13.     {  
  14.         printf("ERROR in VoEHardware::GetNumOfPlayoutDevices\n");  
  15.         return error;  
  16.     }  
  17.   
  18.     char dn[128] = { 0 };  
  19.     char guid[128] = { 0 };  
  20.     printf("\nPlayout devices (%d): \n", pd);  
  21.     for (int j = 0; j < pd; ++j) {  
  22.         error = ptrVoEHardware->GetPlayoutDeviceName(j, dn, guid);  
  23.         if (error != 0)  
  24.         {  
  25.             printf("ERROR in VoEHardware::GetPlayoutDeviceName\n");  
  26.             return error;  
  27.         }  
  28.         printf("  %d: %s \n", j, dn);  
  29.     }  
  30.   
  31.     printf("Recording devices (%d): \n", rd);  
  32.     for (int j = 0; j < rd; ++j) {  
  33.         error = ptrVoEHardware->GetRecordingDeviceName(j, dn, guid);  
  34.         if (error != 0)  
  35.         {  
  36.             printf("ERROR in VoEHardware::GetRecordingDeviceName\n");  
  37.             return error;  
  38.         }  
  39.         printf("  %d: %s \n", j, dn);  
  40.     }  
  41.   
  42.     printf("Select playout device: ");  
  43.     scanf("%d", &pd);  
  44.     error = ptrVoEHardware->SetPlayoutDevice(pd);  
  45.     if (error != 0)  
  46.     {  
  47.         printf("ERROR in VoEHardware::SetPlayoutDevice\n");  
  48.         return error;  
  49.     }  
  50.     printf("Select recording device: ");  
  51.     scanf("%d", &rd);  
  52.     getchar();  
  53.     error = ptrVoEHardware->SetRecordingDevice(rd);  
  54.     if (error != 0)  
  55.     {  
  56.         printf("ERROR in VoEHardware::SetRecordingDevice\n");  
  57.         return error;  
  58.     }  
然后对音频预处理功能进行设置，这里作为示例，把各种预处理功能都enable了

[cpp]  view plain  copy
  在CODE上查看代码片 派生到我的代码片
  1. //  
  2.     //Audio Processing  
  3.     //  
  4.     error = ptrVoECodec->SetVADStatus(0, 1);//FIX:why not use audio channel  
  5.     if (error != 0)  
  6.     {  
  7.         printf("ERROR in VoECodec::SetVADStatus\n");  
  8.         return error;  
  9.     }  
  10.     error = ptrVoEAp->SetAgcStatus(1);  
  11.     if (error != 0)  
  12.     {  
  13.         printf("ERROR in VoEAudioProcess::SetAgcStatus\n");  
  14.         return error;  
  15.     }  
  16.     error = ptrVoEAp->SetEcStatus(1);  
  17.     if (error != 0)  
  18.     {  
  19.         printf("ERROR in VoEAudioProcess::SetEcStatus\n");  
  20.         return error;  
  21.     }  
  22.     error = ptrVoEAp->SetNsStatus(1);  
  23.     if (error != 0)  
  24.     {  
  25.         printf("ERROR in VoEAudioProcess::SetNsStatus\n");  
  26.         return error;  
  27.     }  
  28.     error = ptrVoEAp->SetRxAgcStatus(audiochannel, 1);  
  29.     if (error != 0)  
  30.     {  
  31.         printf("ERROR in VoEAudioProcess::SetRxAgcStatus\n");  
  32.         return error;  
  33.     }  
  34.     error = ptrVoEAp->SetRxNsStatus(audiochannel, 1);  
  35.     if (error != 0)  
  36.     {  
  37.         printf("ERROR in VoEAudioProcess::SetRxNsStatus\n");  
  38.         return error;  
  39.     }  
至此，就可以开始发送、接收、录制了

[cpp]  view plain  copy
  在CODE上查看代码片 派生到我的代码片
  1. //Start Receive  
  2.     error = ptrVoEBase->StartReceive(audiochannel);  
  3.     if (error != 0)  
  4.     {  
  5.         printf("ERROR in VoEBase::StartReceive\n");  
  6.         return error;  
  7.     }  
  8.     //Start Playout  
  9.     error = ptrVoEBase->StartPlayout(audiochannel);  
  10.     if (error != 0)  
  11.     {  
  12.         printf("ERROR in VoEBase::StartPlayout\n");  
  13.         return error;  
  14.     }  
  15.     //Start Send  
  16.     error = ptrVoEBase->StartSend(audiochannel);  
  17.     if (error != 0)  
  18.     {  
  19.         printf("ERROR in VoEBase::StartSend\n");  
  20.         return error;  
  21.     }  
  22.     //Start Record  
  23.     error = ptrVoEFile->StartRecordingMicrophone(mic_filename.c_str());  
  24.     if (error != 0)  
  25.     {  
  26.         printf("ERROR in VoEFile::StartRecordingMicrophone\n");  
  27.         return error;  
  28.     }  
  29.     error = ptrVoEFile->StartRecordingPlayout(audiochannel, play_filename.c_str());  
  30.     if (error != 0)  
  31.     {  
  32.         printf("ERROR in VoEFile::StartRecordingPlayout\n");  
  33.         return error;  
  34.     }  

在通话结束之后，还需要进行相应的stop\release

[cpp]  view plain  copy
  在CODE上查看代码片 派生到我的代码片
  1. //Stop Record  
  2.     error = ptrVoEFile->StopRecordingMicrophone();  
  3.     if (error != 0)  
  4.     {  
  5.         printf("ERROR in VoEFile::StopRecordingMicrophone\n");  
  6.         return error;  
  7.     }  
  8.     error = ptrVoEFile->StopRecordingPlayout(audiochannel);  
  9.     if (error != 0)  
  10.     {  
  11.         printf("ERROR in VoEFile::StopRecordingPlayout\n");  
  12.         return error;  
  13.     }  
  14.     //Stop Receive  
  15.     error = ptrVoEBase->StopReceive(audiochannel);  
  16.     if (error != 0)  
  17.     {  
  18.         printf("ERROR in VoEBase::StopReceive\n");  
  19.         return error;  
  20.     }  
  21.     //Stop Send  
  22.     error = ptrVoEBase->StopSend(audiochannel);  
  23.     if (error != 0)  
  24.     {  
  25.         printf("ERROR in VoEBase::StopSend\n");  
  26.         return error;  
  27.     }  
  28.     //Stop Playout  
  29.     error = ptrVoEBase->StopPlayout(audiochannel);  
  30.     if (error != 0)  
  31.     {  
  32.         printf("ERROR in VoEBase::StopPlayout\n");  
  33.         return error;  
  34.     }  
  35.     //Delete Channel  
  36.     error = ptrVoEBase->DeleteChannel(audiochannel);  
  37.     if (error != 0)  
  38.     {  
  39.         printf("ERROR in VoEBase::DeleteChannel\n");  
  40.         return error;  
  41.     }  
  42.   
  43.     delete voice_channel_transport;  
  44.   
  45.     ptrVoEBase->DeRegisterVoiceEngineObserver();  
  46.     error = ptrVoEBase->Terminate();  
  47.     if (error != 0)  
  48.     {  
  49.         printf("ERROR in VoEBase::Terminate\n");  
  50.         return error;  
  51.     }  
  52.   
  53.     int remainingInterfaces = 0;  
  54.     remainingInterfaces += ptrVoEBase->Release();  
  55.     remainingInterfaces = ptrVoECodec->Release();  
  56.     remainingInterfaces += ptrVoEVolume->Release();  
  57.     remainingInterfaces += ptrVoEFile->Release();  
  58.     remainingInterfaces += ptrVoEAp->Release();  
  59.     remainingInterfaces += ptrVoEHardware->Release();  
  60.     remainingInterfaces += ptrVoENetwork->Release();  
  61.   
  62.   
  63.     /*if (remainingInterfaces > 0) 
  64.     { 
  65.     printf("ERROR: Could not release all interfaces\n"); 
  66.     return -1; 
  67.     }*/  
  68.   
  69.     bool deleted = webrtc::VoiceEngine::Delete(ptrVoE);  
  70.     if (deleted == false)  
  71.     {  
  72.         printf("ERROR in VoiceEngine::Delete\n");  
  73.         return -1;  
  74.     }  
需要注意的是，这里remainingInterfaces最后不会为0，因为我们没有用到VoiceEngine的全部sub-apis。

 至此，就实现了一个音频通话的功能。

本项目源代码下载地址。github地址。

u013713010
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
使用WebRTC搭建前端视频聊天室——入门篇1
08-03
1. 一个约束对象（constraints object），这个后面会单独讲 2. 一个调用成功的回调函数，如果调用成功，传递给它一个流对象 3. 一个调用失败
webrtc 音频引擎
Lce的专栏
08-06 471
对于不支持采集和播放 10 ms 音频数据的平台，在平台的 AudioDeviceModule 和 AudioDeviceBuffer 还会插入一个 FineAudioBuffer，用于将平台的音频数据格式转换为 10 ms 的 WebRTC 能处理的音频帧。（3）iOS除了提供的可开关的AGC以外，还有一个AGC会一直工作，对信号的level进行微调；因为WebRTC 的音频流水线只支持处理 10 ms 的数据，不同的操作系统平台提供了不同的采集和播放时长的音频数据，不同的采样率也会提供不同时长的数据。.
Webrtc音频技术（未完）
qq_15821883的博客
07-27 1009
Webrtc音频技术
webrtc封装sdk（三）VoiceEngine的使用方法
热门推荐
我是榜样的博客
01-05 2万+
WebRtc中VoiceEngine的使用方法 webrtc中的VoiceEngine是用来管理语音通道channel的类 提供了控制语音整个过程的接口 VoiceEngine的实现类VoiceEngineImpl通过继承的方式将很多不同类型的接口集成在了一个类对象中。 这些接口一共分为以下几种类型： VoiceEngine ：基础接口，可以设置log文件路径，创建VoiceEngineImpl...
【webrtc】WebRtcVoiceEngine
突围
10-22 421
上一篇，我们粗读了，视频引擎的核心 WebRtcVideoChannel 这一篇，我们对应看音频。 使用了webrtc实现的语音引擎库，用来支持音频的处理。 搭配到混合引擎：CompositeMediaEngine中。 // WebRtcVoiceEngine is a class to be used with CompositeMediaEngine. // It uses the WebRtc VoiceEngine library for audio handling. D:-dev\gerr..
使用WebRTC搭建前端视频聊天室——信令篇1
08-03
1. 浏览器之间交换建立通信的元数据（信令）必须通过服务器 2. 为了穿越NAT和防火墙 1. 用来控制通信开启或者关闭的连接控制消息 2. 发生错误时用来彼此
使用WebRTC搭建前端视频聊天室——点对点通信篇1
08-03
一些背景：- 老刘和老姚都住在同一个小区但不同的片区，小区很破旧，没有电话- 片区相互隔离且片区门口有个保安，保安只认识自己片区的人，遇到不认识的人就需要查询凭
示例：WebRTC Web演示和示例
02-04
WebRTC代码示例 这是WebRTC JavaScript代码示例的存储库。 可以从测试所有示例。 我们欢迎您提供贡献和错误修正。 有关详细信息，请参见 。 虫子 如果您遇到其中一个示例的错误或问题，请提交一个以便我们了解并...
webrtc音频数据流流程图
05-27
webrtc音频数据流流程图,只是整理了数据流的流向,方便了解代码.
WebRTC Video/Voice Engine 音视频引擎
06-13
基于最新版本的WebRTC封装的High Level的音视频引擎SDK，支持如下功能： 提供一个简单的呼叫控制协议 音频： 支持729，711，iLBC，GSM，ISAC等多种Codec 支持RTP/RTCP 支持EC（Echo Control），VAD，NS等 支持WindowsWave和WindowsCore 视频： 支持VP8 支持Direct3D和DirectShow
WebRTC中音视频处理流程分析
02-26
WebRTC中音视频处理流程分析，来源于http://blog.csdn.net/neustar1/
webrtc代码解读一:音频数据的接收解码播放过程
睏哥的webrtc和janus视频会议技术专栏
02-21 2631
RTP connection创建过程(从下往上调用)： Channel::Channel调用RtpRtcp::CreateRtpRtcp Channel::Channel 调用RtpReceiver::CreateAudioReceiver (RtpReceiver,这里注册Channel类为RTP包回调处理类) ChannelProxy::ChannelProxy里调用new voe::C...
Kurento应用开发指南(以Kurento 5.0为模板) 之四：示例教程 一对一视频呼叫
北雨南萍
08-14 1464
5.3 教程四-一对一的视频呼叫 这个页面应用程序使用WebRTC技术实现了一个一对一的呼叫，换言话说，这个应用提供了一个简单的视频电话 5.3.1 运行示例程序 运行这个DEMO之前，你需要先安装Kurento Media Server.可以看前面的介绍。 另外，你还需要先安装好 JDK (at least version 7), Maven, Git, 和 Bower。 在Ubu
开源webrtc服务器对比
隔壁老王呀的专栏
03-30 5507
开源系统是目前市面上比较常见的，分别从服务器类型、编解码能力、文档的完整性和开发商来进行对比。大家都知道WebRTC的服务器模型有两种，分别是SFU和MCU，SFU实现的是简单转发的路由功能，而MCU可以提供更多扩展性的功能实现，而且MCU型的服务器往往包含SFU，所以MCU的实现难度较大。其次，文档的完整性也是非常重要的，因为对于开发者来说，文档具有非常重要的指导作用。最后是开发商，这个主要涉...
WebRTC音视频通话-WebRTC视频自定义RTCVideoCapturer相机
一名开发者
08-15 6504
WebRTC音视频通话-WebRTC视频自定义RTCVideoCapturer相机。主要获得相机采集的画面CVPixelBufferRef，将处理后的CVPixelBufferRef生成RTCVideoFrame，通过调用WebRTC的localVideoSource中实现的didCaptureVideoFrame方法
126邮箱页 html源码 单页源码 网站后台登陆界面HTML源码.zip
最新发布
04-23
126邮箱页 html源码 单页源码 网站后台登陆界面HTML源码
武汉开放数据创新大赛——烽火杯文件.zip
04-23
武汉开放数据创新大赛——烽火杯文件
写一个webrtc在h5实现多人音频通话，服务器用nodejs
07-08
注意：以上代码只是一个基本示例，实际应用中还需要处理更多的错误处理、房间管理、音频控制等功能。你可以根据需求和具体场景进行扩展和修改。同时，也可以参考相关的文档和示例代码来进一步了解和实践WebRTC和Node...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值