部标1078流媒体服务器之双向对讲的实现

简介

JT/T 1078-2016 道路运输车辆卫星定位系统视频通信协议中规定了1078终端设备音视频协议格式。该协议包括实时音视频传输请求，其中涵盖了音视频、视频、双向对讲、监听等多种方式。本文将着重讲解如何实现双向对讲功能。

双向对讲流程

对于双向对讲，从流程上来讲，先由用户点击对讲按钮，平台下发0x9101的实时音频对讲请求，终端在接收到对讲请求后，向流媒体服务器上传终端侧的实时音频信息，由流媒体服务器进行转换成客户端可识别的音频进行播放。客户端在用户点击按钮后，创建向流媒体服务器的websocket连接，并推送音频流信息。流媒体服务器在接收到客户端的下行音频信息后，讲音频流信息写入与终端的tcp链路，终端接收后进行音频播放，至此，完成双向对讲功能。

双向对讲的流程如下：

1. 用户点击对讲按钮。
2. 平台下发 0x9101 的实时音频对讲请求。
3. 终端接收到对讲请求后，向流媒体服务器上传终端侧的实时音频信息。
4. 流媒体服务器将音频信息转换为客户端可识别的格式并进行播放。
5. 客户端在用户点击按钮后，创建向流媒体服务器的 WebSocket 连接，并推送音频流信息。
6. 流媒体服务器接收到客户端的下行音频信息后，将音频流信息写入与终端的 TCP 链路。
7. 终端接收并播放音频，完成双向对讲功能。

详细实现

当实现流媒体服务器侧的功能时，可以遵循以下思路：

创建TCP服务器：使用套接字（socket）库创建一个TCP服务器，它将监听特定的端口，等待终端设备和客户端的连接请求。
绑定服务器地址：设置服务器的IP地址和端口号，并将其绑定到服务器套接字上，以便客户端可以连接到该地址。
监听连接请求：通过调用listen函数开始监听连接请求。服务器将在指定的端口上等待客户端的连接。
等待终端设备连接：使用accept函数等待终端设备的连接请求。一旦终端设备连接成功，将建立一个TCP连接，并返回一个新的套接字（终端设备套接字）来处理与终端设备的通信。
处理客户端连接：通过循环使用accept函数接受来自客户端的连接请求。每当一个客户端连接成功后，将返回一个新的套接字（客户端套接字），用于处理与该客户端的通信。
接收客户端音频流信息并转发：在客户端连接后，通过循环使用recv函数接收客户端发送的音频数据。接收到音频数据后，使用send函数将其转发给终端设备。
关闭连接：当客户端断开连接时，关闭客户端套接字并继续等待新的客户端连接。
关闭服务器：当不再需要服务器时，关闭终端设备套接字、客户端套接字和服务器套接字。

在实际的实现中，还需要考虑以下方面：
*并发处理：使用多线程或多进程来处理同时连接的多个客户端，以实现并发处理能力。
*数据传输的稳定性：处理数据传输过程中的错误、丢包和网络延迟等问题，保证音频数据的稳定传输。
*音频解码和编码：根据具体的需求，可能需要对音频数据进行解码和编码操作，以适应终端设备的音频格式要求。
*安全性：根据实际需求，考虑在服务器和客户端之间使用安全通信协议，如SSL/TLS。

对于流媒体服务器，建议采用并发性能比较好的语言和架构来实现，比如基于c/c++的libuv、libevent，都具有很好的并发性能。而在创建websocket服务器时，可以基于第三方服务器实现，只不过要进行二次开发，比如实现websocket的url路径识别，进而实现查找对应终端链路等。

当然，如需详细code，可以联系我。

代码示例

此处展示一些核心的下行音频示例

void writeAudioQueue(char *buffer, int size, string equp_id) {
    message_t mt;
    memset(mt.data, 0, 1024);
    memcpy(mt.data, buffer, size);
    mt.length = size;
    mt.equp_id = equp_id;

    uv_mutex_lock(&mutex_message);
    message_queue.push(mt);
    uv_mutex_unlock(&mutex_message);

    uv_async_send(&async);
}

//写音频数据到1078设备
void write_audio_to_client(uv_async_t *handle)
{
    uv_mutex_lock(&mutex_message);
    while (!message_queue.empty()) {
        message_t msg = message_queue.front();
        uv_stream_t* down_client = NULL;
        iter_equpid_client iterEC = g_map_equpid_client.find(msg.equp_id);
        if(iterEC != g_map_equpid_client.end()) {
            down_client = iterEC->second;
        }
        if (down_client != NULL) {
            write_data(down_client, msg.data,msg.length);
        }
        message_queue.pop();
    }
    uv_mutex_unlock(&mutex_message);
}

//写数据到uv客户端
void write_data(uv_stream_t* client, const char* data, size_t size) {
    uv_write_t* req = (uv_write_t*)malloc(sizeof(uv_write_t));

    uv_buf_t buf;
    buf.base = (char*)data;
    buf.len = size;

    // 发起写入请求
    if (client != NULL) {
        int result = uv_write(req, client, &buf, 1, on_write);
        
        if (result < 0) {
            fprintf(stderr, "Write error1: %s\n", uv_strerror(result));
            free(req);
        }
    }
    
}