ESP32公网对讲机

已于 2023-02-14 18:49:37 修改
阅读量3.4k 收藏 34
点赞数 8
文章标签： 网络 udp 网络协议 Powered by 金山文档
于 2023-02-14 18:40:57 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/lyf_9705/article/details/129027648
版权

一、前言

其实做这个项目最初的痛点是为了改善家里的楼上楼下交流(家里房子带阁楼)太费嗓子的问题，不要说什么打电话、微信语音什么的，不接受！存在即合理！顺便正好用ESP32做点东西，那么就开始吧。

二、介绍

2.1 音频

  • 音道

目前常见的有单声道，双声道这都很好理解

还有2.1声道 就是在双声道上加了个低音声道

5.1声道 早期影院 分别是正前方声道、左前方声道、右前方声道，左声道，右声道和一个低音声道

现在影院一般是7.1声道

  • 采样频率

音频采样就是从模拟信号转化为数字信号的过程，采样率就是每秒对声音采样的次数，采样率越高声音就越自然，人类对频率可识别范围大概在20hz~20000hz间。常见的采样频率44.1khz, 8khz, 16khz等 其实8khz对于人来说已经足够了

  • 采样位数

采样后还要进行量化和编码操作。位数常见的有8位，16位，32位等

  • dma_buf_len及dma_buf_cnt说明

I2S DMA

2.2 方案

使用UDP广播进行通信。将UDP数据包发送至一个特殊地址ip(公网ip),最后通过路由器将数据广播到网络中所有的设备.即可以做到只要设备联网后不管多远都可以进行通信。

使用UDP最大的好处就是可以不用等待对方有没有收到，所有在监听的设备都能收到，繁重的工作都交给路由器处理啦。

2.3 过程

  • 硬件

主控: ESP32 *2

Mic: Inmp411 *2

功放: MAX98357A *2

喇叭 *2

  1. 首先测试Mic和功放的好坏--通过Mic将我说的话通过喇叭播放出来。这里使用的Mic和功放都是I2S 标准飞利浦协议进行数据传输

Inmp411

(引脚只有 对右边VCC GND SD，对左边L/R WS SCK)

L/R为左右声道选择，这里选择的是左声道 注意要接GND

具体引脚定义

#define MIC_I2S_NUM (0)
#define MIC_I2S_BCK_IO GPIO_NUM_32
#define MIC_I2S_WS_IO GPIO_NUM_25
#define MIC_I2S_DO_IO GPIO_NUM_33

Inmp411是走I2S协议的，程序里面使用单声道(左) 所有只有在低电平时候数据有效

我使用的IDF是V4.3的 I2S配置过程:

需要先安装程序 i2s_driver_install();

再配置引脚 i2s_set_pin()

相关需要使用到的其他接口eg: i2s_read(); i2s_write();等

具体配置如下

    void Inmp441_Config(StreamBufferHandle_t mic_stream_buf)
    {
        i2s_config_t i2s_config = {
         // 接收模式
        .mode = I2S_MODE_MASTER | I2S_MODE_RX,
        // 采样率 8000khz
        .sample_rate = SAMPLE_RATE,
        // 采样位数 16位
        .bits_per_sample = I2S_BITS_PER_SAMPLE_16BIT,
        // 采样通道为左通道
        .channel_format = I2S_CHANNEL_FMT_ONLY_LEFT,
        // I2S通信格式I2S 标准飞利浦
        .communication_format = I2S_COMM_FORMAT_STAND_I2S,
        //
        .dma_buf_count = 3,
        .dma_buf_len = 256,
        .use_apll = false,
        .tx_desc_auto_clear = false,
        .fixed_mclk = 0,
        .intr_alloc_flags = ESP_INTR_FLAG_LEVEL1 // Interrupt level 1
    };
    esp_err_t err = i2s_driver_install(MIC_I2S_NUM, &i2s_config, 0, NULL);
    if (err != ESP_OK)
    {
        ESP_LOGI(TAG, "Error initializing I2S Mic\n");
    }

    i2s_pin_config_t pin_config = {
        .bck_io_num = MIC_I2S_BCK_IO,
        .ws_io_num = MIC_I2S_WS_IO,
        .data_in_num = MIC_I2S_DO_IO};
    err = i2s_set_pin(MIC_I2S_NUM, &pin_config);
    if (err != ESP_OK)
    {
        ESP_LOGI(TAG, "Error setting I2S mic pins\n");
    }

    ESP_LOGI(TAG, "Init audio!\n");
    xTaskCreate(Read_Inmp441_Data_Task, "Read_Inmp441_Data_Task", 4096, (void *)mic_stream_buf, 4, NULL);//(void *)mic_stream_buf
}

为了验证mic数据通信是否正常可以循环读取i2s数据并在上位机上打印出来，说不同的话、不同的音量的打印数值大小对应的数据正常都是会有变化的

i2s_read(MIC_I2S_NUM,
                 &mic_read_buf,
                 READ_BUF_SIZE_BYTES * 2,
                 &i2s_byte_data,
                 ticks_to_wait);
        if (i2s_byte_data > 0)
        {
//          ESP_LOGI(TAG, "mic_read_data = %d", mic_read_data);
            ESP_LOGI(TAG, "mic_read_buf[0] = %d, [1] = %d, [2] = %d, [3] = %d", mic_read_buf[0], mic_read_buf[1], mic_read_buf[2], mic_read_buf[3]);

对于i2s_read()的第三个参数，是以字节为单位！

MAX98357A

引脚定义

#define MAX_I2S_NUM (1)
#define MAX_I2S_BCK_IO GPIO_NUM_4
#define MAX_I2S_WS_IO  GPIO_NUM_5
#define MAX_I2S_DO_IO  GPIO_NUM_18

MAX98357通信也是I2S协议的

如果选用的是左边声道的话，LRC高电平时数据就是无效的。

具体配置如下

void MAX98357_Config(StreamBufferHandle_t playback_stream_buf)

{

i2s_config_t i2s_config = {

        //发送模式
        .mode = I2S_MODE_MASTER | I2S_MODE_TX,
        //采样率 8000khz
        .sample_rate = SAMPLE_RATE,
        //采样位数 16位
        .bits_per_sample = I2S_BITS_PER_SAMPLE_16BIT,
        //采样通道为左通道
        .channel_format = I2S_CHANNEL_FMT_ONLY_LEFT,
        //I2S通信格式I2S 标准飞利浦
        .communication_format = I2S_COMM_FORMAT_STAND_I2S,
        //
        .dma_buf_count = 3,
        .dma_buf_len = 256,
        .use_apll = false,
        .tx_desc_auto_clear = false,
        .fixed_mclk = 0,
    };
    esp_err_t err = i2s_driver_install(MAX_I2S_NUM, &i2s_config, 0, NULL);
    if (err != ESP_OK)
    {
        ESP_LOGI(TAG, "Error initializing I2S MAX98357\n");
    }

    i2s_pin_config_t pin_config = { 
        .bck_io_num = MAX_I2S_BCK_IO,
        .ws_io_num = MAX_I2S_WS_IO,
        .data_out_num = MAX_I2S_DO_IO
    };
    err = i2s_set_pin(MAX_I2S_NUM, &pin_config);
    if (err != ESP_OK)
    {
        ESP_LOGI(TAG, "Error setting I2S MAX98357 Pins\n");
    }

    ESP_LOGI(TAG, "Init MAX98357!\n");
    xTaskCreate(Playback_MAX98357_Task, "Playback_MAX98357_Task", 4096, (void *)playback_stream_buf, 5, NULL);
}

我们知道队列虽然可以做任务间消息传递的功能，但不方便实时采集不同数据长度的数据，FreeRTOS中给我们提供了一个流缓冲数据--StreamBuff。所谓流数据就像流水一样不断地产生、不断地传输。最典型的就是这种音频数据。

主要关注这几个API接口

xStreamBufferCreate();

xStreamBufferReceive();

xStreamBufferSend();

首先创建结构体

StreamBufferHandle_t mic_stream_buf = NULL;
StreamBufferHandle_t inm_stream_buf = NULL;

然后创建流缓冲区

//创建流缓冲区
mic_stream_buf = xStreamBufferCreate(1200, 2);
inm_stream_buf = xStreamBufferCreate(1200, 2);
Inmp441_Config(mic_stream_buf);
//    Test_1(mic_stream_buf);
MAX98357_Config(inm_stream_buf);
UDP_Connect_Init(mic_stream_buf, inm_stream_buf);

再在相应的有需要地方进行接收和发送。

2. 测试UDP数据转发--之前已经测试过UDP通信了这里就直接进行数据转发。先可以在局域网内测试，把PC当做Serve(需要在PC上写个服务端程序，反正是测试嘛怎么简单怎么来那就用python随便写几行)，ESP32当做Client。ESP32通过UDP把数据先发送给Serve，Serve只做转发把收到的数据再发送给Client Client收到数据后直接通过I2S写入功放 至此就可以通过喇叭将从Mic中读到数据播放出来。所以这里创建了两个任务，一个发送任务、一个接收任务

先看发送端

void Send_Data_Task(void *pvParameters)
{
    StreamBufferHandle_t mic_stream_buf = (StreamBufferHandle_t)pvParameters;

    while(1)
    {
        //接收到mic的数据后 不断将数据发送至对应的服务器地址 端口上
        size_t recv_bytes = xStreamBufferReceive(mic_stream_buf,
                                                 &send_mic_buff,
                                                 sizeof(send_mic_buff),
                                                 portMAX_DELAY);
        if(recv_bytes > 0)
        {   
            sendto(client_socket,
                   send_mic_buff,
                   sizeof(send_mic_buff),
                   0,
                   (struct sockaddr *)&server_addr,
                   sizeof(server_addr)); 
        }
    }
}

接收端任务

void Recv_Data_Task(void *pvParameters)
{
    StreamBufferHandle_t inm_stream_buf = (StreamBufferHandle_t)pvParameters;
    int len = 0;

    while(1)
    {
//        memset(recv_mic_buff, 0x00, sizeof(recv_mic_buff)); 
        //接收到服务器发来的数据
        len = recvfrom(client_socket,
                       recv_mic_buff,
                       sizeof(recv_mic_buff),
                       0,
                       (struct sockaddr *)&server_addr,
                       &socklen);
        ESP_LOGI(TAG, "recv_mic_buff[0] = %d, [1] = %d, [2] = %d, [3] = %d", 
                 recv_mic_buff[0], recv_mic_buff[1], recv_mic_buff[2], recv_mic_buff[3]);
        if(len > 0)
        {
            xStreamBufferSend(inm_stream_buf,
                              (void *)recv_mic_buff,
                              sizeof(recv_mic_buff),
                              portMAX_DELAY); 
        }
    }
}

3. 因为是想做个公网对讲机嘛所以得有个公网ip。害，确实为了UDP服务器还整了个阿里云服务器有点奢侈，不过后面还是会用在MQTT服务器的搭建上。既然在局域网内测试通过了那在云上跑的话逻辑也是一样的，不过这里有两点改动。

  • Serve端bind地址和端口以及Client端要连接的服务器的地址和端口

  • 服务端转发逻辑的改变，要将Client_A发送的音频数据通过Serve在发送给Client_B, B收到后给功放任务 从而把消息从一边带到另一边，反向同理。

三、阿里云服务器使用

第一次接触服务器云服务器相关东西简单总结一下使用过程中需要注意的一些东西。

  1. 注册地址

阿里云

进入之后可以根据引导进行选择购买

  1. 设置你的root 账号和密码

  1. ！！！注意 会有两ip,一个是公网ip一个是私有ip

Client要连接的服务器地址是你的公网ip;Serve端bind的服务器地址是私有地址

  1. 设置安全组在安全组中找到配置规则然进来就如图所示的样子，在入网方向中设置协议类型以及端口号等，记得最后需要保存呀。一般默认里面会创建有三个，其中一个是TCP协议端口号22(SSH)；这里使用UDP协议的所以要进行手动添加一个。端口号的设定只要符合规则就好

  1. 云服务器相当于一台电脑，你需要把你的代码移动到这台电脑上，可以使用SFTP进行传输。这里用到的工具是MobaXterm

  1. 远程连接这台电脑，可以通过SSH进行连接，也可以在Ubuntu下进行命令形式连接

至此配置就基本结束了，后面启动程序后就可以愉快的玩耍了

四、总结

整个项目断断续续大概花了13天左右时间完成(实际上可以更快点)，其实整个项目从硬件、软件再到云端都是涉及的还是学到很多东西。坑填完了...但没有完全填完，希望下一个主线项目比这个更有挑战！

嵌入式之大杂烩
关注
  • 8
    点赞
  • 踩
  • 34
    收藏
    觉得还不错? 一键收藏
  • 2
    评论
第6篇:ESP32连接无源喇叭播放音乐《涛声依旧》
Txwtech笛克特科
08-30 746
相邻两个音之间的倍数是2^(1/12)，约等于1.0594630943592952645618252949463）。这样一来，高八度的do频率是低八度do的两倍。我们把频率440赫兹作为中央C ，C调的歌就是把频率440赫兹当作do，乐谱中写作：1=C。一个八度分成12份，八个八度的十二平均音率对应的频率如下（从33Hz到7902Hz）。相邻的两个音之间的差一个半音，12345671之间的间隔分别是“全全半全全全半”。D调的歌就是把从440后面第二个音494赫兹当作do，乐谱中写作1=D。
推荐项目：基于ESP32的无线对讲机
gitblog_00067的博客
05-23 482
推荐项目：基于ESP32的无线对讲机 项目地址:https://gitcode.com/atomic14/esp32-walkie-talkie 1、项目介绍 在开源的世界中，我们发现了一款独特的创新项目——一个利用ESP32微控制器构建的无线对讲机。这个项目不仅展示了ESP32强大的音频处理能力，而且可以在没有WiFi网络的情况下进行通信，让你体验到简单便捷的对讲机乐趣。 通过观看演示视频，你将...
使用 ESP32 实现无线对讲机功能涉及音频采集、音频传输以及音频播放等多个方面。实现无线对讲机功能的基本步骤和示例代码。
最新发布
知识无价，热爱无价。
07-04 315
通过上述步骤，你可以使用 ESP32 实现基本的无线对讲机功能。实际应用中可能需要根据具体需求进行优化和调整。
STM32 使用IIS实现INMP441模块全速音频采样(附python上位机)
TPenny68的博客
05-28 2277
本文在stm32平台上，利用IIS协议和INMP441模块，实现了对于音频的采样，并通过串口将数据实时返回电脑本文只是一个初学者的经验分享，希望为同样刚接触相关协议的朋友提供一些帮助，有错误的地方还请包涵本文是在另一位大佬工作基础上的改进版，建议先阅读该文章在其中已经将IIS协议、工程基本配置讲的非常详细，一些基础的内容本文不再赘述。
基于ESP32对讲机的单向通讯
Ljy0211的博客
05-27 1112
esp32对讲机硬件调试及问题解决
分享三个例程：使用ESP32做一个实时语音对讲机，MQTT协议实现公网对讲，ESP32-CAM 上传图像数据到网络。并附上例程链接。
热门推荐
katerdaisy的博客
11-30 1万+
分享三个例程：使用ESP32做一个实时语音对讲机，MQTT协议实现公网对讲，ESP32-CAM 上传图像数据到网络。并附上例程链接。可以比对着看来学习NOW,MQTT使用方法。想办法把图像和语音代码融合在一起，实现声音和图像同步传输。
esp32-walkie-talkie:基于ESP32的对讲机，使用UDP广播或ESP-NOW
04-06
概述 我们使用ESP32制作了一个Walkie-Talkie。 音频数据通过UDP广播或ESP-NOW传输。 因此，对讲机甚至可以在没有WiFi网络的情况下使用！ 我使用的是我自己的麦克风板（可在Tindie： ：//www.tindie.com/products/21519/上获得），但是该代码可以与任何I2S麦克风（例如INMP441）同样良好地工作，并且您可以轻松地对其进行修改将内置ADC用于模拟麦克风。 对于输出，我使用的是I2S放大器分接板，而我使用的驱动器是4ohm扬声器。 再一次，您可以修改代码以使用内置DAC进行输出，这将使您可以使用耳机或模拟放大器板。 我有很多关于ESP32音频的视频，对于那些想了解有关ESP32音频的更多信息的人来说，这是一个很好的资源，您可以在这里找到： : list=PL5vDt5AALlRfGVUv2x7riDMIOX34udtKD
ESP32那些事儿(七)：功能开发之I2S和I2C驱动
荷兰风车
10-31 6834
1、I2S的使用      I2S为三线总线，3个信号分别为： ① 串行时钟SCK，也叫位时钟（BCK）。即每发送1位数字音频数据，SCK上都有1个脉冲。SCK的频率=2×采样频率×采样位数。在数据传输过程中，I2S总线的发送器和接收器都可以作为系统的主机来提供系统的时钟频率。 ② 帧时钟WS，即命令（声道）选择，用于切换左右声道的数据。WS的频率等于采样频率，由系统主机提供。WS为“1”表示传...
ESP32驱动喇叭（syn6288），UTF-8转Unicode，包含中文驱动
ailta的博客
04-10 4580
本文讲讲ESP32驱动喇叭，说实话，我当初为了驱动好这个喇叭，整了三天都没整出来，而且还是我在公司实习的时候，组长一直问，这么简单还没整出来，到底是不是你人的问题，挺离谱的，但是真的挺坑的，本来SYN6288这个语音合成芯片已经是串口驱动了，比较简单，但是难在这个芯片本身他不支持UTF-8格式字符串!这是最离谱的，因为单片机的字符串格式基本都是UTF-8，而直接拷贝其存好的GBK转码字符库，对单片机而言相当大，没有多少单片机吃得下的，所以后面专门研究了一下午的UTF-8转Unicode的方法，网上没有资料是
基于ESP32的对讲机源码
09-17
标题中的“基于ESP32的对讲机源码”指的是使用ESP32微控制器开发的无线对讲机项目，ESP32是由Espressif Systems公司推出的一种高性能、低功耗的Wi-Fi和蓝牙双模物联网芯片。这个项目的核心是利用ESP32的硬件资源和...
基于ESP32的对讲机，使用UDP广播或ESP-NOW-C/C++开发
05-27
基于ESP32的对讲机，使用UDP广播或ESP-NOW概述我们已经使用ESP32制作了对讲机。 解释性视频音频数据通过UDP广播或ESP-NOW传输。 因此，对讲机甚至可以在没有WiFi网络的情况下工作！ 我使用的是我自己的麦克风板（可...
esp-walkie-talkie:用于基于ESP8266的对讲机无线电的软件（运行不正常）
05-01
ESP8266对讲机 这是制造基于ESP8266的双向无线电的某种尝试的失败。 由于ESP8266在音频信号中引起大量无线电噪声，因此它失败了。 档案文件 alaw.c： A-law音频压缩算法的实现。 audio_task.c：音频捕获和播放以及网络连接的主要逻辑 fast_adc.c：快速ADC实现（高达〜20kHz采样率） sigma_delta.c：用于音频播放的Sigma-delta调制 user_main.c：启动逻辑，音量控制和wifi密码。 建造 要构建固件，您需要安装和 。 确保esp-open-sdk位于PATH环境变量中。 如果需要，请在Makefile中编辑ESP_OPEN_RTOS_DIR。 然后只需键入make即可构建或make flash来对ESP8266进行编程。 连接数 有关更多详细信息，请参见 ，但是对于基本测试，您可以连接： GPIO3 /
参赛作品《智能音响》-esp32_lin_v0b.pdf
09-03
参赛作品《智能音响》-esp32_lin_v0b.pdf
esp32mic:esp32 mems microfone网络套接字流
04-14
esp32mic esp32 mems microfone网络套接字流
基于ESP32实现WiFi 传输视频.docx
05-29
基于 ESP32 实现 WiFi 视频传输 知识点一：ESP32-CAM 模块介绍 ESP32-CAM 是一款采用 ESP32-S 芯片的超小型相机模组，具有 OV2640 摄像头和多个用于连接外围设备的 GPIO。该模块有一个板载稳压器 IC 和一个 PSRAM ...
ESP32采集图片程序
03-10
【ESP32图像采集程序详解】 ESP32是一款强大的微控制器，集成了Wi-Fi和蓝牙功能，被广泛应用于物联网(IoT)项目。在本项目中，我们将利用ESP32的摄像头模块进行图像采集，并通过Web接口实现远程访问和保存图片至SD卡...
ESP32播放网络音乐与麦克风接收
2301_77385325的博客
03-05 4273
使用esp32结合MAX98357音频放大器模块播放网络音乐
ESP32连接无源喇叭播放音乐
07-18 1305
1.0594630943592952645618252949463），与钢琴上的按键对应：。我们把频率440赫兹作为中央C ，C调的歌就是把频率440赫兹当作do，乐谱中写作：1=C。相邻的两个音之间的差一个半音，12345671之间的间隔分别是“全全半全全全半”;D调的歌就是把从440后面第二个音494赫兹当作do，乐谱中写作1=D。分成12份，八个八度的十二分音符对应的频率如下（从。相邻两个音之间的倍数是2^(1/12)，约等于。用的ESP32 WROOM开发板。对应的频率就是：（0代表停顿）
传感器使用——ESP-WROOM-32 and INMP441麦克风音频采集
qq_41958946的博客
07-29 4688
传感器使用——ESP-WROOM-32 and INMP441麦克风音频采集，数据显示及matlab操作界面。
esp32 python 对讲机
07-20
您好！对于ESP32开发板，您可以使用MicroPython来编写代码实现一个简单的对讲机功能。ESP32是一款强大的Wi-Fi和蓝牙模块，结合MicroPython的易用性，可以方便地实现对讲功能。以下是一个简单的示例代码： ```python import network import socket # 设置Wi-Fi连接 wifi_ssid = "your_wifi_ssid" wifi_password = "your_wifi_password" sta_if = network.WLAN(network.STA_IF) sta_if.active(True) sta_if.connect(wifi_ssid, wifi_password) # 创建UDP套接字 udp = socket.socket(socket.AF_INET, socket.SOCK_DGRAM) udp.bind(('0.0.0.0', 1234)) # 绑定本地IP和端口 # 循环接收和发送语音数据 while True: data, addr = udp.recvfrom(1024) # 接收语音数据 # 处理语音数据，例如播放声音 # ... # 获取麦克风数据，例如通过I2S接口获取音频数据 # ... # 发送麦克风数据到对方设备 udp.sendto(mic_data, ('remote_ip', remote_port)) ``` 这只是一个简单的示例，您可以根据实际需求进行功能扩展和优化。希望对您有所帮助！如果您还有其他问题，我会很乐意回答。
评论 2
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值