IoT RTC AIGC Demo 使用指南

IoT RTC AIGC Demo 使用指南

rtc-aigc-embedded-demo 项目地址: https://gitcode.com/gh_mirrors/rt/rtc-aigc-embedded-demo

1. 项目介绍

IoT RTC AIGC Demo 是一个展示实时对话式 AI 在物联网设备上应用的项目。该项目基于火山引擎的实时音视频 RTC、AI 大模型 AIGC、语音合成 TTS 和语音识别 ASR 技术构建，旨在帮助开发者快速实现设备端的 AI 语音交互功能。

2. 项目快速启动

硬件要求

• PC服务器（Linux 建议使用 ubuntu18.04 及以上版本）
• 乐鑫 ESP32-S3-Korvo-2 开发板
• USB数据线（两条 A 转Micro-B 数据线，一条作为电源线，一条作为串口线）
• PC（Windows、Linux 或者 macOS）

服务端配置

1. 克隆实时对话式 AI 硬件 Demo 示例：

   git clone https://github.com/volcengine/rtc-aigc-embedded-demo.git
   

2. 进入服务端 Demo 目录：

   cd rtc-aigc-embedded-demo/server/src
   

3. 设置配置文件：

   进入 RtcAigcConfig.py，设置鉴权 AK/SK、实时音视频 App ID 和 App KEY、大模型推理接入点 EndPointId 等参数。

4. 运行服务：

   在 rtc-aigc-embedded-demo/server/src 目录下运行服务：

   python3 RtcAigcService.py
   

设备端配置

1. 配置乐鑫开发环境：

   安装 CMake 和 Ninja 编译工具，克隆乐鑫 ADF 框架并同步子仓代码。

2. 安装乐鑫 esp32s3 开发环境相关依赖：

   ./install.sh esp32s3
   

3. 设置环境变量：

   每次打开命令行窗口均需要运行 ./export.sh 进行设置。

4. 克隆实时对话式 AI 硬件示例工程到乐鑫 ADF examples 目录下：

   git clone https://github.com/volcengine/rtc-aigc-embedded-demo.git
   

5. 打开设备端配置文件 Config.h，设置服务端地址、大模型 EndPointId、音频生成-语音合成 Voice_type 等参数。

6. 编译固件：

   idf.py build
   

7. 烧录并运行示例 Demo：

   • 打开乐鑫开发板电源开关
   • 烧录固件：idf.py flash
   • 运行示例 Demo 并查看串口日志输出：idf.py monitor

3. 应用案例和最佳实践

（本部分内容待补充，将根据实际项目应用场景提供具体案例和最佳实践。）

4. 典型生态项目

（本部分内容待补充，将介绍与 IoT RTC AIGC Demo 相关的典型生态项目，以帮助开发者拓展技术视野。）

rtc-aigc-embedded-demo 项目地址: https://gitcode.com/gh_mirrors/rt/rtc-aigc-embedded-demo