小智物联网开发:为小智安装“机械臂“(其实就是加个舵机进行语音控制)

小智物联网开发:打造专属智能助手,开启智能生活新纪元

在物联网蓬勃发展的今天,小智物联网开发正引领着一股创新浪潮,为我们的生活和工作带来前所未有的便利与智能体验。今天,就让我们一起深入探索小智物联网开发的魅力所在。

项目概述

小智物联网开发是一个专注于打造智能、便捷生活体验的创新项目。它以ESP32开发板为核心,融合了先进的语音识别、人工智能以及物联网技术,旨在为用户提供一个可定制化的智能助手解决方案。通过简单的硬件搭建和软件配置,用户能够轻松实现智能家居控制、语音交互等多种功能,让科技真正融入日常生活。

基于小智当前的代码开发属于自己的小智机器人

第一步:关闭小智的自我更新机制

为了确保我们烧入的自定义代码不会被小智的自我更新机制所覆盖,我们需要先关闭其自我更新功能。具体操作是注释掉xiaozhi-esp32-main\main\application.cc中的以下代码:

	ota_.SetCheckVersionUrl(CONFIG_OTA_VERSION_URL);
    ota_.SetHeader("Device-Id", SystemInfo::GetMacAddress().c_str());
    ota_.SetHeader("Client-Id", board.GetUuid());
    ota_.SetHeader("X-Language", Lang::CODE);

    xTaskCreate([](void* arg) { // 创建检查新版本的任务
        Application* app = (Application*)arg;
        app->CheckNewVersion();
        vTaskDelete(NULL);
    }, "check_new_version", 4096 * 2, this, 1, nullptr);

完成上述操作后,重新为ESP32S3烧录版本,这样小智就不会再进行自动更新了。

第二步:添加自己的物联网设备——以添加舵机为例

为了让小智具备更多的功能,我们可以为其添加物联网设备。这里以添加舵机作为小智的手臂为例,详细说明操作步骤。

1. 创建舵机控制文件

在路径xiaozhi-esp32-main\main\iot\things下添加一个名为arm.cc的文件,其内容如下:

#include "iot/thing.h"
#include "board.h"
#include <driver/gpio.h>
#include <esp_log.h>
#include "esp_err.h"
#include "freertos/FreeRTOS.h"
#include "freertos/task.h"
#include "freertos/semphr.h"
#include "driver/mcpwm_prelude.h"

#define TAG "Arm"

#define SERVO_MIN_PULSEWIDTH_US 500  // Minimum pulse width in microsecond
#define SERVO_MAX_PULSEWIDTH_US 2500  // Maximum pulse width in microsecond
#define SERVO_MIN_DEGREE        -90   // Minimum angle
#define SERVO_MAX_DEGREE        90    // Maximum angle

#define SERVO_PULSE_GPIO             19        // GPIO connects to the PWM signal line
#define SERVO_TIMEBASE_RESOLUTION_HZ 1000000  // 1MHz, 1us per tick
#define SERVO_TIMEBASE_PERIOD        20000    // 20000 ticks, 20ms

static inline uint32_t example_angle_to_compare(int angle)
{
    return (angle - SERVO_MIN_DEGREE) * (SERVO_MAX_PULSEWIDTH_US - SERVO_MIN_PULSEWIDTH_US) / (SERVO_MAX_DEGREE - SERVO_MIN_DEGREE) + SERVO_MIN_PULSEWIDTH_US;
}

namespace iot {

// 这里仅定义 Arm 的属性和方法,不包含具体的实现
class Arm : public Thing {
private:
    bool power_ = false;
    mcpwm_cmpr_handle_t comparator = NULL;
    void example_ledc_init(void) {
        ESP_LOGI(TAG, "Create timer and operator");
        mcpwm_timer_handle_t timer = NULL;
        mcpwm_timer_config_t timer_config = {
            .group_id = 0,
            .clk_src = MCPWM_TIMER_CLK_SRC_DEFAULT,
            .resolution_hz = SERVO_TIMEBASE_RESOLUTION_HZ,
            .count_mode = MCPWM_TIMER_COUNT_MODE_UP,
            .period_ticks = SERVO_TIMEBASE_PERIOD,
        };
        ESP_ERROR_CHECK(mcpwm_new_timer(&timer_config, &timer));

        mcpwm_oper_handle_t oper = NULL;
        mcpwm_operator_config_t operator_config = {
            .group_id = 0, // operator must be in the same group to the timer
        };
        ESP_ERROR_CHECK(mcpwm_new_operator(&operator_config, &oper));

        ESP_LOGI(TAG, "Connect timer and operator");
        ESP_ERROR_CHECK(mcpwm_operator_connect_timer(oper, timer));

        ESP_LOGI(TAG, "Create comparator and generator from the operator");
        
        mcpwm_comparator_config_t comparator_config = {
            0, // intr_priority
            {true} // flags.update_cmp_on_tez
        };
        ESP_ERROR_CHECK(mcpwm_new_comparator(oper, &comparator_config, &comparator));

        mcpwm_gen_handle_t generator = NULL;
        mcpwm_generator_config_t generator_config = {
            .gen_gpio_num = SERVO_PULSE_GPIO,
        };
        ESP_ERROR_CHECK(mcpwm_new_generator(oper, &generator_config, &generator));

        // set the initial compare value, so that the servo will spin to the center position
        ESP_ERROR_CHECK(mcpwm_comparator_set_compare_value(comparator, example_angle_to_compare(0)));

        ESP_LOGI(TAG, "Set generator action on timer and compare event");
        // go high on counter empty
        ESP_ERROR_CHECK(mcpwm_generator_set_action_on_timer_event(generator,
                                                                MCPWM_GEN_TIMER_EVENT_ACTION(MCPWM_TIMER_DIRECTION_UP, MCPWM_TIMER_EVENT_EMPTY, MCPWM_GEN_ACTION_HIGH)));
        // go low on compare threshold
        ESP_ERROR_CHECK(mcpwm_generator_set_action_on_compare_event(generator,
                                                                    MCPWM_GEN_COMPARE_EVENT_ACTION(MCPWM_TIMER_DIRECTION_UP, comparator, MCPWM_GEN_ACTION_LOW)));

        ESP_LOGI(TAG, "Enable and start timer");
        ESP_ERROR_CHECK(mcpwm_timer_enable(timer));
        ESP_ERROR_CHECK(mcpwm_timer_start_stop(timer, MCPWM_TIMER_START_NO_STOP));
    }

public:
    Arm() : Thing("Arm", "你的手臂,可以运动"), power_(false) {
        // Set the LEDC peripheral configuration
        example_ledc_init();

        // 定义设备的属性
        properties_.AddBooleanProperty("power", "手臂是否运动", [this]() -> bool {
            return power_;
        });

        // 定义设备可以被远程执行的指令
        methods_.AddMethod("TurnOn", "手臂运用", ParameterList(), [this](const ParameterList& parameters) {
            power_ = true;
            int angle = 0;
                ESP_LOGI(TAG, "Angle of rotation: %d", angle);
                ESP_ERROR_CHECK(mcpwm_comparator_set_compare_value(comparator, example_angle_to_compare(angle)));
                //Add delay, since it takes time for servo to rotate, usually 200ms/60degree rotation under 5V power supply
                vTaskDelay(pdMS_TO_TICKS(500));
                angle = 20;
                ESP_LOGI(TAG, "Angle of rotation: %d", angle);
                ESP_ERROR_CHECK(mcpwm_comparator_set_compare_value(comparator, example_angle_to_compare(angle)));
                vTaskDelay(pdMS_TO_TICKS(500));
                angle = 40;
                ESP_LOGI(TAG, "Angle of rotation: %d", angle);
                ESP_ERROR_CHECK(mcpwm_comparator_set_compare_value(comparator, example_angle_to_compare(angle)));
                vTaskDelay(pdMS_TO_TICKS(500));
                angle = 60;
                ESP_LOGI(TAG, "Angle of rotation: %d", angle);
                ESP_ERROR_CHECK(mcpwm_comparator_set_compare_value(comparator, example_angle_to_compare(angle)));
                vTaskDelay(pdMS_TO_TICKS(500));
                angle = -60;
                ESP_LOGI(TAG, "Angle of rotation: %d", angle);
                ESP_ERROR_CHECK(mcpwm_comparator_set_compare_value(comparator, example_angle_to_compare(angle)));
        });

        methods_.AddMethod("TurnOff", "手臂返回原来的位置", ParameterList(), [this](const ParameterList& parameters) {
            power_ = false;
            // ****
        });
    }
};

} // namespace iot

DECLARE_THING(Arm);
2. 更新JSON配置文件

main\iot\sample_interface.json文件中添加舵机的相关说明:

    {
        "name": "arm",
        "description": "AI机器人的手臂",
        "properties": {
            "power": {
                "type": "boolean",
                "description": "当前手臂是否在运动"
            }
        },
        "methods": {
            "TurnOn": {
                "description": "手臂在运动"
            }
        }
    },
3. 初始化舵机设备

main\boards\bread-compact-wifi\compact_wifi_board.cc(根据自己的板子适配的文件)中的物联网初始化函数中添加舵机的初始化函数:

    // 物联网初始化,添加对 AI 可见设备
    void InitializeIot() {
        auto& thing_manager = iot::ThingManager::GetInstance();
        thing_manager.AddThing(iot::CreateThing("Speaker"));
        thing_manager.AddThing(iot::CreateThing("Lamp"));
        thing_manager.AddThing(iot::CreateThing("Arm")); // 添加物联网things中的Arm类(为新加)
    }

完成以上步骤后,重新编译工程并为小智刷入新的版本,现在你就可以通过语音指令呼唤小智动手臂了。
小智输出结果展示:

I (573923) LS_learner: ****>> start
I (573923) LS_learner: 麦克风输入>> 动一下手臂。
I (573923) LS_learner: 麦克风输入>> {
        "type": "stt",
        "text": "动一下手臂。",
        "session_id":   "b30cf390"
}
I (573943) LS_learner: STATE: speaking
I (574223) LS_learner: 物联网情况<< {
        "type": "iot",
        "commands":     [{
                        "name": "Arm",
                        "method":       "TurnOn",
                        "parameters":   {
                        }
                }],
        "session_id":   "b30cf390"
}
I (574233) LS_learner: COMMAND<< [{
                "name": "Arm",
                "method":       "TurnOn",
                "parameters":   {
                }
        }]
I (574263) Arm: Angle of rotation: 0
I (574533) LS_learner: 物联网情况<< {
        "type": "iot",
        "commands":     [{
                        "name": "Arm",
                        "method":       "TurnOff",
                        "parameters":   {
                        }
                }],
        "session_id":   "b30cf390"
}
I (574543) LS_learner: COMMAND<< [{
                "name": "Arm",
                "method":       "TurnOff",
                "parameters":   {
                }
        }]
I (574593) LS_learner: 表情输出情况<< {
        "type": "llm",
        "text": "😊",
        "emotion":      "happy",
        "session_id":   "b30cf390"
}
I (574763) Arm: Angle of rotation: 20
I (574863) LS_learner: 扬声器输出<< 好的,我动了动手臂,感觉挺好玩的!
I (574863) LS_learner: 扬声器输出<< {
        "type": "tts",
        "state":        "sentence_start",
        "text": "好的,我动了动手臂,感觉挺好玩的!",
        "session_id":   "b30cf390"
}
I (575263) Arm: Angle of rotation: 40
I (575763) Arm: Angle of rotation: 60
I (576263) Arm: Angle of rotation: -60
I (579173) LS_learner: 扬声器输出<< 你今天过得怎么样呢?
I (579173) LS_learner: 扬声器输出<< {
        "type": "tts",
        "state":        "sentence_start",
        "text": "你今天过得怎么样呢?",
        "session_id":   "b30cf390"
}
I (582033) LS_learner: ****>> stop

接线图:
未使用舵机驱动,仅作演示
在这里插入图片描述
修改后的代码:
https://gitee.com/liushuo-max/xiaozhi-robot/tree/master/xiaozhi-esp32-main

总结与展望

小智物联网开发以其强大的功能、开放的架构和低成本的优势,为物联网爱好者和开发者提供了一个广阔的创作平台。通过简单的硬件搭建和软件配置,我们能够轻松打造出属于自己的智能生活助手,让科技真正融入日常生活。未来,随着技术的不断进步和创新,小智物联网开发将为我们带来更多的惊喜和可能,让我们共同期待它在智能时代的精彩表现!

<think>好的,我现在需要帮助用户寻找关于ESP32和小智AI相关的示例程序或教程。首先,我需要明确用户的需求。用户提到了“小智AI”,这可能指的是某种具体的AI应用,比如聊天机器人、能语音助手或者特定的AI硬件模块。结合用户提供的引用内容,尤其是引用[3]提到的“小智AI桌宠机器狗”,可能用户对如何将ESP32与AI功能结合,特别是与机器狗或类似设备交互感兴趣。 接下来,我需要查看用户提供的三个引用,看看是否有相关的示例代码或教程。引用[1]是关于基于ESP32-CAM制作能机器人的教程,提到了使用Arduino IDE和示例代码。这可能涉及到摄像头和机器人控制,但并没有直接提到小智AI。引用[2]是关于ESP32接入AI聊天机器人,使用了API和示例代码,这可能与AI聊天功能相关。引用[3]提到了在代码中添“Dog”设备,可能涉及到控制机器狗的物联网功能。 用户的问题是将ESP32与小智AI结合,可能需要综合这三个引用的内容。可能的思路是:ESP32通过API接入AI(如引用[2]),然后控制机器狗(引用[3]),同时可能使用摄像头模块(引用[1])进行视觉处理。因此,用户可能需要整合这些资源的示例代码。 接下来,我需要考虑用户可能的实际应用场景。例如,用户可能想制作一个具有AI对话功能的能机器狗,使用ESP32作为主控,通过摄像头进行图像识别,并通过API与AI交互。因此,回答需要涵盖如何接入AI服务、如何控制硬件设备,以及可能的示例代码来源。 另外,需要注意用户提到的“小智AI”可能是一个特定的产品,但由于信息有限,可能需要根据现有引用进行推测。例如,引用[3]中的代码可能属于某个项目,用户可能需要访问该项目的仓库或文档来获取更多信息。 在回答中,需要指导用户如何查找示例代码,比如在GitHub搜索相关关键词,参考现有的教程,或查阅官方文档。同时,应提醒用户注意硬件兼容性和网络配置,比如确保ESP32能够连接Wi-Fi,正确设置API密钥等。 最后,生成相关问题,帮助用户进一步探索,例如如何优化AI响应速度,如何集成更多传感器,或如何处理多任务等。</think>根据提供的参考资料,以下是关于ESP32与小智AI结合的开发指引和示例代码推荐: ### 一、开发路径解析 1. **硬件选择** - 核心控制:ESP32-CAM模块(含摄像头功能)或普通ESP32开发板 - AI交互:通过HTTP API接入AI大模型服务[^2] - 执行机构:舵机/电机驱动的机器狗结构[^3] 2. **开发环境配置** ```arduino // 需安装的库文件 #include <WiFi.h> #include <HTTPClient.h> #include <ArduinoJson.h> ``` ### 二、关键代码示例 ```arduino // AI交互核心代码(引用[2]扩展) void chatWithAI(String prompt) { HTTPClient http; http.begin("https://api.zhipuai.com/v3/chat/completions"); http.addHeader("Content-Type", "application/json"); http.addHeader("Authorization", "Bearer 你的API密钥"); String payload = "{\"model\":\"chatglm-pro\",\"messages\":[{\"role\":\"user\",\"content\":\"" + prompt + "\"}]}"; int httpCode = http.POST(payload); if (httpCode == HTTP_CODE_OK) { String response = http.getString(); // 解析JSON响应 DynamicJsonDocument doc(1024); deserializeJson(doc, response); String aiReply = doc["choices"][0]["message"]["content"]; Serial.println("AI回复:" + aiReply); } http.end(); } // 机器狗控制代码(引用[3]扩展) void controlDog(String command) { if(command.indexOf("前进") != -1) { // 触发前进动作 digitalWrite(MOTOR_PIN1, HIGH); digitalWrite(MOTOR_PIN2, LOW); } // 添更多动作控制... } ``` ### 三、系统集成流程 1. 在Arduino IDE中配置ESP32开发环境(引用[1]) 2. 获取AI的API密钥(引用[2]) 3. 实现物联网设备注册(引用[3]中InitializeIot方法) 4. 开发语音/文字输入接口 5. 建立AI响应与硬件动作的映射关系 ### 四、推荐学习资源 1. ESP32-CAM基础教程:[ESP32-CAM AI Robot项目](引用[1]) 2. API接入文档:[AI开放平台](引用[2]) 3. 物联网设备开发框架:[Compact ML307 Board代码](引用[3])
评论 18
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值