模型案例：| 驾驶员疲劳监测

导读

2023年以ChatGPT为代表的大语言模型横空出世，它的出现标志着自然语言处理领域取得了重大突破。它在文本生成、对话系统和语言理解等方面展现出了强大的能力，为人工智能技术的发展开辟了新的可能性。同时，人工智能技术正在进入各种应用领域，在智慧城市、智能制造、智慧医疗、智慧农业等领域发挥着重要作用。

柴火创客2024年将依托母公司Seeed矽递科技在人工智能领域的创新硬件，与全球创客爱好者共建“模型仓”，通过“SenseCraft AI”平台可以让使用者快速部署应用体验人工智能技术！

本期介绍：模型案例：| 驾驶员疲劳监测

模型参数

上期我们聊过，深度神经网络（DNN）是机器学习（ML）领域中的一种技术，一个深度神经网络DNN 包含了 输入层， 隐藏层， 输出层。

模型就是一组数据结构，保存了一个网状的形状，以及里面的参数， 通常模型会被保存为不同格式的文件，比如.h5 .tflite .kmodel等文件，都是用来阐述这个模型的形状结构和参数，下面继续了解模型参数。

在深度学习中，模型参数指的是神经网络中的权重和偏置，这些参数是用来定义模型的基本结构和特征表示能力的。

具体来说，模型参数包括两部分数据：权重和偏置。

权重（Weights）：指的是神经网络中连接不同层之间的权重值，也称为连接权重（connection weights）。权重值是神经网络中非常重要的参数，决定了输入和输出之间的映射关系。在前向传播过程中，权重值被用来计算每个神经元的输出。在训练过程中，权重值是模型需要优化的参数之一。

偏置（Biases）：指的是神经网络中每个神经元的偏置值，也称为偏移量（offset）。偏置值通常被添加到权重值乘以输入值的结果中，用来引入非线性变换。偏置值在训练过程中也是需要被优化的参数之一。

在深度学习中，模型参数的数量通常非常庞大，可能有数百万甚至数亿个参数，这也是深度学习需要大量数据和计算资源的原因之一。这些模型参数在训练过程中通过反向传播算法不断更新和优化，最终得到的模型参数可以用来进行预测、分类、生成等任务。

驾驶员疲劳监测识别模型

驾驶员疲劳监测是指在驾驶过程中对驾驶员的疲劳状态进行实时监控，以确保行车安全。疲劳驾驶会影响驾驶员的反应时间、判断能力和注意力，从而大大增加发生交通事故的风险。疲劳状态下，驾驶员容易出现走神、视线模糊等情况，降低了对路况及其他车辆的实时判断能力，直接影响行车安全。

该模型主要利用FOMO模型算法进行目标识别，可以快速识别出人的闭眼状态并发出警报。

驾驶员疲劳监测模型的作用和应用场景

作用：通过生理信号（如心率、脑电波等）和行为数据（如眨眼频率、头部姿态）等，实时评估驾驶员的疲劳水平。

预警功能：当系统检测到驾驶员疲劳状态达到一定阈值时，能够及时发出警报，提醒驾驶员进行休息，从而减少事故风险。

数据分析与反馈：收集驾驶员的疲劳数据进行分析，并提供反馈和建议，帮助驾驶员了解自己的疲劳模式和状态，进而改善驾驶习惯。

提高安全性：通过早期识别和预警，降低由于疲劳导致的事故发生率，从而提升整体交通安全性。

SenseCraft AI 平台介绍

SenseCraft AI 平台是一个专注于人工智能技术和应用的综合性平台，致力于帮助企业和个人实现智能化应用。该平台提供了多种人工智能算法和模型，包括人脸识别、猫狗识别、姿态估计、对象检测等经典模型，可以让使用者快速应用和部署AI模型并输出预测结果。

SenseCraft AI 平台经过不断的改进和迭代，现已推出新的功能并进行了全新的页面改版，新的应用平台启动新的网址：https://sensecraft.seeed.cc/ai/#/model

在Grove - Vision AI V2模块上部署此模型

1. 打开SenseCraft AI平台，如果第一次使用请先注册一个会员账号，还可以设置语言为中文。平台地址：https://sensecraft.seeed.cc/ai/#/model

2、准备Grove - Vision AI V2硬件，并提前安装好摄像头，使用Type-C数据线连接设备到电脑的USB接口上，如下图所示。

1. 将鼠标移动到【设备工作空间】菜单上，在弹出的下拉菜单中单击“Grove - ViSion AI V2”选项，如下图所示。

1. 在左上角下拉框中选择“Grove - ViSion AI V2”，然后单击“连接”按钮，如下图所示。

1. 弹出连接串口窗口，选择随机分配的串口号并单击【连接】按钮，如下图所示。

1. 在模型选区中，可以看到当前已经部署的模型名称，单击【上传自定义模型】按钮，如下图所示。

1. 弹出“上传自定义模型”窗口，按顺序填写模型名称、添加模型文件，添加ID对象的名称后，单击【发送】按钮，如下图所示。

1. 开始进行模型部署、固件下载、设备重启等过程，完后在预览中即可看到当前摄像头视频内容，将摄像头对准烛光图片查看预测效果，如下图所示。

原型设计：根据使用方式可以参考下面的原型设计一个带LED灯和蜂鸣器报警的装置，当检测到驾驶员疲劳驾驶闭眼后，就发出强烈的报警声和红色灯光提醒驾驶员。

Grove Al视觉模块 V2套装介绍

Grove Al视觉模块 V2

OV5647-62摄像头

Grove - Vision Al Module V2是一款拇指大小的人工智能视觉模块, 配备Himax WiseEye2 HX6538处理器, 该处理器采用 ArmCortex-M55双核架构。

它具有标准的CSI接口, 并与树莓派相机兼容。它有一个内置的数字麦克风和SD卡插槽。它非常适用于各种嵌入式视觉项目。

有了SenseCraft Al算法平台, 经过训练的ML模型可以部署到传感器, 而不需要编码。它兼容XIAO系列和Arduino生态系统, 是各种物体检测应用的理想选择。

主要硬件配置

- 板卡基于WiseEye2 HX6538处理器, 采用双核ARM Cortex-M55架构

- 配备集成Arm Ethos-U55微神经网络加速单元, 兼容的树莓派相机

- 板载PDM麦克风, SD卡插槽, Type-C, Grove接口, 丰富的外设支持样机开发

- Seeed Studio XIAO的可扩展性, SenseCraft Al的现成AI模型用于无代码部署。

- 支持各种有效的模型, 包括MobilenetV1、MobilenetV2、 Eficientnet-Lite、Yolov5和Yolov8.

写在最后

SenseCraft-AI平台的模型仓数量还很少，但是好消息是它支持自定义模型上传并输出推理结果，平台会逐渐增加模型仓的数量，敬请关注！