Heatherzxx的博客

原创 【阅读笔记2】一种基于决策层融合的多模态情感识别方法

多模态情感识别（语音、面部）。通过梅尔频率倒谱系数与卷积神经网络对情感进行识别分类，同时将语音情感识别迁移到神经网络计算棒以降低环境负载。在模态融合时，采用决策层融合的方式来提高识别准确率。（1）提取梅尔倒谱系数，使用AlexNet卷积神经网络进行训练，将训练后的网络迁移至神经网络计算棒，后续通过OpenVINO推理引擎进行情感识别。（2）通过OpenCV进行人脸检测，输入卷积神经网络来识别情感。