计算机信息科学蔺泽浩,上海交通大学计算机科学与工程系(CSE)

本文介绍了三个系统:1) 多模态疲劳驾驶检测系统,结合脑电、眼电等信号提高疲劳检测精度;2) 脑机交互康复训练平台,通过神经反馈促进肢体运动功能康复;3) 智能人机口语对话系统,采用先进的语音技术和对话管理技术,实现高精度的实时人机交互。这些技术在交通、医疗和人机交互领域有广泛应用。
摘要由CSDN通过智能技术生成

脑机交互的多模态疲劳驾驶检测系统

本系统通过获取驾驶员的脑电信号(EEG)、眼电信号(EOG)、握力信号和Kinect图像,从生理信号和行为特征中提取与疲劳相关的特征,利用机器学习方法建立疲劳检测模型,实现驾驶员疲劳状态的度量与预测。与传统的基于视频的疲劳检测方法相比,本系统可提高疲劳检测的精度和可靠性。本系统不仅能为高铁司机和长途客车司机提供一种准确、可靠的疲劳状态检测技术,而且可以应用于任何需要对操作人员的疲劳状态进行实时检测的任务。

1cf60caaa01f4340f5774419df339883.png

基于脑电的脑机交互技术与脑功能康复训练平台

本系统利用脑机交互技术读取脑皮层肢体运动意向,从视觉、听觉和触觉通道进行神经反馈,通过功能电刺激促使肢体产生运动,从而建立主动肢体运动控制环路,提高运动功能康复效果。该系统具有脑电模式识别模块、在线可视化监护模块、系统自适应模块、多模态神经反馈系统,在临床实验验证了该系统对脑卒中病人脑运动功能康复有明显效果。

83aa9619657fb4c0fe93bffb3796e788.png

认知型智能人机口语对话系统

本系统采用了大词汇连续语音识别、参数化统计合成、统计语义理解,以及基于上下文和情境的推理和对话管理技术,构建了能够实时反馈的,具有自适应和纠错能力的智能人机口语对话系统。该系统原型曾在CMU组织的首届国际口语对话系统挑战赛中获得可控测试的冠军。相关的语音识别、合成、理解、及对话控制等技术已经面向移动互联应用产业化,提供云端服务,得到国内主要的独立手机语音助手和语音应用开发者的广泛使用。应用开发者的广泛使用。

63b3b0f32b8dfb9cfffda1e5e186b743.png

代表性论文:

1.Xiao-Lin Wang, Hai Zhao, and Bao-Liang Lu, A Meta-Top-down Method for Large-scale Hierarchical Classification. IEEE Trans. on Knowledge and Data Engineering, 2013

2.Qibin Zhao, Cesar F. Caiafa, Danilo P. Mandic, Zenas C. Chao, Yasuo Nagasaka, Naotaka Fujii, Liqing Zhang and Andrzej Cichocki, Higher-Order Partial Least Squares (HOPLS): A Generalized Multi-Linear Regression Method, IEEE Trans. on Pattern Analysis and Machine Intelligence, 2013.

3.Shusen Wang and Zhihua Zhang. Improving CUR Matrix Decomposition and the Nystrom Approximation via Adaptive Sampling. Journal of Machine Learning Research, 2013.

4.Xin Shu, Yao Gao, and Hongtao Lu, Efficient linear discriminant analysis with locality preserving for face recognition, Pattern Recognition, 2012.

5.K. Yu and S. Young, Continuous F0 modelling for HMM based statistical parametric speech synthesis, IEEE Trans. on Audio, Speech and Language Processing, 2011.

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值