情感空间的描述, 情感语料库的建立。
语音信号采集, 情感特征提取, 情感识别算法,情感识别技术应用。
opensmile: 面向语音情感特征提取的工具,能量、基频、时长、mel倒谱系数。
FEELTRACE: 情感标注系统,
SEMAINE:大型多媒体情感数据库,提供了情感数据的维度标注结果,
情感描述方式,大致分为:离散和维度,两种形式。
1)离散的,形容词标签形式,早期研究中使用的多。(情感描述具有局限性)
6大基本情感,在当今情感研究中使用的最多。 anger、disgust、fear、joy、sadness、surprise。
2)将情感状态描述为多维情感空间中的点,空间的情感描述能力可以涵盖所有的情感状态。 坐标轴表示:情感激烈程度、情感正负面程度。(连续的情感描述,精确的数值)
语料库:
离散情感语料库居多,
英文:
Belfast英语情感数据库: anger、sadness、 happiness、 fear、neutral
柏林EMO-DB德语情感语音库:7种情感(文本是中性的,常见口语,全靠说话人酝酿情感)
IEMOCAP(已获取,还跑过):说话人自然的情绪表露。
FAU AIBO儿童德语: Interspeech 2009 竞赛数据库
中文:
(1)CASIA: 5种情感。(已获取)
ACCorpus: 多模态、多通道、人脸表情、视频、图像、
维度情感数据库:一般是打分制的。 Continuous AVEC.
VAM数据库(德语,只适合做纯语音的研究)
Semaine数据库:(最符合的数据集,英文,语音+文字都有,多维度,数值型标注, 申请还未通过)