自然场景下评估面部连续的效价维和唤醒维

Estimation of continuous valence and arousal levels from faces in naturalistic conditions

论文发表于2021年1月21日

最近几年,研究人员开发了许多基于面部表情的预测情绪的深度神经网络模型。但是,目前的大多数模型仅仅检测几个主要的情绪状态例如生气、开心等,而不是关注更加微妙变化的人类情绪。

离散的情绪类别无法全面的表达人类的日常情绪,心理学家提出情绪效价(情绪的积极程度,或者说对刺激的感兴趣/排斥的程度)和情绪唤醒(情绪表达的激烈程度)。然而,识别人脸情绪的效价维和唤醒维对于人类来说是很容易的,对于计算机来说却是很大的挑战,自然场景下情绪效价和唤醒的评估是一个非常重要的问题。这些评估方式的主观性导致很难获得高质量的训练数据。

最近,三星人人工智能研究院(Samsung AI)联合伦敦帝国理工学院(Imperial College London)在《自然机器智能》期刊发表了一篇名为《自然状态下人脸连续性效价和唤醒水平估计》的论文,创新的提出一种深度神经网络框架来高准确率地分析自然场景下面部情感。本文提出的网络,同时集成了面部矫正并联合情绪分类和连续情绪的评估,使得该模型非常适合于实时应用。

模型效果:

连续状态下,模型能够精准识别面部情绪。

蓝色条表示愤怒程度。红色条表示激烈程度。

8种面部表情实时追踪,你的喜怒哀乐全被AI看穿了

黄色条表示悲伤程度。

8种面部表情实时追踪,你的喜怒哀乐全被AI看穿了

8种面部表情实时追踪,你的喜怒哀乐全被AI看穿了

 

本文使用数据集:

AFEW-VA (https://ibug.doc.ic.ac.uk/resources/afew-va-database/)

AffectNet (http://mohammadmahoor.com/affectnet/)

SEWA (https://db.sewaproject.eu/

本论文开源代码:

 https://github.com/face-analysis/emonet

开源协议: Creative Commons Attribution-NonCommercial-NoDerivatives 4.0 International Licence (CC BY-NC-ND)

 

 

 

  • 1
    点赞
  • 11
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 1
    评论
好的,我可以为您解释如何模拟一、二维和Brown运动的样本轨迹。 首先,Brown运动是一种随机运动,其运动规律是由随机力引起的。这个过程可以用随机游走模型来模拟。在一情况下,我们可以将Brown运动看作是一个点在数轴上随机游走。在二维和情况下,我们可以将其看作是一个点在平面或空间中的随机游走。 以下是一Brown运动的模拟代码示例: ```python import numpy as np import matplotlib.pyplot as plt # 模拟参数 N = 1000 # 步数 dt = 0.01 # 步长 mu = 0 # 均值 sigma = 1 # 方差 # 初始化数组 x = np.zeros(N) # 模拟Brown运动 for i in range(1, N): x[i] = x[i-1] + np.random.normal(mu, sigma) * np.sqrt(dt) # 画图 plt.plot(x) plt.xlabel('步数') plt.ylabel('位置') plt.title('一Brown运动') plt.show() ``` 以上代码使用numpy库和matplotlib库模拟并绘制了一Brown运动的样本轨迹。 以下是二维和Brown运动的模拟代码示例: ```python import numpy as np import matplotlib.pyplot as plt from mpl_toolkits.mplot3d import Axes3D # 模拟参数 N = 1000 # 步数 dt = 0.01 # 步长 mu = np.array([0, 0, 0]) # 均值 sigma = np.array([[1, 0, 0], [0, 1, 0], [0, 0, 1]]) # 协方差矩阵 # 初始化数组 x = np.zeros((N, 3)) # 模拟Brown运动 for i in range(1, N): x[i] = x[i-1] + np.random.multivariate_normal(mu, sigma) * np.sqrt(dt) # 画图 fig = plt.figure() ax = fig.add_subplot(111, projection='3d') ax.plot(x[:,0], x[:,1], x[:,2]) ax.set_xlabel('X') ax.set_ylabel('Y') ax.set_zlabel('Z') ax.set_title('三Brown运动') plt.show() ``` 以上代码使用numpy库、matplotlib库和mpl_toolkits库模拟并绘制了三Brown运动的样本轨迹。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

安二柴

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值