（二十七）：CH-SIMS:基于情态细粒度注释的中文多模态情感分析数据集

最新推荐文章于 2024-06-30 20:46:10 发布
最新推荐文章于 2024-06-30 20:46:10 发布
阅读量1.5k 收藏 3
点赞数
分类专栏： “情感分析”研究方向论文-精读总结
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_37486501/article/details/117417040
版权
本文介绍了CH-SIMS，一个包含独立单模态和多模态注释的中文多模态情感分析数据集，用于研究模态间的差异和情感分析。提出了一种多模态多任务学习框架，实验证明该框架提高了性能，学习到更独特的单模态表示。
摘要由CSDN通过智能技术生成

文献阅读（二十七）：CH-SIMS- A Chinese Multimodal Sentiment Analysis Dataset with Fine-grained Annotations of Modality中文多模态情绪

  • 出处：ACL 2020: 3718-3727
  • 作者：智能技术与系统国家重点实验室+清华大学计算机科学与技术系
  • 主要内容：提出了中文单模态和多模态情感分析数据集CH-SIMS，并提出了一种以后期融合为基础的多任务学习框架

Abstract

以往的多模态情感分析研究使用的是有限的数据集，仅包含统一的多模态注释。然而，统一的注释并不总是反映单一模态的独立情感，并且限制了模型捕捉模态之间的差异。

本文介绍了中文单模态和多模态情感分析数据集CH-SIMS，该数据集包含2,281个带有多模态和独立单模态注释的精炼视频片段。它允许研究者研究模态之间的相互作用或使用独立的单模态注释进行单模态情感分析。

此外，我们提出了一种以后期融合为基础的多任务学习框架。在CH-SIMS上的广泛实验表明，我们的方法达到了最先进的性能，并学习更多独特的单模态表示。

  • 完整的数据集和代码在：https://github.com/ thuiar/MMSA

1 Introduction

情感分析是自然语言处理(NLP)中的一个重要研究领域。它在其他

了解本专栏 订阅专栏 解锁全文
Laura_Wangzx
关注
专栏目录
订阅专栏
Sentiment Analysis 中文情感分析-数据集
03-19
该数据集包括了四个领域的中文评论：笔记本电脑、汽车、相机和手机，评论属于 二分类 任务及正面或负面。可被用作于 自然语言处理 中情感分类任务。 camera_label.txt camera_sentence.txt car_label.txt car_sentence.txt car_target.txt notebook_label.txt notebook_sentence.txt notebook_target.txt phone_label.txt phone_sentence.txt phone_target.txt camera_target.txt
TOF-SIMS分析软件
07-30
**时间飞行二次离子质谱（TOF-SIMS）分析软件** TOF-SIMS，全称为Time-of-Flight Secondary Ion Mass Spectrometry，是一种高分辨率、高灵敏度的表面分析技术，用于研究材料表面的化学成分和结构。TOF-SIMS通过发射...
ACL2023: ConFEDE: Contrastive Feature Decomposition for Multimodal SentimentAnalysis
cc272018282的博客
09-25 1843
作者认为MSA（多模态情感分析）严重依赖于提取出的特征的质量，而特征又可以分为跨模态一致的不变特征（共有特征）和特定模态的特征（单模态的独有特征）。基于此作者提出了ConFEDE模型，该模型对比之前方法能够更好的提取共有特征和独有特征。训练方法和损失函数的创新。
多模态情感分析——基于交叉多头注意力CMA进行图文多模态融合（含MVSA数据集）
最新发布
小嘤熊的博客
06-30 1317
由两个独立的数据集组成，分别是MVSA-Single数据集和 MVSA-Multi数据集，前者的每条图文对只有一个标注，后者的每条图文对由三个标注者给出。删除 MVSA-Single 数据集中图片和文字标注情感的正负极性不同（存在positive和negative）的图文对，剩余的图文对中，如果图片或者文本的情感有一者为中性（neutral），则选择另一个积极或者消极的标签作为该图文对的情感标签，最终得到4511个图文对。图像处理模块采用预训练的ResNet系列模型，提取图像特征，并进行特征变换。
【NLP】文献翻译4——CH-SIMS：中文多模态情感分析数据集与细粒度的模态注释
YoungSeng's Blog
04-17 1万+
CH-SIMS: A Chinese Multimodal Sentiment Analysis Dataset with Fine-grained Annotations of Modality摘要1. 介绍2. 相关工作2.1 多模态数据集2.2 多模态情感分析2.3 多任务学习3. CH-SIMS 数据集3.1 数据获取3.2 标注3.3 特征提取4. 多模式多任务学习框架4.1 单模态子网4.2 特征融合网络4.3 优化目标5. 实验5.1 基准5.2 实验的细节5.3 结果和讨论5.3.1 与
清华论文CH-SIMS: A Chinese Multimodal Sentiment Analysis Dataset with Fine-grained Annotations of Modali
Neo的战斗部
03-08 3326
CH-SIMS: A Chinese Multimodal Sentiment Analysis Dataset with Fine-grained Annotations of Modality 创新点 1. 提出了一种数据集，可以同时去做单模态分类，多模态分类以及多任务分类。 2. 提出了一种多模态多任务的后端融合的框架，在这个框架下进行多模态训练会使得测试结果更高。 论文细节 单模态和多模态的标签是分开的 对每一段语音，文本，视频都叫五个人去打标签，每个人打的标签只有三种， 1是积极的，0中性的，-
情感分析资源大全（语料、词典、词嵌入、代码）
热门推荐
qq280929090的专栏
04-27 6万+
　　该博客收集情感分析领域中一些语料、词典等。 1 语料库 1.1 谭松波-酒店评论语料-UTF-8,10000条 　　现在网上大部分谭松波老师的评论语料资源的编码方式都是gb2312，本资源除了原始编码格式，还具有UTF-8编码格式。 本资源还包含将所有语料分成pos.txt和neg.txt两个文件，每个文件中的一行代表原始数据的一个txt文件，即一篇评论。 　　下载地址为：谭...
多模态情感分析——MVSA数据集
小嘤熊的博客
11-06 2436
删除 MVSA-Single 数据集中图片和文字标注情感的正负极性不同（存在positive和negative）的图文对，剩余的图文对中，如果图片或者文本的情感有一者为中性（neutral），则选择另一个积极或者消极的标签作为该图文对的情感标签，最终得到4511个图文对。采用投票机制，即统计情感极性标注出现次数最多的作为标签，如果出现两种标签各有三个的情况则进行删除，最终得到16779个图文对。，前者的每条图文对只有一个标注，后者的每条图文对由三个标注者给出。数据集包含 5,129 条图文对（
XPS和TOF-SIMS在PCB失效分析中的应用.pdf
07-25
X射线光电子能谱仪(XPS)和飞行时间二次离子质谱(TOF-SIMS)作为浅表面化学分析的两种重要手段，在PCB失效分析中扮演了至关重要的角色。XPS技术通过使用X射线光子激发出物质表面原子的内层电子，并对其进行能量分析来...
matlab求解微分方程组代码-Sims.jl:Julia中基于方程的建模和模拟
05-23
用于基于方程式的建模和仿真的软件包。 有关更多信息，请参见文档： 。 。 注意：这是将包转换为use的工作。 某些组件和/或示例目前还无法正常工作。 这尤其包括需要事件的模型和离散系统。 Sims建立在的基础上。 ...
MMSA:CH-SIMS
08-04
MMSA 多模态情感分析中代码的 Pytorch 实现。 注意：我们强烈建议您首先浏览我们代码的整体结构。 如果您有任何疑问，请随时与我们联系。 支持模型 在这个框架中，我们支持以下方法： 类型 型号名称 从 单任务 单任务 —— 单任务 单任务 单任务 单任务 单任务 （无 CTC） 单任务 米萨 米萨 多任务 MLF_DNN MMSA 多任务 MTFN MMSA 多任务 MLMF MMSA 多任务 自我_MM 自我MM 结果 详细结果见results/result-stat.md 用法 克隆代码 克隆这个 repo 并安装需求。 git clone https://github.com/thuiar/MMSA cd MMSA pip install -r requirements.txt 数据集和预训练的 berts 从以下链接下载数据集特征和
中文情感分析词典数据集（基于词典）.zip
07-27
https://blog.csdn.net/kobeyu652453/article/details/106259653 该篇博文所用数据集
中文评论情感分析数据集
01-31
谭松波中文评论情感分析，1为正向情感，0为负向情感，
ChnSentiCorp中文情感分析数据集
04-09
ChnSentiCorp 是一个中文情感分析数据集，包含酒店、笔记本电脑和书籍的网购评论。
情感和语义分析最全中文数据库
01-18
最全的中文情感和语义词典，文件内容（TXT和excel）如下： 1. 褒贬词及其近义词； 2. 汉语情感词极值表； 3. 清华大学李军中文褒贬义词典； 4. 情感词典及其分类； 5. 情感词汇本体； 6. 台湾大学NTUSD简体中文情感词典； 7. 知网Hownet情感词典。
MATLAB有限元分析与应用源代码-flow_sims:二维盖驱动腔流模拟：FEM，FDM和SIMPLE
05-27
MATLAB有限元分析与应用源代码flow_sims 问题：2D盖驱动腔流动 解决方法： FDM-有限差分法[1]。 有限元-Galerkin有限元方法[2]。 FVM-具有有限体积离散化的SIMPLE算法[3,4,5] 数字： 每个文件夹包含压力和速度场的...
数据集 | 基于语音（Speech）/多模态（Multimodal）的情绪识别数据集，格式及下载
weixin_44649780的博客
05-12 7966
RAVDESS 包含 24 名专业演员（12 名女性，12 名男性），用中性的北美口音说出两个词汇匹配的陈述。文件名由 7 部分数字标识符组成（例如，03-01-06-01-02-01-12.wav）。情绪（01 = 中性，02 = 平静，03 = 快乐，04 = 悲伤，05 = 愤怒，06 = 恐惧，07 = 厌恶，08 = 惊讶）。情绪强度（01 = 正常，02 = 强烈）。模态（01 = 全 AV，02 = 仅视频，03 = 仅音频）。文件名示例：03-01-06-01-02-01-12.wav。
多模态情感分析——Twitter15和Twitter17数据集
小嘤熊的博客
11-06 4214
将原始的train、dev、test合并到一起，共计5338条，然后将第一列的index作为图片和文本的名字，标签从数字转换为字符串，最终得到了10676个图文对，以及一个train.txt用来保存文件名和标签。将原始的train、dev、test合并到一起，共计5972条，然后将第一列的index作为图片和文本的名字，标签从数字转换为字符串，最终得到了11944个图文对，以及一个train.txt用来保存文件名和标签。（2）第二列是情感标签（0表示负面，1表示中性，2表示正面）；（1）第一列是索引；
ConFEDE：统一多模态表示学习框架提升情感分析表现
为了验证这种方法的有效性，研究者选择了CH-SIMS数据集，这是一个具有单模态和整体情感标签的大型数据集。为了测试模型在没有单模态标签的情况下，还进行了对MOSI和MOSEI数据集的实验，这两个数据集只包含整体情感...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

Laura_Wangzx

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值