Multi-grained Attention Network for Aspect-Level Sentiment Classification阅读笔记

  本文提出了一个多粒度的注意力网络,用于解决基于aspect情感分析的问题。

  以往的模型主要有两个缺点。一是采用粗粒度的注意力机制,这样当某一aspect有很多单词或文本内容较大,会造成信息损失。二是其训练aspect只与其内容相关,aspect之间不相关。

  所谓的粗粒度的注意力机制指的是,对于aspect的平均向量,交互学习context word的权重;对于context的平均向量,交互学习aspect word的权重。这种思想来自于IAN,其认为在基于aspect的情感分类任务中,target和aspect应该具有交互性,即context应该是aspect-specific的,target也应该是specific-context的,具体的context互相作用于具体的target,该模型利用attention实现二者交互。

  IAN

  细粒度的注意力机制指的是,aspect和context的交互均是单词级的。除此之外,本文还在aspect之间学习提取信息。

  模型包括Input Embedding Layer,Context Layer,Multi-grained Attention Layer,Output Layer和Model Training。

  Input Embedding Layer利用CloVe将每个单词转化为word embedding。

  Context Layer利用双向的LSTM分别获取context word和aspect word的隐表示:

 

  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 1
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值