[AAAI2018]Learning Structured Representation Representation for Text Classification via Reinforcemen

文本分类的主流表示大致分为四类
- Bag-of-words representation models
- Sequence representation models
- Structured representation models
- Attention-based methods
已存在的structured representation models中,结构信息要么作为input, 要么根据已有的树库标注的结构进行有监督预测.也有一些人盐焗自动优化结构,但效果一般.
本文提出了一种没有利用明确的结构标注信息而是利用强化学习识别任务相关结构然后构建结构句子表示.
这里写图片描述
Model的组成部分:

  • policy network – defines a policy for structure discovery
  • classification network – makes prediction on top of structured sentence representation and facilitates reward computation for the policy network
  • the representation models :
    (1)Information Distilled LSTM(HS-LSTM) – selects important, task-relevant words to build sentence representation with a two-level LSTM
    (2) Hierarchical Structured LSTM(HS-LSTM) –discovers phrase structures and builds sentence representation with a two-level LSTM.
    三个模型的工作机制:

三个模型各个分析:
晚饭时更新

  • 0
    点赞
  • 3
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值