阅读论文《Difficulty Controllable Generation of Reading Comprehension Questions》

这篇论文实现了不同难度问题的文本生成,即输入阅读理解的句子,生成规定难度的问题。实验结果通过BLEU指标评估,并且还要符合规定的难度标签。

Encoder 编码器

用的是双向的LSTM。

论文定义两个查找表,position embedding 分别是容易类:(p^{e}_{0}, p^{e}_{1}, p^{e}_{2}, ... , p^{e}_{L}) ,困难类:(p^{h}_{0}, p^{h}_{1}, p^{h}_{2}, ... , p^{h}_{L})

Decoder 解码器

用的是Attention机制和Copy机制,其中创新点在于全局难度控制。

首先使用难度标签 d 去初始化隐藏层状态。可控难度的句子生成问题,定义为easy和hard两种模式。引入全局难度变量(a global difficulty variable)去控制文本生成。难度水平d 映射到对应的难度变量d,把编码器最终的隐含状态 h_{m} 和 连接在一起,去初始化解码器的隐含状态u_{0},即u_{0}=[h_{m}; d] 。

 

 

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值