这篇论文实现了不同难度问题的文本生成,即输入阅读理解的句子,生成规定难度的问题。实验结果通过BLEU指标评估,并且还要符合规定的难度标签。
Encoder 编码器
用的是双向的LSTM。
论文定义两个查找表,position embedding 分别是容易类: ,困难类:
Decoder 解码器
用的是Attention机制和Copy机制,其中创新点在于全局难度控制。
首先使用难度标签 d 去初始化隐藏层状态。可控难度的句子生成问题,定义为easy和hard两种模式。引入全局难度变量(a global difficulty variable)去控制文本生成。难度水平d 映射到对应的难度变量d,把编码器最终的隐含状态 和 d 连接在一起,去初始化解码器的隐含状态,即 。