/* 版权声明:可以任意转载,转载时请标明文章原始出处和作者信息 .*/
author: 张俊林
注:本文是《深度学习解决机器阅读理解任务的研究进展》节选,该文将于近期在“深度学习大讲堂”公众号发布。
2.1文章和问题的表示方法
用神经网络处理机器阅读理解问题,首先面临的问题就是如何表示文章和问题这两个最重要的研究对象。我们可以从现有机器阅读理解相关文献中归纳总结出常用的表示方法,当然这些表示方法不仅仅局限于阅读理解问题,也经常见于NLP其他子领域中。
图4.文档表示方法:模型一
首先,对于机器阅读理解中的文章来说,有两种常见的文章内容表达方式。最常见的一种即是将一篇文章看成有序的单词流序列(参考图4的模型一),在这个有序序列上使用RNN来对文章进行建模表达,每个单词Dt