lwgkzl的博客

原创 【BERT,GPT+KG调研】Pretrain model融合knowledge的论文集锦

总述： 本文调研近年来bert与knowledge的融合的工作， 对于每一篇工作， 大概的介绍他们融合knowledge的方式， 并且进行自己的点评。 文章列表： 1.Align, Mask and Select: A Simple Method for Incorporating Commonsense Knowledge into Language Representation Models arxiv 2019 主要目标： 把struct knowledge融合到bert的参数当中，...