- 博客(3)
- 收藏
- 关注
RSS订阅原创 GPT2.0 Language Models are Unsupervised Multitask Learners 论文解读
转载请注明出处，原文地址本文是对《Language Models are Unsupervised Multitask Learners》的翻译，部分内容可能会存在理解错误，如有错误欢迎指正交流。简介在自然语言处理任务中，如QA、机器翻译、阅读理解、文本摘要、都是在特定数据集上的典型的监督学习任务。我们的模型在一个数百万级别的WebText的数据集上进行非监督训练后，来验证这些NLP任务。当...
2019-02-22 17:40:34
11474
1
原创 使用BERT生成句向量
转载请注明出处，原文地址在阅读本文之前如果您对BERT并不了解，请参阅我的其他博文BERT完全指南简介之前的文章介绍了BERT的原理、并用BERT做了文本分类与相似度计算，本文将会教大家用BERT来生成句向量，核心逻辑代码参考了hanxiao大神的bert-as-service，我的代码地址如下：代码地址：BERT句向量传统的句向量对于传统的句向量生成方式，更多的是采用word emb...
2019-02-19 11:41:39
35938
73
原创 BERT原理详解
转载请注明出处，原文地址简介之前的文章从attention讲解到了transformer，本文将会针对目前大热的BERT进行讲解，bert的内部结构主要是transformer，如果您对transformer并不了解，请参阅我之前的博文。从创新的角度来看，bert其实并没有过多的结构方面的创新点，其和GPT一样均是采用的transformer的结构，相对于GPT来说，其是双向结构的，而GPT...
2019-02-18 18:45:52
14627
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人