- 博客(5)
- 收藏
- 关注
原创 关于自然语言处理(NLP)的个人学习资料
个人研究的各种乱七八糟无聊资料~:深入看过的论文:链接:https://pan.baidu.com/s/19mlS8eSY8vbzr96FPYfOvw提取码:vy3o 期待深入看的论文链接:https://pan.baidu.com/s/1-OT3c-xdKvxQGe_n8pMT7A提取码:kc1n BERT官方demo数据:链接:https://pan.b...
2018-11-27 13:15:45 2809
原创 基于深度self-attention的字符集语言模型(transformer)论文笔记
论文题目:Character-Level Language Modeling with Deeper Self-Attention论文地址:https://arxiv.org/abs/1808.04444v1摘要 LSTM和其他RNN的变体在字符级别的语言建模方面取得了很好的成功。这些模型一般情况下都会使用反向传播来进行训练,并通常把这些模型的成功归结与RNN结构的长时记忆能...
2018-11-23 14:15:26 3563
原创 什么是文本的词嵌入?
前言 词嵌入是单词的一种数值化表示方式,一般情况下会将一个单词映射到一个高维的向量中(词向量)来代表这个单词。例如我们将: ‘机器学习’表示为 [1,2,3] ‘深度学习‘表示为[2,3,3] ‘英雄联盟‘表示为[9,1,3] 对于词向量,我们可以使用余弦相似度在计算机中来判断单词之间的距离: ‘机器学习’与‘深度学习‘的距离:‘机器学习’与‘英雄...
2018-11-21 11:30:52 22222 2
原创 基于Attention的机器翻译模型,论文笔记
论文题目:Neural Machine Translation by Jointly Learning to Align and Translate论文地址:http://pdfs.semanticscholar.org/071b/16f25117fb6133480c6259227d54fc2a5ea0.pdfGIF来源:https://jalammar.github.io/visuali...
2018-11-19 13:51:33 17578 4
原创 【Language model】使用RNN LSTM训练语言模型 写出45°角仰望星空的文章
开篇这篇文章主要是实战内容,不涉及一些原理介绍,原理介绍为大家提供一些比较好的链接: 1. Understanding LSTM Networks :RNN与LSTM最为著名的文章,贴图和内容都恰到好处,为研究人员提供很好的参考价值。中文汉化版:(译)理解 LSTM 网络 (Understanding LSTM Networks by colah) 2.Recurren...
2018-11-16 22:03:54 1900 2
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人