自定义博客皮肤

*博客头图:

格式为PNG、JPG,宽度*高度大于1920*100像素,不超过2MB,主视觉建议放在右侧,请参照线上博客头图

请上传大于1920*100像素的图片!

博客底图:

图片格式为PNG、JPG,不超过1MB,可上下左右平铺至整个背景

栏目图:

图片格式为PNG、JPG,图片宽度*高度为300*38像素,不超过0.5MB

主标题颜色:

RGB颜色,例如:#AFAFAF

Hover:

RGB颜色,例如:#AFAFAF

副标题颜色:

RGB颜色,例如:#AFAFAF

自定义博客皮肤

-+

NLP---text-RCNN

1. 简介 参考:(1) Recurrent Convolutional Neural Networks for Text Classification (2) https://zhuanlan.zhihu.com/p/55015587 (3) https://zhuanlan.zhihu.co...

2019-08-08 15:49:47

阅读数 34

评论数 0

NLP---textCNN

1. 原始 CNN 原理简介 参考:《Python 深度学习》 CNN:Convolutional Neural Network, 卷积神经网络,也叫 convnet. 卷积计算过程: 第一个feature map中[0,0]位置元素的计算过程: (000001001)∗(11−1...

2019-08-04 17:27:10

阅读数 22

评论数 0

NLP---BERT

参考:https://zhuanlan.zhihu.com/p/47488095 1. 简介 BERT:Bidirectional Encoder Representations from Transformers. 论文地址: 是一种预训练模型,充分的描述了字符级、词级、句子级甚至句间关系的...

2019-07-31 11:48:48

阅读数 28

评论数 0

NLP---关于自然语言

参考:百度百科 句法 研究句子的各个组成部分和它们的排列顺序。 语义 (semantic) 语言所蕴含的意义,语义具有领域性特征。

2019-07-29 15:49:15

阅读数 7

评论数 0

NLP---Transformer

参考:https://blog.csdn.net/han_xiaoyang/article/details/86560459 https://jalammar.github.io/illustrated-transformer/ 以下仅为个人学习笔记 1. 简介 Google于2017年在论文...

2019-07-26 15:12:30

阅读数 34

评论数 0

NLP---seq2seq与注意力机制

1. seq2seq 参考:https://jalammar.github.io/visualizing-neural-machine-translation-mechanics-of-seq2seq-models-with-attention/ 模型结构 seq2seq是一个“编码解码器”...

2019-07-26 13:58:52

阅读数 42

评论数 0

NLP---FastText

参考:https://blog.csdn.net/sinat_26917383/article/details/54850933 https://www.leiphone.com/news/201608/y8rhWEglraduqcOC.html 1. 简介 fastText是Facebook...

2019-07-23 14:00:42

阅读数 18

评论数 0

NLP---RNN & LSTM & GRU & BiRNN & BiLSTM

1. RNNs (Recurrent Neural Networks) 参考:https://blog.csdn.net/Jerr__y/article/details/58598296 https://www.yunaitong.cn/understanding-lstm-networks.h...

2019-07-22 11:03:39

阅读数 95

评论数 0

NLP--6--文本表示2

1. Word Embedding 参考:https://www.jianshu.com/p/2a76b7d3126b 1.1 基本概念 Word Embedding可以理解为一种映射,其过程是:将文本空间中的某个word,通过一定的方法,映射或者说嵌入(embedding)到另一个数值向量...

2019-07-20 18:46:37

阅读数 18

评论数 0

ML---逻辑回归

用途:是分类算法不是回归算法,用于二分类或多分类。回归模型的YYY是连续的,分类模型的YYY是离散的。 模型形式:hθ(X)=11+e−Xθh_{\theta}(X)=\frac {1}{1+e^{-X\theta}}hθ​(X)=1+e−Xθ1​ XXX:模型的特征输入,维度为m×nm\tim...

2019-07-17 14:10:11

阅读数 13

评论数 0

NLP--5--文本表示1

1. 文本表示 将字符表示的文本转变为计算机可以处理的向量表示。 2. 文本表示分类(基于表示方法) (1) 离散表示:one-hot表示,multi-hot表示 (2) 分布式表示: a. 基于矩阵(细节不清楚,需要补充,比如SVD):基于降维的方法,基于聚类的方法 b. 基于神经网络:CBOW...

2019-07-16 15:16:16

阅读数 12

评论数 0

NLP--4--条件随机场CRF

说明:这部分是统计自然语言处理中比较重要的部分,目前作为了解,会其意,有时间再补充细节,知其行。 条件随机场CRF,conditional random field。 CRF中的特征函数 CRF与逻辑回归的比较:条件随机场是逻辑回归的序列化版本。 CRF与HMM比较: (1)每一个HMM模型都等价...

2019-07-12 16:02:28

阅读数 20

评论数 0

NLP--3--隐马尔可夫模型HMM

说明:这部分是统计自然语言处理中比较重要的部分,目前作为了解,了解其思想,有时间再补充细节。 隐马尔可夫模型(Hidden Markov Model,HMM) 可见状态链 隐含状态链:隐含状态之间存在转换概率(transition probability),马尔科夫状态链指的是隐含状态链。 输出概...

2019-07-12 11:51:39

阅读数 23

评论数 0

NLP--2--语言模型

传统语言模型的两大缺点: 稀疏性和泛化能力差。 稀疏性问题: n-gram模型只能对文本中出现的单词或者单词组进行建模,当新的文本中出现意义相近但是没有在训练文本中出现的单词或者单词组的时候,传统离散模型无法正确计算这些训练样本中未出现的单词的应有概率,他们都会被赋予0概率预测值,虽然传统方法会引...

2019-07-07 18:45:15

阅读数 22

评论数 0

NLP--1--朴素贝叶斯

贝叶斯公式:P(Y∣X)=P(X∣Y)P(Y)P(X)P(Y|X) = \frac{P(X|Y)P(Y)}{P(X)}P(Y∣X)=P(X)P(X∣Y)P(Y)​ 联合概率公式:P(X,Y)=P(Y∣X)P(X)=P(X∣Y)P(Y)P(X,Y)=P(Y|X)P(X)=P(X|Y)P(Y)P(X,...

2019-07-04 10:42:42

阅读数 14

评论数 0

利用python进行数据分析---学习笔记

内省 在一个变量名或对象的前后使用?,可以显示关于该变量或对象的概要信息。

2019-05-07 13:18:10

阅读数 70

评论数 0

git 常用命令

在当前分支上建立新的分支 在工程目录下输入命令:git checkout -b newBranch 将修改在本地保存 git commit -a -m’remark’ 将本地更新提交到线上 git push 查看状态 git status 查看分支 git branch 将线上的最新状态拉下来 g...

2019-04-27 17:03:31

阅读数 26

评论数 0

Python基础语法

1. 接收输入 temp = input(“输入:”) 2. 字符串 初学者注意:python中两边可以使用单引号或双引号,前后一致即可。 原始字符串 string = r’C:\users’ print(string) 输出结果为: C:\users 三重双引号字符串 print(" ...

2019-04-26 16:39:51

阅读数 35

评论数 0

ML学习--随记

ML杂记 损失函数变化剧烈的原因: (1) 学习率选的太大; (2)batch_size太小; 尽量保证训练数据的分布与测试数据的分布一致。 tensorflow重要库函数: (1) tf.layers,现在常用的; (2) tf.contrib.layers.fully_connected()...

2019-04-26 16:39:29

阅读数 91

评论数 0

程序员励志名言警句

如果你不给自己设限,世界上便没有限制你发挥的篱笆。

2017-10-12 13:54:09

阅读数 3877

评论数 0

提示
确定要删除当前文章?
取消 删除