![](https://img-blog.csdnimg.cn/20201014180756925.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
tensorflow
文章平均质量分 60
xuke100
主要从事云桌面开发
展开
-
onehot和tensorflow中的embedding_lookup有什么关系,为什么词向量会在每一次训练迭代时更新
onehot和embedding_lookup的关系,可以参考这里 主要讲一下,为什么每一次训练迭代,词向量就会更新一次:embedding_lookup不是简单的查表,id对应的向量是可以训练的,训练参数个数应该是 category num*embedding size,也就是说lookup是一种全连接层。啥意思? 1.先解释一下onehot: onehot:onehot是...原创 2018-06-13 11:37:20 · 3482 阅读 · 2 评论 -
Tensorflow中RNN/LSTM内部具体是如何处理数据的,batch、num_steps是如何被丢尽网络里,训练的流程
在学习Tensorflow的源码时发现一个很重要的现象,就是tensorflow在训练RNN/LSTM的机制,因为这两种网络被常常用于NLP方面,所以这里就拿NLP举例子。承接上一篇:Tensorflow中的词向量我提到了Tensorflow中的词向量的表达方式,那么在LSTM中,一句话比如5个单词,按照词向量,就是一个3维的矩阵[[词1对应的词向量],[词2对应的词向量],[词3对应的词向量],...原创 2018-06-14 19:32:42 · 5082 阅读 · 1 评论