![](https://img-blog.csdnimg.cn/20201014180756928.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
tensorflow
tensorflow 使用相关问题
微知girl
我是NLP相关方向研究生,小白一枚,梦想自己有一天能混成业界大牛,文章或代码有任何错误欢迎指出,不胜感激~ 如果觉得对您有用请关注点赞,(#^.^#) 希望大家能一起探讨相关方面问题,互相学习,互相进步,(●'◡'●)~~
展开
-
tensorflow session.run()
1. 简单说一下,session.run(),需要几个参数,fetches,feed_dict,前者是输出,后者是输入。tf有个特点,是在模型中定义所有的张量,铺出一张图,session.run才会真正计算,这里fetches参数中包含的内容就是需要进行计算的变量。举个例子:loss = session.run(fetches=[ model.loss], feed_dict={ model.inpu...原创 2021-02-20 18:56:29 · 1391 阅读 · 0 评论 -
深度学习之dropout
本来想写一篇dropout的文章,有人写的很好了,我就直接借鉴了先上链接:https://blog.csdn.net/program_developer/article/details/80737724但是文章中有一个地方说的有点混乱,测试集缩放概率问题,重新理一下:dropout,防止过拟合,还可以提高训练速度。加入dropout的概率为p,就是神经元以p的概率失活,相当于比如p设定为0.4,那100个节点会有40个节点失活,不参与训练。简单说一下逻辑:1.定义dropou..原创 2020-12-28 14:52:31 · 1640 阅读 · 0 评论 -
TensorFlow 参数初始化方法
一、tf.truncated_normal_initializer初始化为正太分布1. tf.truncated_normal_initializertf.truncated_normal_initializer的意思是:从截断的正态分布中输出随机值。生成的值服从具有指定平均值和标准偏差的正态分布,如果生成的值大于平均值2个标准偏差的值则丢弃重新选择。ARGS:mean:一个python标量或一个标量张量。要生成的随机值的均值。stddev:一个python标量或一个标量张量。要生成的.原创 2021-02-20 18:02:41 · 1995 阅读 · 2 评论 -
tf.stop_gradient
详细可以参见链接:关于tf.stop_gradient的使用及理解 关于stop_gradient有时候我们其实不希望某些参数进行反向传播,这时候可以用这个函数,引入stop_gradient来对从loss到target net的反传进行截断。目的主要是在计算loss的时候,只对一部分进行权重更新...原创 2021-02-08 13:56:47 · 2058 阅读 · 0 评论 -
tensorflow
Tensotflow1.0入门(八)-tensorflow源代码目录结构谢小小XH的TensorFlow专题https://www.cnblogs.com/wuzhitj/p/6648585.htmlgoogletensorflow教程TensorFlow学习(十三):构造LSTM超长简明教程解决tensorflow会话结束后,GPU资源不释放Tensorflow一些常用基本概念与函数(二)...原创 2021-01-12 14:35:08 · 82 阅读 · 0 评论