- 博客(6)
- 收藏
- 关注
原创 【Spark入门】2、Spark编写软件——IDEA的安装与长期使用
说来不怕被笑,我安装和破解了两天。。一、安装1、官网下载https://www.jetbrains.com/idea/download/#section=windows2、双击exe文件,傻瓜式安装便可。本人参照https://www.cnblogs.com/mfcfine/p/9127880.html进行安装的,详细可借鉴。3、双击快捷键便可使用。4、汉化...
2019-06-13 16:09:49 389
原创 【Spark入门】1、Spark在windows下的环境搭建(包含jdk、scala、spark、hadoop的安装和配置)
本电脑之前未安装过相关的任何软件,比如scala、jdk、hadoop、spark之类的都没安装过。本教程正是在尝试安装的过程中记录的,本人健忘+很菜,怕后期把电脑弄崩溃了还得重新搭建,故提前记录好。一、安装JDK1、JDK下载地址:(jdk开源且免费,故可从官网直接下)http://www.oracle.com/technetwork/java/javase/download...
2019-06-10 10:26:19 752 1
原创 【tensorflow入门】15、神经网络中变量的存储和读取---saver+restore
tensorflow中允许将训练的variable存储起来,下次读取并接着训练。存储saver:import tensorflow as tfimport numpy as np #使用numpy代码会省事些#Save to file#remember to define the same dtype and shape when restoreW = tf.Variable(...
2019-06-05 08:11:53 557
原创 【tensorflow入门】14、卷积神经网络CNN
本文代码使用CNN实现MNIST手写数字识别问题,并统计准确率。本次几乎没踩雷,只是起初搭建的全连接层中神经元个数太多,cpu带不起来,出现一片黄色警告。心得:可改代码把数据减少。其实也该研究下gpu的使用了。代码:import tensorflow as tffrom tensorflow.examples.tutorials.mnist import input_...
2019-06-04 16:54:05 160
原创 【tensorflow入门】13、dropout解决过拟合overfit
内心os:后期还需补代码。一、使用原因: 当训练集不足够大时,过度学习会导致学习到的模型对本数据集几乎100%契合,但对别的符合条件的数据却无法get到。训练深度神经网络的时候,总是会遇到两大缺点:(1)容易过拟合(2)费时Dropout可以比较有效的缓解过拟合的发生,在一定程度上达到正则化的效果。二、dropout:其实就是让一部分神经元停止工作,避免神经网络获得...
2019-06-04 10:17:59 579
原创 【tensorflow入门】12、分类学习classification--使用MNIST数据集
完整代码在下方。一、介绍:分类入门,使用全连接神经网络,仅有输入层和输出层,准确率暂时仅86%左右。后续文章会推出更高准确率的方法:包括但不限于 全连接方法的优化、使用卷积神经网络等。二、思路:之前的代码都是解决回归问题的,从本文开始研究分类问题。回归是得到一个具体的数,分类是得到多个概率。导入MNIST数据,输入的数据为28*28像素的小图片,输出为0-9这10...
2019-06-03 11:12:32 365
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人