- 博客(10)
- 收藏
- 关注
RSS订阅原创 tensorflow实战四
tensorflow实战四概述网络结构代码实现结果和小结概述本篇博文利用mnist数据集，利用一个简单的卷积神经网络识别手写数字。正确率比一般神经网络高很多。网络结构本博文使用了一个简单的卷积神经网络结构，其网络结构如下：图只能截这么大了，下面来段文字描述：整个网络由输入层、两个卷积层、两个池化层、一个全连接层、输出层组成。卷积核大小为55，池化采用最大值池化。两个reshape需要特...
2019-01-03 19:46:55
162
原创 tensorflow实战二
tensorflow实战二概述代码实现结果和小结概述本篇博文利用mnist数据集，利用最简单的单层神经网络识别手写数字。代码实现本博文使用了最简单的单层神经网络结构，输入层有784个输入神经元，输出层有10个神经元，采用one_hot形式读入数据。话不多说，直接上代码#-*- coding: utf-8 -*-import tensorflow as tffrom tensorfl...
2018-12-13 12:08:32
111
原创 tensorflow实战一
tensorflow实战一概述构建并运行一个基本图变量和变量赋值feed和fetch一个简单回归模型训练小结概述本来笔者想从tensorflow的基础概念开始写起，后来感觉还是边写代码边学概念来的靠谱，下面开始首次学习。构建并运行一个基本图tensorflow中的运算被组织成一个有向无环图。图的每个节点是一次操作，这样一个图在构成的时候是一个静态图，并没有数据流动。图要在session中被...
2018-12-12 12:09:40
150
原创 window下Hadoop安装
安装前提：配置有Java的JDK1.8Windows下Hadoop安装分为三步解压Hadoop安装包本次我们在dockers集群上搭建的是Hadoop2.7.1版本，Windows选择2.7.x版本即可。Hadoop的官网下载地址 http://hadoop.apache.org/releases.html ，选择2.7.1版本下载并解压到本地。下载Hadoop的Windows支持由于H...
2018-11-02 15:56:02
166
原创 那些年Hadoop上传下载文件遇到的坑
坑一：报错用户不具有权限Permission denied: user=windows, access=WRITE, inode="/":hadoop:supergroup:drwxr-xr-x在Hadoop的hdfs-site.xml 中设置安全权限关闭，但是这是极为不安全的操作，正常还是应该去设置每个用户的权限滴。关闭的代码如下：<property> <nam...
2018-10-29 19:23:51
1405
原创 浅谈Hadoop的小发展
浅谈Hadoop的小发展遥想十多年前国内IT圈还不知道什么是Hadoop，现如今，几乎所有的互联网企业都拥有了自己的Hadoop集群，人们提起大数据，就会想起Hadoop，Hadoop俨然成为了大数据时代的代名词。楼主就不再赘述Hadoop啦，今天楼主尽量用大白话带着大家了解它的不足之处以及大佬们是如何改进的。不足之处随着计算机硬件的发展，存储介质不再是掣肘大数据发展的因素，大数据越来...
2018-09-16 18:07:40
737
原创 操作系统概述（一）
众所周知，操作系统真的是一门很重要的基础课，今天特来总结重温一下都学了点啥~总述操作系统是处于计算机硬件和应用软件以及用户之间的一种“中介”，以便能更加合理的调用资源。我们常用的操作系统当属Windows和Linux。OS要管理计算机的五大部件（运算器、控制器—CPU进程管理，存储器—内存管理、文件系统，输入/输出设备—I/O系统）。进程管理进程通俗的理解就是计算机在执行的程序...
2018-09-14 21:04:45
150
原创 Hbase学习（一）零基础开始学习
hbase是谷歌bigdata论文的一个代码实现，hbase是开源软件，在大数据处理领域应用广泛。今天楼主先来介绍一些基本原理，后面用工程代码方式来叙述API的用法。楼主是新手，如有错误，欢迎大家指正。简介Hbase（Hadoop database）是一个高可靠性（数据存储在HDFS文件存储系统上，十分可靠，有机会楼主再写HDFS的博文）、高性能（传统单机数据库在数据量高于百万数量级后...
2018-08-17 19:00:23
2465
1
原创 对Online Aggregation for Large MapReduce Jobs理解
最近在研读有关在线聚集的论文，粘出一些自己的理解和大家分享，有理解不当之处，还请各位指正。本文是对Online Aggregation for Large MapReduce Job文章的理解。背景知识Mapreduce模型是大数据处理的一个重要模型，它处理速度快，节点可伸缩，但仍然有其缺陷。一般认为它只适合线下任务，不适合线上任务。因为其只有在处理完全部数据之后才能得到最终结果，用户是无...
2018-08-16 11:13:28
250
原创 vmware12+centos7+hadoop12.7.3+hbase1.3.2(单机版）
先前准备首先下载好所需的文件 1、下载centos7，官网上的镜像文件速度还可以，我在官网下载的centos7下载链接 2、下载HbaseHbase1.3.2下载地址 3、下载HadoopHadoop2.7.3下载地址安装和配置centos7本次安装目的是一个图形化的开发界面。1、安装过程可借鉴如下教程vmware下安装centos7 我们的安装与之略有差异，在...
2018-08-13 15:30:07
393
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人