- 博客(7)
- 资源 (2)
- 收藏
- 关注
原创 HDFS读写流程
为了更好地理解HDFS读写流程,下面主要以漫画的形式进行的叙述。一、HDFS写的流程1、HDFS主要组成(主要了解hadfs构成及其担任的工作)client:客户端(主要发起读和写),可以在javaapi操作,也可以hdfs shell中操作namenode:全局把控datanode:存储数据2、数据分块默认的情况下,客户端知道一个blocksize是多大和有几个block的副本。...
2019-03-31 15:44:27 292
原创 mysql基础(增删查改)
!!!!!本文针对数据库基础很差的人讲解的,最简单的sql用法和数据库常听说的三范式。!!!!!!!1一、数据库的三范式第一范式:1NF数据表的每一项都是不可分割的院子数据项,不能是集合、数组和记录等。第二范式:2NF在1NF的基础上,非主属性必须安全依赖于候选码。(在1NF基础上消除非主属性对主码的部分函数依赖)3NF在2NF的基础上,任何非主属性不依赖与其它非主属性。(非主属性不...
2019-03-29 21:05:45 238
原创 java基础(二)
一、 java的四个关键字java的四个关键字:public、protected、default、private(他们决定了紧跟其后被定义的东西可以被谁使用)适用范围<访问权限范围越小,安全性越高>访问权限 类 包 子类 其他包public ∨ ∨ ∨ ∨ (对任何人都是可用的)protect ∨ ∨ ∨ ...
2019-03-28 22:53:32 111
原创 hadoop搭建伪分布式
1、需要的工具centos7winscp(使用它上传jdk和hadoop的压缩包)putty(远程登录linux)jdk-7u80-linux-x64.tar.gzhadoop-2.6.0-cdh5.7.0.tar.gz(这里的hadoop使用的cdh,现在企业大部分使用这个)虚拟机vmvare14.X2、虚拟机配置https://www.jb51.net/article/1188...
2019-03-26 15:30:34 197
原创 mysql
一、mysql遇到的坑之前安装的是mysql的5.7的版本,但是mysql server老是启动不了,当你用它的时候,server就无法启动。当你好几天不用它再打开它的时候,自己记好了。查了很多资料,网上都说mysql下没有data和my.ini(配置文件)。于是从网上按照教程修改,修改了也没有用。最后查看自己的服务,服务下边连mysql的服务也没有,谈何启动mysqlserver。于是决定卸...
2019-03-25 15:58:15 114
原创 云服务器搭建hadoop需要注意问题
一、前言第一次接触hadoop,hadoop单机、伪分布和完全分布模式。看了资料查了书都是在linux上搭建的,而且都是在虚拟机搭建。但是由于自己对linux不熟悉,所以想在win搭建。正好看的书是在win下搭建的,结果准备去搭建环境。你会发现win下几乎没法完成工作的,很多的开发都是在linux下完成的。至于大数据的hadoop到底是什么,可能现在来看就是分布式存储的一个平台,hadoop的现...
2019-03-25 15:55:23 1260 4
原创 java基础(一)
一、输入输出1)输入Scanner input=new Scanner(System.out.println);//实例化一个从控制台输入对象input。例如:从控制台输入int aint a=input.nextint()需要的数据类型不同,那么next后面跟的也就不同。nextint—>整数就是intnextLine–>字符串2)输出System,out.pri...
2019-03-22 20:11:06 125
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人