- 博客(7)
- 资源 (3)
- 收藏
- 关注
RSS订阅原创 Hadoop集群实现HA
软件版本：CentOS 6.7 jdk-8u171-linux-x64.tar.gz zookeeper-3.4.12.tar.gz hadoop-2.7.4-with-centos-6.7.tar.gz一、集群部署节点角色的规划1、集群部署节点角色的规划（7节点） node01 namenode zkfc node02 namenode zkfc...
2018-08-27 22:47:58
323
原创 master.HMasterCommandLine: Master exiting
2018-08-20 00:59:33,382 ERROR [main] master.HMasterCommandLine: Master exitingjava.io.IOException: Could not start ZK at requested port of 2181. ZK was started at port: 2182. Aborting as clients (...
2018-08-27 22:10:12
9580
原创 Zookeeper集群搭建
软件版本：CentOS 6.7 jdk-8u171-linux-x64.tar.gz zookeeper-3.4.12.tar.gz一、Zookeeper完全分布式集群搭建1、安装JDK1.1、解压JDK：tar -zxvf jdk-8u171-linux-x64.tar.gz -C /export/server/1.2、配置JDK环境变量：export JAVA_HO...
2018-08-27 21:47:30
321
原创 Collection集合总结
Collection接口继承体系图 Collection接口常用方法返回值类型 方法 解释 boolean add(E e) 向列表的尾部添加指定的元素（可选操作） boolean addAll(Collection<? extends E> c) 将指定 collection 中的所有元素都添加到此 collection...
2018-08-09 22:20:41
2276
转载 通过漫画轻松掌握HDFS工作原理
转 通过漫画轻松掌握HDFS工作原理 &amp;lt;div class=&quot;article-info-box&quot;&amp;gt; &amp;lt;div class=&quot;article-bar-top d-
2018-08-08 23:35:00
369
原创 Hadoop中分片split的原理解析
一、定义1、block：block是物理切块，在文件上传到HDFS文件系统后，对大文将以每128MB的大小切分若干，存放在不同的DataNode上；2、split：split是逻辑切片，在mapreduce中的map task开始之前，将文件按照指定的大小切割成若干个部分，每一部分称为一个split，默认是split的大小与block的大小相等，均为128MB。注意：在hadoop1....
2018-08-06 19:53:33
4255
原创 Hadoop2.7.4完全分布式环境搭建
软件版本虚拟机管理软件：VMware WorkStation Pro 12.0 操作系统：CentOS 6.7 Hadoop：Hadoop 2.7.4 JDK：jdk-8u65-linux-x64.tar.gz一、环境准备1、修改各个节点主机名：vi /etc/sysconfig/networkNETWORKING=yesHOSTNAME=node12、修改主机名和I...
2018-08-03 01:29:52
1352
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人