02 大数据开发核心技术 - Hadoop
HDFS
MapReduce
YARN
Zookeeper
Hadoop HA
YanLzh_MAlone
这个作者很懒,什么都没留下…
展开
-
0201-HDFS
day01 HDFS第一章 HDFS概述1.1 HDFS产出的背景及定义1.1.1 HDFS 产生背景1.1.2 HDFS 定义1.2 HDFS优缺点1.2.1 优点1.2.3 缺点1.3 HDFS 组成架构1.4 HDFS 文件块大小第二章 HDFS的shell操作第三章 HDFS客户端操作3.1 HDFS的API操作3.1.1 HDFS文件下载3.1.2 HDFS文件下载3.1.3 HDFS文...原创 2019-12-02 22:08:41 · 947 阅读 · 0 评论 -
0202-MapReduce
day02 MapReduce第一章 MapReduce概述1.1 MapReduce定义1.2 MapReduce优缺点1.2.1 优点1.2.2 缺点1.3 MapReduce核心思想1.4 MapReduce进程1.5 WordCount源码1.6 常用数据序列化类型1.7 MapReduce编程规范1.8 WordCount案例实操第二章 Hadoop序列化2.1 序列化概述2.1.1 什...原创 2019-12-04 16:36:41 · 297 阅读 · 0 评论 -
0203-YARN
@原创 2019-12-04 17:56:11 · 157 阅读 · 0 评论 -
0204-Zookeeper
day04 Zookeeper第一章 Zookeeper入门1.1 概述1.2 特点1.3 数据结构1.4 应用场景第二章 Zookeeper安装2.1 本地模式安装部署2.2 配置参数解读2.2 分布式安装部署第三章 Zookeeper实战3.1 客户端命令操作3.2 API应用3.3 监听服务器节点动态上下线案例第四章 Zookeeper内部原理4.1 节点类型4.2 stat结构体4.3 监...原创 2019-12-05 13:39:29 · 150 阅读 · 0 评论 -
0205-Hadoop HA
day05 Hadoop HA第一章 HA概述第二章 HDFS-HA工作机制2.1 HDFS-HA 工作要点2.2 HDFS-HA自动故障转移工作机制第三章 HDFS-HA集群配置3.1 环境准备3.2 集群规划3.3 配置zookeeper集群3.4 配置HDFS-HA集群3.5 启动HDFS-HA集群3.6 配置HDFS-HA自动故障转移第四章 YARN_HA集群配置第五章 HDFS Fede...原创 2019-12-05 15:08:01 · 140 阅读 · 0 评论 -
0206-Hadoop完全分布式安装部署
1. 编写集群分发脚本xsync 在/home/yanlzh目录下创建bin目录,并在bin目录下xsync创建文件,文件内容如下: [yanlzh@node11 ~]$ mkdir bin [yanlzh@node11 ~]$ cd bin/ [yanlzh@node11 bin]$ touch xsync [yanlzh@node11 bin]$ vi xsync 在该文件中编写如下代...原创 2019-12-06 00:02:29 · 93 阅读 · 0 评论