分布式框架之 Hadoop
文章平均质量分 92
cris_zz
好事尽从难处得,少年无向易中轻
展开
-
Cris 玩转大数据系列之 Hadoop HA 实现
Cris 的 Hadoop HA 学习笔记 Author:Cris 文章目录Cris 的 Hadoop HA 学习笔记Author:Cris零、序1. Hadoop 实现 HA 原理1.1 什么是 HA?1.2 HA 工作机制2. HDFS-HA 手动故障转移(了解)2.1 要点2.2 环境准备2.3 测试集群规划2.4 配置 HDFS-HA 集群2.5 启动 HDFS-HA 集群2.6 手动模拟...原创 2018-11-11 18:00:57 · 237 阅读 · 0 评论 -
Cris 玩转大数据系列之任务流神器 Azkaban
Cris 玩转大数据系列之 Azkaban Author:Cris 文章目录Cris 玩转大数据系列之 AzkabanAuthor:Cris1. 概述1.1 为什么需要工作流调度系统?1.2 引入 Azkaban 的场景1.3 什么是 Azkaban ?1.4 Azkaban 的特点1.5 常见工作流调度系统1.6 Oozie 和 Azkaban 特性对比1.7 Azkaban 的架构1.8 Az...原创 2018-11-19 23:59:31 · 639 阅读 · 0 评论 -
Cris 玩转大数据之分布式服务协调神器 ZooKeeper
Cris 的ZooKeeper学习日记 Author:Cris 文章目录Cris 的ZooKeeper学习日记Author:Cris1、安装 ZooKeeperⅠ. 解压Ⅱ、配置环境变量(可选)ⅲ、修改配置文件以及同步Ⅳ、ZooKeeper集群搭建以及集群脚本编写2、客户端操作 ZooKeeper①、命令行操作②、IDEA 客户端连接 ZooKeeper3. 监听服务器节点动态上下线案例 1、安装...原创 2018-11-10 11:45:59 · 493 阅读 · 0 评论 -
Cris 小哥哥的大数据项目之 Hive 统计 YouTube 热门视频
Cris 的大数据项目之 Hive 统计 YouTube 热门视频 Author:Cris 文章目录Cris 的大数据项目之 Hive 统计 YouTube 热门视频Author:Cris1. 项目需求2. 表结构和 ETL2.1 表结构2.2 ETL 原始数据2.3 开启 IDEA 完成 ETL 代码- Mapper 阶段- EtlStringUtil- Driver- 测试3. 服务器完成 E...原创 2018-11-17 22:07:40 · 1908 阅读 · 1 评论