04 大数据协作框架 - F/K/S/O/A
Sqoop/Flume/Kafka/Oozie/azkaban
YanLzh_MAlone
这个作者很懒,什么都没留下…
展开
-
0403-Sqoop笔记
0403-Sqoop笔记第一章 Sqoop简介第二章 Sqoop原理第三章 Sqoop安装3.1 下载解压3.2 修改配置文件 sqoop-env.sh3.3 拷贝JDBC驱动3.4 验证Sqoop3.5 测试Sqoop是否能够成功连接数据库第四章 Sqoop简单实用案例4.1 导入数据(RDBMS -> HDFS/HIVE/HBASE)4.1.1 RDBMS 到 HDFS4.1.2 RDB...原创 2019-12-10 16:28:25 · 114 阅读 · 0 评论 -
0402-Kafka笔记
0402-Kafka笔记第一章 Kafka概述1.1 Kafka 是什么1.2 Kafka 内部实现原理(消息队列的两种模式)1.2.1 点对点模式(一对一,消费者主动拉取数据,消息收到后消息清除)1.2.2 发布/订阅模式(一对多,消费者消费数据之后不会清除消息)1.3 为什么需要消息队列1.4 Kafka 架构第二章 Kafka 安装部署2.1 集群规划2.2 kafka集群部署2.3 kaf...原创 2019-12-10 15:16:14 · 121 阅读 · 0 评论 -
0401-Flume笔记
0401-Flume第一章 概述1.1 Flume定义1.2 Flume的优点1.3 Flume的组成1.3.1 Agent1.3.2 Source1.3.3 Channel1.3.4 Sink1.3.5 Event1.4 Flume的拓扑结构1.4.1 多flume串联1.4.2 单source,多channel、sink1.4.3 Flume负载均衡1.4.4 Flume Agent聚合1....原创 2019-12-08 23:06:27 · 206 阅读 · 0 评论