Hadoop
文章平均质量分 88
分享hadoop学习内容
皮皮皮皮皮皮皮卡乒
Java编程爱好者,在CSDN和大家一起进步,互相交流分享学习。
展开
-
Hadoop核心之MapReduce案例总结Ⅱ
1. Reduce Join案例2. Map Join案例3. 数据清洗(ETL)原创 2022-11-05 16:10:14 · 1231 阅读 · 19 评论 -
Hadoop核心之MapReduce框架总结Ⅲ
4. MapReduce内核源码解析4.1 MapTask工作机制4.2 ReduceTask工作机制4.3 ReduceTask并行度决定机制4.4 MapTask & ReduceTask源码解析5. Join应用5.1 Reduce Join5.2 Map Join6. 数据清洗(ETL)原创 2022-11-04 16:58:58 · 315 阅读 · 0 评论 -
Hadoop核心之MapReduce案例总结
MapReduce程序案例原创 2022-11-03 22:05:32 · 1208 阅读 · 0 评论 -
Hadoop核心之MapReduce框架总结Ⅱ
3. MapReduce框架原理3.1 InputFormat数据输入3.1.1 切片与MapTask并行度决定机制3.1.2 FileInputFormat切片机制3.1.3 CombineTextInputFormat切片机制3.2 MapReduce工作流程3.3 Shuffle机制3.3.1Shuffle机制流程3.3.2Partition分区3.3.3 WritableComparable排序原创 2022-11-03 21:37:20 · 322 阅读 · 0 评论 -
Hadoop核心之MapReduce框架总结Ⅰ
1. MapReduce概述1.1 MapReduce定义1.2 MapReduce优缺点1.3 MapReduce核心思想1.4 MapReduce进程1.5 MapReduce编程规范2.Hadoop序列化2.1 序列化概述2.2 自定义bean对象实现序列化接口(Writable)原创 2022-11-01 21:29:20 · 730 阅读 · 0 评论 -
大数据技术之Hadoop(HDFS知识回顾)
HDFS概述---HDFS产生背景以及定义------HDFS优缺点------HDFS组成架构---HDFS常用shell操作命令---HDFS上传操作命令------HDFS下载操作命令------HDFS直接操作命令---HDFS的API操作HDFS读写流程---HDFS写入数据流程------HDFS读取数据流程---原创 2022-10-24 19:00:44 · 207 阅读 · 0 评论