大数据之Mapreduce—239人已学习
课程介绍
MapReduce是一种编程模型,用于大规模数据集(大于1TB)的并行运算。概念"Map(映射)"和"Reduce(归约)",是它们的主要思想,都是从函数式编程语言里借来的,还有从矢量编程语言里借来的特性。它极大地方便了编程人员在不会分布式并行编程的情况下,将自己的程序运行在分布式系统上。
课程收益
掌握Mapreduce
讲师介绍
李强强 更多讲师课程
云知梦创始人,国际架构师,11年互联网培训和开发经验,曾在港电讯盈科、北大青鸟集团、远大教育、北京易第优教育等公司任职曾获得美国红帽RHCA构架师和RHCDS数据中心讲师,在国内排名第40名,在全球排名第300名。
课程大纲
第1章:大数据Mapreduce
1. MapReduce入门案例 41:16
2. 远程运行调试MapReduce 25:15
3. MapReduce task考察示例 36:03
4. MR调用过程分析、单词统计案例 21:20
5. 切片和任务数 25:28
6. 自定义分区与Combiner 31:40
7. 输入格式 39:23
8. 输出格式 11:17
9. Yarn资源调用框架、部分排序 20:42
10. 全排序 28:35
11. 二次排序 31:31
12. 连接操作 40:01
13. 链条 10:35
14. Hadoop补充 13:09
15. Avro入门 26:06
16. 使用avro完成MapReduce作业 14:02
17. Protobuf介绍 33:40
大家可以点击【 查看详情】查看我的课程
课程介绍
MapReduce是一种编程模型,用于大规模数据集(大于1TB)的并行运算。概念"Map(映射)"和"Reduce(归约)",是它们的主要思想,都是从函数式编程语言里借来的,还有从矢量编程语言里借来的特性。它极大地方便了编程人员在不会分布式并行编程的情况下,将自己的程序运行在分布式系统上。
课程收益
掌握Mapreduce
讲师介绍
李强强 更多讲师课程
云知梦创始人,国际架构师,11年互联网培训和开发经验,曾在港电讯盈科、北大青鸟集团、远大教育、北京易第优教育等公司任职曾获得美国红帽RHCA构架师和RHCDS数据中心讲师,在国内排名第40名,在全球排名第300名。
课程大纲
第1章:大数据Mapreduce
1. MapReduce入门案例 41:16
2. 远程运行调试MapReduce 25:15
3. MapReduce task考察示例 36:03
4. MR调用过程分析、单词统计案例 21:20
5. 切片和任务数 25:28
6. 自定义分区与Combiner 31:40
7. 输入格式 39:23
8. 输出格式 11:17
9. Yarn资源调用框架、部分排序 20:42
10. 全排序 28:35
11. 二次排序 31:31
12. 连接操作 40:01
13. 链条 10:35
14. Hadoop补充 13:09
15. Avro入门 26:06
16. 使用avro完成MapReduce作业 14:02
17. Protobuf介绍 33:40
大家可以点击【 查看详情】查看我的课程