![](https://img-blog.csdnimg.cn/20201014180756925.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
MapReduce
文章平均质量分 52
无
zhzsdiligence
这个作者很懒,什么都没留下…
展开
-
Hadoop_MapReduce
1. 初始mapreduce1.1 MR的思想转载 2021-10-05 14:45:49 · 131 阅读 · 0 评论 -
MapReduce 高级
1. MapReduce Counter 计数器转载 2021-10-21 17:44:27 · 66 阅读 · 0 评论 -
MapReduce代码和优化
1. IDEA 配置2. Job 类2.1 Job.waitForCompletion2.2 Job. submitsubmit():总共可分为两大步:第一步是和集群进行连接,第二步是往集群提交作业。connect() 就是为了与集群进行连接,底层使用了RPC协议,针对本地集群和Yarn集群两个不同的集群,给我们封装了localJobRunner和YARNRunner,两个真正的与集群通信的客户端。连接后,就可以提交作业了3. Ma..转载 2021-10-25 16:11:17 · 77 阅读 · 0 评论 -
MapReduce 优化
Reduce 阶段梳理转载 2021-12-06 22:44:42 · 84 阅读 · 0 评论