![](https://img-blog.csdnimg.cn/20201014180756925.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Hadoop
Hadoop
大风车滴呀滴溜溜地转
为天地立心,为生民立命,为往圣继绝学,为万世开太平。
展开
-
将文件从HDFS复制到本地
hadoop fs -get hdfs://host:port/user/hadoop/file localfile原创 2021-07-05 18:01:28 · 3814 阅读 · 3 评论 -
MapReduce不同进度的Reduce都在干什么
reduce: 0-33% 是shuffle阶段。这个阶段将mappers中的数据转移到reducers中。reduce: 33%-67% 是sort阶段。这个阶段必须在mappers完成之后。reduce: 67%-100% 是实际运行 reduce 代码的阶段。每次reduce任务完成时,该百分比都会上升。...原创 2021-06-22 17:54:53 · 472 阅读 · 0 评论