
Hadoop
Hadoop
Matrix 工作室
为天地立心,为生民立命,为往圣继绝学,为万世开太平。
展开
专栏收录文章
- 默认排序
- 最新发布
- 最早发布
- 最多阅读
- 最少阅读
-
将文件从HDFS复制到本地
hadoop fs -get hdfs://host:port/user/hadoop/file localfile原创 2021-07-05 18:01:28 · 3912 阅读 · 3 评论 -
MapReduce不同进度的Reduce都在干什么
reduce: 0-33% 是shuffle阶段。这个阶段将mappers中的数据转移到reducers中。reduce: 33%-67% 是sort阶段。这个阶段必须在mappers完成之后。reduce: 67%-100% 是实际运行 reduce 代码的阶段。每次reduce任务完成时,该百分比都会上升。...原创 2021-06-22 17:54:53 · 548 阅读 · 0 评论