![](https://img-blog.csdnimg.cn/20201014180756738.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
Hadoop
旋奘
这个作者很懒,什么都没留下…
展开
-
Shuffle的过程作用详解
shuffle shuffle过程中的几个名词:shuffle:洗牌;spill:溢出;combiner:合成;merge:融入混合;copy:复制 shuffle的使用地点:发生在map task输出结果传送到reduce task 输入的阶段 使用shuffle的好处:在从map task端拉取数据到reduce task端时,减少宽带的消耗, 将数据完整的从map task端拉取数据到re...转载 2020-04-12 19:08:11 · 3388 阅读 · 0 评论 -
Windows下配置Hadoop环境详解
首先到官方下载官网的hadoop2.7.7,链接如下 https://mirrors.tuna.tsinghua.edu.cn/apache/hadoop/common/ 找网盘的hadooponwindows-master.zip 链接如下 https://pan.baidu.com/s/1vxtBxJyu7HNmOhsdjLZkYw 提取码:y9a4 把hadoop-2.7.7.tar.gz解...转载 2020-04-10 10:19:44 · 608 阅读 · 0 评论 -
Exception in thread "main" java.lang.UnsatisfiedLinkError: org.apache.hadoop.io.nativeio.NativeIO$Wi
win10配置hadoop的时候原创 2020-04-10 09:52:29 · 3326 阅读 · 5 评论 -
Exception in thread "main" ExitCodeException exitCode=-1073741515
一堆原创 2020-04-10 09:50:48 · 5857 阅读 · 7 评论