![](https://img-blog.csdnimg.cn/20201014180756780.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
daily blog
李寻欢-成都
这个作者很懒,什么都没留下…
展开
-
【Daily Blog】linux 在启动集群时卡住
我在集群中 加入一个新的节点之后,启动集群发现会出现如下卡住的情况检查了hosts文件和slaves文件配置都是没问题的,经过多次试验,有个小疏忽被我遗漏了,系统给出了是否需要继续连接,需要在下面输入yes,再按enter集群就启动成功了。实在是一个不应该出现在blog里面的问题,发帖是为了提醒自己更加细心。...原创 2019-09-16 10:13:55 · 313 阅读 · 1 评论 -
【Daily Blog】使用MapReduce对数据进行简单的统计
第一次使用MapReduce进行数据处理,简单的进行记录(行业新人,如以下描述有错误部分,还望前辈指正,为谢!)MapReduce分为Map 和Reduce 两块,Map主要是对数据进行切分排序,reduce进行累加计数如下为代码块:Mapper部分:分别获取每行数据,并对其按照用户要求进行拆分(下面代码是以空格进行拆分)进行拆分,通过遍历获取到每个每个拆分的数据对象,以key value...原创 2019-09-17 14:08:48 · 1347 阅读 · 0 评论