瓜牛呱呱的博客

最美的不是下雨天,是曾与你躲过雨的屋檐

记与阿里巴巴封神的1+1次交流

最近公司没什么业务,所以就一直在研究自己感兴趣的技术。我一直想研究的技术就是Spark。并且Spark的原理、使用、调优、源码自己都掌握得差不多了。感觉自己Spark能学的都学了,不知道该往哪里发力。于是这段时间就开始学习之前一直想入门但多次碰壁的SparkML,学习了将近两个星期。 ...

2017-12-29 18:26:13

阅读数:2170

评论数:4

联邦HDFS(HDFS Federation)

对于联邦HDFS的一些概念,我这里先不进行介绍;下面直接记录我对理解联邦HDFS时产生的疑惑以及疑惑的答案。 问题产生:首先在我的理论知识中,联邦HDFS,就是有多个active的namenode,不同的namenode掌管hdfs中不同路径下文件的数据,互相隔离,互不影响。这里理论的论证就是,在...

2017-12-29 17:42:20

阅读数:362

评论数:0

提示
确定要删除当前文章?
取消 删除
关闭
关闭