简介
Cloudera和Hortonworks两家公司合并后,CDH、HDP也合并成了CDP,并且不再开源。市面上可用的免费开源大数据平台瞬间没有了,对于我们来说要么花钱买平台,例如CDP、华为FI、阿里EMR等等,要么用Apache原生组件自行搭建和维护平台。说实在的,两个方案都不是很友好,还是期待开源社区能提供一个集成的发行版本。
Ambari今年经历一个跌宕起伏的过程:2月项目退役->6月项目重启。重启后Amabri项目与BigTop项目进行了合作,准备共同推出新的免费开源大数据平台:Ambari还是负责集群管控,BitTop提供组件栈。目前正在开发中,进展还算可以,预计年底或者明年初就会正式发布了。
BigTop、HDP比较
序号 | 组件 | HDP3.1.5版本 | BTGTOP3.2.0版本 |
1 | HDFS | 3.1.1 | 3.3.4 |
2 | YARN | 3.1.1 | 3.3.4 |
3 | MapReduce | 3.1.1 | 3.3.4 |
4 | Tez | 0.9.1 | 0.10.1 |