1.两者都是大数据解决方案
E-MapReduce是完全在开源(Apache Hadoop、Apache Spark、Apache Hive等)基础上构建的大数据平台,对开源软件的使用方式和实践方式100%兼容。
MaxCompute由阿里巴巴开发,对外不开源,但是封装后使用起来比较方便,而且运维成本也较低。执行odps sql
dataworks平台(大数据开发治理平台)引擎可以用MaxCompute也可用EMR,StarRocks 是阿里云的EMR产品
2.E-MapReduce的组成
E-MapReduce集群是由一个或多个阿里云ECS实例组成的Hadoop和Spark集群。
以 Hadoop为例,每个ECS Instance上通常都运行了一些daemon进程(例如,NameNode、DataNode、ResouceManager和NodeManager),这些daemon 进程共同组成了Hadoop集群。
即EMR有多个ECS Instance(ECS实例)组成,一个ECS Instance可能是NameNode节点,也可能是nodeManager节点
3.maxcompute的特点
MaxCompute,原名ODPS。以Hadoop为代表的开源组件,搭建及维护的成本较高,遇见各类配置、网络、参数问题较多,升级时存在不兼容风险,
需要单独搭建额外组件(如HBase),Namenode无法得安全性保障,需要较长时间来熟悉和维护。