MaxCompute介绍
MaxCompute是适用于数据分析场景的企业级SaaS(Software as a Service)模式云数据仓库,以Serverless架构提供快速、全托管的在线数据仓库服务,消除了传统数据平台在资源扩展性和弹性方面的限制,最小化用户运维投入,使您可以经济并高效地分析处理海量数据。
MaxCompute提供离线和流式数据的接入,支持大规模数据计算及查询加速能力,为您提供面向多种计算场景的数据仓库解决方案及分析建模服务。
MaxCompute适用于100 GB以上规模的存储及计算需求,最大可达EB级别,并且MaxCompute已经在阿里巴巴集团内部得到大规模应用。MaxCompute适用于大型互联网企业的数据仓库和BI分析、网站的日志分析、电子商务网站的交易分析、用户特征和兴趣挖掘等。
(MaxCompute架构)
MaxCompute数据同步需求
MaxCompute虽然提供了SQL或者类SQL的语法形式,但是和关系型数据库的传统SQL相比,仍然存在许多不同之处。很多开源的ETL工具均不支持MaxCompute云数仓的同步,不得不编写代码来实现数据的同步,要不就只能借助阿里自身的DataWorks来进行同步。