MaxCompute全套攻略

最新推荐文章于 2024-09-11 09:00:00 发布

JQW_YNU

最新推荐文章于 2024-09-11 09:00:00 发布

阅读量1w

点赞数

分类专栏：大数据文章标签：大数据

大数据专栏收录该内容

24 篇文章 0 订阅

订阅专栏

概况介绍

大数据计算服务(MaxCompute，原名ODPS，产品地址：https://www.aliyun.com/product/odps )是一种快速、完全托管的TB/PB级数据仓库解决方案。MaxCompute向用户提供了完善的数据导入方案以及多种经典的分布式计算模型，能够更快速的解决用户海量数据计算问题，有效降低企业成本，并保障数据安全。本文收录了大量的MaxCompute产品介绍、技术介绍，帮助您快速了解MaxCompute/ODPS。

MaxCompute 2.0：阿里巴巴的大数据进化之路
性能追求之路——MaxCompute2.0（原ODPS）的前世今生
10年老兵带你看尽MaxCompute大数据运算挑战与实践
什么是阿里云数加大数据计算服务MaxCompute?
一分钟了解阿里云产品：大数据计算服务MaxCompute概述
MaxCompute（原ODPS）技术架构及应用实践
【视频】不要犹豫了解这些即可玩转阿里云MaxCompute
MaxCompute产品详情页
odps是什么?
阿里云双11访谈之MaxCompute
【逐云】阿里“水电煤”背后的人物故事
2.0专题

最新推出的MaxCompute 2.0，在高性能方面主要依托于全新的SQL 2.0计算引擎。在新功能方面提供了非结构化的处理，在云上开始使用OSS（开放的对象存储）、OTS（开放的表格存储），MaxCompute对其进一步分析和计算提供了连接性。机器学习在新版本中提出了CPU和GPU统一的架构，在富生态中也提出了新的能力。本文收录了MaxComputeV2最新的使用攻略，帮助开发者更快的了解并玩转MaxCompute2.0。
评测

MaxCompute在业内证明了其几大优势：极低的自建成本，卓越的性能打破了四项世界纪录，优秀的架构确保了企业数据在整个生命周期内的安全性；通过自身核心竞争力和市场成绩单，斩获用户好口碑。本文收录了MaxCompute所有评测、技术奖项、等级证书等相关知识。
开发套件专题

MaxCompute支持多款开发套件，如数加DataWorks，可以很方便的完成多源异构数据的同步、脚本开发、定时调度，MaxCompute Studio提供本地化的智能编辑器、Job分析，让代码更高效。本文收录了大数据开发套件的相关介绍、使用教程、最佳实践，帮您玩转大数据开发套件。

DataWorks
MaxCompute Studio
机器学习PAI专题

MaxCompute提供基于GPU的深度学习算法框架，在线预测服务等，以极低的代价帮助您的业务从BI时代跨入AI时代，真正实现人工智能触手可及。本文收录了机器学习技术原理、实践等相关知识，帮助开发者快速掌握机器学习。
图计算Graph专题

MaxCompute Graph 是基于飞天平台实现的面向迭代的图处理框架，为用户提供了类似于 Pregel 的编程接口，本文收录了图计算的介绍、技术原理、实践，帮您来更多的了解Graph。
MapReduce专题

当大数据业务逻辑很复杂，用SQL配合UDF(包括UDAF和UDTF)也无法实现的时候，可以使用MapReduce MapReduce来实现。本文收录了MapReduce的介绍、技术原理、实践，帮您来更多的了解MapReduce。
UDF专题
客户案例

MaxCompute在短短的几年时间里，改变了很多行业，积累了大量的客户成功案例。比如东润环能在3个月内业务全面交付云端，数据处理时间不到原来自建方式的1/3，并确保云上数据安全无忧。墨迹天气日志分析业务迁移到数加MaxCompute后，开发效率提升了超过5倍，存储和计算费用节省了70%，每天处理分析2TB的日志数据，更高效的赋能其个性化运营策略。本文收录了大量的客户案例，总有一款适合您。
美柚-MaxCompute为女性健康护航

新手入门

为MaxCompute新手用户提供入门级教程，如操作介绍、计量计费、数据上云、云上分析，帮助用户完成第一个SQL数据分析。

计费购买

提供MaxCompute计量计价说明，计费工具，售前计费沟通支持。

技术峰会

收录各界MaxCompute大数据技术峰会，多位技术大咖、行业实践者从技术与业务两个方面，与大家探讨大数据如何最快落地到实践。

· 演讲视频：http://yq.aliyun.com/webinar/play/188

· PDF下载：https://yq.aliyun.com/attachment/download/?id=1449

· 演讲整理文章：https://yq.aliyun.com/articles/72240

MaxCompute大数据语言的新发展

· 演讲视频：http://yq.aliyun.com/webinar/play/189

· PDF下载：https://yq.aliyun.com/attachment/download/?id=1448

· 演讲整理文章：https://yq.aliyun.com/articles/72284

大规模流式增量计算及其在阿里巴巴的应用

· 演讲视频：http://yq.aliyun.com/webinar/play/190

· PDF下载：https://yq.aliyun.com/attachment/download/?id=1444

· 演讲整理文章：https://yq.aliyun.com/articles/72242

PAI分布式机器学习平台计算模型演进之路

· 演讲视频：http://yq.aliyun.com/webinar/play/191

· PDF下载：https://yq.aliyun.com/attachment/download/?id=1445

· 演讲整理文章：https://yq.aliyun.com/articles/72362

MaxCompute数据上云与生态

· 演讲视频：http://yq.aliyun.com/webinar/play/192

· PDF下载：https://yq.aliyun.com/attachment/download/?id=1446

· 演讲整理文章：https://yq.aliyun.com/articles/72367

高可用大数据计算平台如何持续发布和演进

· 演讲视频：http://yq.aliyun.com/webinar/play/193

· PDF下载：https://yq.aliyun.com/attachment/download/?id=1447

· 演讲整理文章：https://yq.aliyun.com/articles/72282

专利大数据的云上裂变之路

· 演讲视频：http://yq.aliyun.com/webinar/play/194

· PDF下载：https://yq.aliyun.com/attachment/download/?id=1440

· 演讲整理文章：https://yq.aliyun.com/articles/72369

地产大数据趋势与应用实践

· 演讲视频：http://yq.aliyun.com/webinar/play/195

· PDF下载：https://yq.aliyun.com/attachment/download/?id=1441

· 演讲整理文章：https://yq.aliyun.com/articles/72386

用大数据打造你的变美频道

· 演讲视频：http://yq.aliyun.com/webinar/play/196

· PDF下载：https://yq.aliyun.com/attachment/download/?id=1443

· 演讲整理文章：https://yq.aliyun.com/articles/72250

云上大数据，零售新思维

· 演讲视频：http://yq.aliyun.com/webinar/play/197

· PDF下载：https://yq.aliyun.com/attachment/download/?id=1442

· 演讲整理文章：https://yq.aliyun.com/articles/72249

Workshop

该课程是基于大数据时代日志分析的基础需求的基础上，告知用户如果通过阿里云MaxCompute大数据解决方案来实现自己网站日志的用户画像。包括数据采集、数据加工以及数据最终的展现，最后通过MapReduce来解密好友推荐算法的实现原理。

MaxCompute1元试用体验馆

通过丰富的场景案例、教程，让您近距离低成本的感受MaxCompute大数据平台的魅力。

数据上云专题

对于大多数企业首先碰到的问题就是数据如何迁移到MaxCompute中。按照数据迁移场景，大致可以分为批量数据、实时数据、本地文件、日志文件等的迁移，下面我们针对每种场景分别介绍几种常用方案。

数据安全专题

收录了MaxCompute大数据平台安全资质、安全机制、数据安全白皮书、安全事件等，带你更深入的了解MaxCompute如何保护企业数据资产。

运维/容灾专题

收录了MaxCompute大数据平台运维成长过程，企业如何做好灾备、做好自动化运维保障等相关运维知识。

数据仓库专题

分享企业如何利用MaxCompute搭建数据仓库，如何做好ETL、建模、分层设计等相关数仓知识。

公开数据集

目前免费开放的数据类别包括：股票价格数据，房产信息，影视及其票房数据，所有的数据均被存储在MaxCompute 产品中的public_data 项目中。

阿里云数加（大数据）公开数据集（公测ing）

大数据最佳实践

越来越多的企业和开发者选择MaxCompute，为了更好地展示这些优秀企业和个人开发者的伟大经验，搜集整理了这些最佳实践，希望这些最佳实践能够为你的开发工作带来一些帮助。

常见问题

为大家整理了关于MaxCompute的系列问题供大家查阅参考，覆盖产品包括MaxCompute、MaxCompute Studio、DataWork、MaxCompute SDK，涉及的知识点有数据同步、SQL/UDF/MR开发、JOB任务调度分析、计量计费、安装、注销等等。

生态兼容

MaxCompute 从研发的第一天起就被设计统一由 Restful API 提供服务。在 Restful API 之上，我们各种语言的 SDK。由 SDK 编写形成的各种工具、驱动等等构成了 MaxCompute 的用户接口层，即外围生态；截止到今天，MaxCompute已支持JDBC、Java、python、R、OpenMR等开放接口，兼容现有大数据生态系统。