Alluxio在携程大数据平台中的实践

本文来自于2018年10月27日由 Alluxio、七牛主办，示说网协办的Alluxio Meetup 上海站。

分享嘉宾郭建华，携程大数据平台研发工程师,2016年硕士毕业于上海大学后,一直在携程的大数据平台部门从事离线平台的维护与研发工作,对存储框架HDFS、Alluxio,计算框架Spark SQL和Hive有一定的了解。

本文的主要内容包括离线和实时在携程大数据中都占据重要地位，为了解决资源竞争带来的问题，携程将部分实时作业单独建立集群，同时带来了新的问题，跨集群读写数据。同时，部分作业需要准时实时的离线查询，这给当前的框架带来挑战。本次分享介绍了如何引入Alluxio来解决这些问题进行了探讨，并分享碰到的一些问题和踩过的坑。

下面是本次分享 ppt 全部内容：

关注 iteblog_hadoop 微信公众号，并回复 Alluxio 获取本文ppt。

猜你喜欢

欢迎关注本公众号：iteblog_hadoop:

回复 spark_summit_201806 下载 Spark Summit North America 201806 全部PPT

回复 spark_summit_eu_2018 下载 Spark+AI Summit europe 2018 全部PPT

0、回复 电子书 获取 本站所有可下载的电子书

1、Apache Spark 统一内存管理模型详解

2、Elasticsearch 6.3 发布，你们要的 SQL 功能来了

3、即将发布的 Apache Spark 2.4 都有哪些新功能

4、干货 | 深入理解 Spark Structured Streaming

5、Apache Spark 黑名单(Blacklist)机制介绍

6、Kafka分区分配策略(Partition Assignment Strategy)

7、Spark SQL 你需要知道的十件事

8、干货 | Apache Spark 2.0 作业优化技巧

9、[干货]大规模数据处理的演变(2003-2017)

10、Flink Forward 201809PPT资料下载

11、更多大数据文章欢迎访问https://www.iteblog.com及本公众号(iteblog_hadoop) 12、Flink中文文档： http://flink.iteblog.com 13、Carbondata 中文文档： http://carbondata.iteblog.com