阿里云 E-MapReduce 全面支持 Alluxio，为大数据全“源”加速

导读：阿里云 E-MapReduce全面支持Alluxio，Alluxio作为大数据领域存储层解决方案，将大幅提升EMR产品服务能力。Alluxio可以对数据源进行性能优化和缓存加速，让计算层和存储层能够轻装上阵，独立优化，又能保持密切依赖关系。下面将为大家分享阿里云 E-MapReduce Alluxio的实践经验与技术方案。

本文将从三个方面进行介绍：
1、什么是Alluxio
2、阿里云E-MapReduce
3、如何在阿里云E-MapReduce上使用Alluxio

什么是Alluxio？

Alluxio位于数据驱动框架或应用（例如Apache Spark、Presto、TensorFlow、Apache Flink和Apache Hive等）和各种持久化存储系统（例如HDFS和阿里云OSS）之间，使得上层的计算应用可以通过统一的客户端API和全局命名空间访问包括HDFS和OSS在内的持久化存储系统。

具体说来，Alluxio提供一层文件系统的抽象给计算层。这层抽象之上的计算只需要和Alluxio交互来访问数据；而这层抽象之下可以同时对接多个不同的持久化存储（比如一个OSS加上一个HDFS部署），而这层抽象本身又是由部署在靠近计算的内存级Alluxio存储系统来实现。如下图：

Alluxio 通过统一命名空间、多层级缓存及服务器端API转换等三个关键领域的创新结合在一起，统一了数据访问的方式，为上层计算框架和底层存储系统构建了桥梁。将数据从存储层移动到距离数据驱动型应用