数据仓库
火星人Martin
这个作者很懒,什么都没留下…
展开
-
Alluxio计算框架整合系列 (一) -- Alluxio & Apache Hive
大数据, Alluxio, Hadoop, 分布式, 存储系统原创 2017-01-17 13:48:09 · 2178 阅读 · 0 评论 -
Alluxio安装(以HDFS作为底层文件系统)
上一篇我们介绍了如何通过源码实现 Alluxio编译 的整个过程,接下来,这篇文章,将带你一起把我们编译好的安装包(或者是从官方直接下载的安装包——hadoop版本号需要跟你的基础环境一致)部署安装在我们的服务器上。原创 2017-01-17 11:28:34 · 3579 阅读 · 0 评论 -
Alluxio编译
Alluxio的二进制发布包,是依赖于具体的hadoop版本的,截至本文撰写时,直接下载的alluxio二进制安装包是对应于hadoop 2.2.0的,如果你的hadoop基础环境不是这个版本,那就需要根据实际情况,下载alluxio源码,执行编译,进而制作出实际可用的安装文件。下面就概要说明alluxio的整个编译过程和编译成果物的确认。一、准备工作:1. 保证你的编译环境是原创 2017-01-16 20:20:24 · 2194 阅读 · 0 评论 -
Alluxio计算框架整合系列 (二) -- Alluxio & Presto
我们在上篇文章中,已经演示了如何安装Alluxio,并将HDFS作为Alluxio的底层文件系统; 以及 Alluxio & Apache Hive的整合过程。这里我们将通过一系列的文章,来说明如何将Alluxio和常见的一些结算框架实现集成,用以提交查询。本篇,将说明如何实现 Alluxio和来自FaceBook的Presto集成(Presto是完全基于内存的计算框架;)。原创 2017-01-17 15:21:34 · 3158 阅读 · 0 评论