Spark
南山牧笛
只有站在高处,才会看见更美丽的风景
展开
-
使用yum源安装CDH Hadoop集群
本文主要是记录使用yum安装CDH Hadoop集群的过程,包括HDFS、Yarn、Hive和HBase。本文使用CDH5.4版本进行安装,故下文中的过程都是针对CDH5.4版本的。 0. 环境说明 系统环境: 操作系统:CentOs 6.6Hadoop版本:CDH5.4JDK版本:1.7.0_71运行用户:root 集群各节点角色规划为: 192.168.56.121转载 2015-12-06 12:31:23 · 901 阅读 · 0 评论 -
Spark安装和使用
作者:JavaChen 本文主要记录 Spark 的安装过程配置过程并测试 Spark 的一些基本使用方法。 安装环境如下: 操作系统:CentOs 6.5Hadoop 版本:CDH-5.3.0Spark 版本:1.2 关于 yum 源的配置以及 Hadoop 集群的安装,请参考 使用yum安装CDH Hadoop集群。 1. 安装 选择一个节点 cdh1 来安装 Spark转载 2015-12-06 12:08:58 · 644 阅读 · 0 评论