- Alluxio安装部署
1.创建目录:
1. mkdir /data/alluxio
2. cd /data/alluxio
下载alluxio-1.2.0-hadoop2.6-bin.tar.gz 版本,解压在cd /data/alluxio/ 目录下
3. tar -zvxf alluxio-1.2.0-hadoop2.6-bin.tar.gz
4. cd /data/alluxio/alluxio-1.2.0
2. 初始化、启动:
初始化为本地模式:
1. ./bin/alluxio bootstrap-conf localhost
2. ./bin/alluxio format
启动/停止:
3. ./bin/alluxio-start.sh local ./bin/alluxio-start.sh all
4. ./alluxio-stop.sh all
创建工作目录:
5. ./bin/alluxio fs mkdir /data/
6. ./bin/alluxio fs mkdir /data/spark/
集群搭建:
1、配置文件修改
在alluxio/conf
目录下,将alluxio-env.sh.template
拷贝到alluxio-env.sh
。确保JAVA_HOME指向有效的安装路径。将ALLUXIO_MASTER_ADDRESS设置为运行Alluxio Master的机器的主机名。添加所有worker节点的IP地址到alluxio/conf/workers文件。
alluxio-env.sh添加:
export JAVA_HOME=/home/ys/java/jdk1.7.0_60
export ALLUXIO_MASTER_ADDRESS=host01 # host01作为master节点
在workers文件添加工作节点
host01
host02
2、启动
分开启动,在各自的机器上运行
在master机器上:
./alluxio-start.sh master
./alluxio-start.sh worker
在worker机器上:
./alluxio-start.sh worker
3、检验集群是否搭建成功
在master节点创建文件,能在worker节点看见,说明搭建成功
./alluxio fs ls /
./alluxio fs mkdir /data