经历了无数次的失败重装后,决定整理一下整个过程,做个记录,互助脱坑。
开发环境
Ubuntu18.04
Hadoop2.7.7
Hbase1.3.3
Hive1.2.2
MySQL5.7.26
Spark2.4.0
Kylin2.6.1
安装准备
1.安装hadoop
2.安装hbase
见博客HBase伪分布式安装
3.安装hive
安装kylin
1.下载安装包
我选择的是Hadoop 2 二进制包配合hbase1.x版本(版本不对应会出很多莫名其妙的错误)
具体各版本要求参见官网中要求:
将安装包复制到/usr/local中,解压重命名
sudo cp apache-kylin-2.6.1-bin-hbase1x.tar.gz /usr/local
tar -zxvf apache-kylin-2.6.1-bin-hbase1x.tar.gz
sudo mv apache-kylin-2.6.1-bin-hbase1x kylin
sudo chown -R hadoop:hadoop kylin
2.配置环境变量
编辑~/.bashrc
sudo vim ~/.bashrc
添加如下语句
export KYLIN_HOME=/usr/local/kylin
export PATH=$KYLIN_HOME/bin:$PATH
修改完后执行命令使修改生效:
source ~/.bashrc
3.启动kylin
Kylin在Hadoop集群上运行,对每个组件的版本,访问权限和CLASSPATH有一定的要求。为了避免各种环境问题,先对环境进行测试,进入kylin安装目录
cd kylin
bin/check-env.sh
如果环境有任何问题,将会输出详细的错误消息。如果没有错误消息,则表示安装环境可以运行Kylin,如下图:
在运行kylin前,要首先启动hadoop和hbase,其中hadoop还要启动JobHistory(否则后面构建立方体中会出错)
cd /usr/local
hadoop/sbin/start-dfs.sh
hadoop/sbin/start-yarn.sh
hadoop/sbin/mr-jobhistory-daemon.sh start historyserver
hbase/bin/start-hbase.sh
然后运行kylin
bin/kylin.sh start
启动成功界面:
至此,我们就可以通过 http://hostname:7070/kylin 访问Web UI
如输出信息的最后一行所示,访问 http://ubuntu:7070/kylin,首次进入后为登录界面
登录用户名:ADMIN 密码:KYLIN
停止kylin命令
bin/kylin.sh stop
测试
可以用kylin自带的样例sample.sh进行构建立方体测试,见博客Apache kylin构建Cube立方体样例