Superset (二) --------- Superset 安装

---

Superset 官网地址：http://superset.apache.org/

一、安装 Python 环境

Superset 是由 Python 语言编写的 Web 应用，要求 Python3.7 的环境。

1. 安装 Miniconda

Conda 是一个开源的包、环境管理器，可以用于在同一个机器上安装不同 Python 版本的软件包及其依赖，并能够在不同的 Python 环境之间切换，Anaconda 包括 Conda、Python 以及一大堆安装好的工具包，比如：numpy、pandas 等，Miniconda 包括 Conda、Python。

此处，我们不需要如此多的工具包，故选择 MiniConda。

A、下载 Miniconda (Python3 版本)

下载地址：https://repo.anaconda.com/miniconda/Miniconda3-latest-Linux-x86_64.sh

B、安装 Miniconda

执行以下命令进行安装，并按照提示操作，直到安装完成。

[fancy@hadoop102 lib]$ bash Miniconda3-latest-Linux-x86_64.sh

在安装过程中，出现以下提示时，可以指定安装路径。

出现以下字样，即为安装完成

C、加载环境变量配置文件，使之生效

[fancy@node101 lib]$ source ~/.bashrc

D、取消激活 base 环境

Miniconda 安装完成后，每次打开终端都会激活其默认的 base 环境，我们可通过以下命令，禁止激活默认 base 环境。

[fancy@node101 lib]$ conda config --set auto_activate_base
false

2. 创建 Python3.7 环境

A、配置 conda 国内镜像

(base)[fancy@node101 ~]$ conda config --add channels
https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/free
(base)[fancy@node101 ~]$ conda config --add channels
https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/main

B、创建 Python3.7 环境‘’

(base)[fancy@node101 ~]$ conda create --name superset
python=3.7

• 说明：conda 环境管理常用命令
• 创建环境：conda create -n env_name python=3.7
• 查看所有环境：conda info --envs
• 删除一个环境：conda remove -n env_name --all

C、激活 superset 环境

(base)[fancy@node101 ~]$ conda activate superset

激活后效果如下图所示

说明：退出当前环境

(superset)[fancy@node101 ~]$ conda deactivate

D、执行 python 命令查看 python 版本

二、Superset 部署

1. 安装依赖

安装 Superset 之前，需安装以下所需依赖

(superset)[fancy@hadoop102 ~]$ sudo yum install -y gcc gccc++ libffi-devel python-devel python-pip python-wheel pythonsetuptools openssl-devel cyrus-sasl-devel openldap-devel

2. 安装 Superset

A、安装(更新)setuptools 和 pip

(superset) [fancy@node101 ~]$ pip install --upgrade
setuptools pip -i https://pypi.douban.com/simple/

说明：pip 是 python 的包管理工具，可以和 centos 中的 yum 类比

B、安装 Supetset

(superset)[fancy@node101 ~]$ pip install apache-superset -
i https://pypi.douban.com/simple/

说明：-i 的作用是指定镜像，这里选择国内镜像
注：如果遇到网络错误导致不能下载，可尝试更换镜像

(superset)[fancy@node101 ~]$ pip install apache-superset --trusted-host https://repo.huaweicloud.com -i
https://repo.huaweicloud.com/repository/pypi/simple

C、初始化 Supetset 数据库

(superset)[fancy@node101 ~]$ superset db upgrade

D、创建管理员用户

(superset)[fancy@node101 ~]$ export FLASK_APP=superset
(superset)[fancy@node101 ~]$ superset fab create-admin

说明：flask 是一个 python web 框架，Superset 使用的就是 flask

E、Superset 初始化

(superset)[fancy@node101 ~]$ superset init

3. 启动 Supterset

A、安装 gunicorn

(superset)[fancy@node101 ~]$ pip install gunicorn -i

https://pypi.douban.com/simple/

说明：gunicorn 是一个 Python Web Server，可以和 java 中的 TomCat 类比

B、启动 Superset

确保当前 conda 环境为 superset，及下图所示

启动

(superset)[fancy@node101 ~]$ gunicorn --workers 5 --timeout 120 --bind hadoop102:8787 "superset.app:create_app()" --daemon

说明：

• --workers：指定进程个数
• --timeout：worker 进程超时时间，超时会自动重启
• --bind：绑定本机地址，即为 Superset 访问地址
• --daemon：后台运行

C、登录 Superset

访问 http://node101:8787，并使用 2.2.2 节中第 4 步创建的管理员账号进行登录。

D、停止 superset

停掉 gunicorn 进程

(superset)[fancy@node101 ~]$ ps -ef | awk '/superset/ && !/awk/{print $2}' | xargs kill -9

退出 superset 环境

(superset)[fancy@node101 ~]$ conda deactivate

4. superset 启停脚本

A、创建 superset.sh 文件

[fancy@node101 bin]$ vim superset.sh
内容如下
#!/bin/bash
superset_status(){
 result=`ps -ef | awk '/gunicorn/ && !/awk/{print $2}' | wc -l`
 if [[ $result -eq 0 ]]; 
 then
 	return 0
 else
 	return 1
 fi
}
superset_start(){
 source ~/.bashrc
 superset_status >/dev/null 2>&1
 if [[ $? -eq 0 ]]; 
 then
 	conda activate superset ; gunicorn --workers 5 --timeout 120 --bind hadoop102:8787 --daemon 'superset.app:create_app()'
 else
 	echo "superset 正在运行"
 fi
}
superset_stop(){
 superset_status >/dev/null 2>&1
 if [[ $? -eq 0 ]]; then
 	echo "superset 未在运行"
 else
 	ps -ef | awk '/gunicorn/ && !/awk/{print $2}' | xargs kill -9
 fi
}
case $1 in
 start )
 	echo "启动 Superset"
 	superset_start
 ;;
 stop )
 	echo "停止 Superset"
 	superset_stop
 ;;
 restart )
 	echo "重启 Superset"
 	superset_stop
 	superset_start
 ;;
 status )
 	superset_status >/dev/null 2>&1
 if [[ $? -eq 0 ]]; then
 	echo "superset 未在运行"
 else
 	echo "superset 正在运行"
 fi
esac

B、加执行权限

[fancy@node101 bin]$ chmod +x superset.sh

C、测试

启动 superset

[fancy@node101 bin]$ superset.sh start

停止 superset

[fancy@node101 bin]$ superset.sh stop