使用miniconda管理python 版本
superset安装步骤
环境安装
CentOS 7 系统默认 python 版本是2.7 superset 需要在 python 3 的环境下使用 系统的环境又不能删除 所以需要python 版本 管理工具 conda
miniconda安装
- 下载Miniconda(Python3版本)
下载地址:https://repo.anaconda.com/miniconda/Miniconda3-latest-Linux-x86_64.sh
这是国外镜像
国内镜像地址 :https://mirrors.tuna.tsinghua.edu.cn/anaconda/miniconda/
2.安装 .sh 文件
bash Miniconda3-latest-Linux-x86_64.sh
按照步骤操作 期间有一个 写 软件安装目录的操作 不写的话是默认地址
3.加载环境变量
source ~/.bashrc
或者重新连接当前ssh会话 - 取消激活base环境
Miniconda安装完成后,每次打开终端都会激活其默认的base环境,可以选择默认关闭base环境。
conda config --set auto_activate_base false
- 配置conda 国内镜像
conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/free
conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/main
- 创建superset 环境
conda create --name superset python=3.6
这一步可以选择 创建 python 3,6 环境 之前安装3.7 的时候一堆bug 也有人安装 3.8 好了的
好了之后进入 superset 环境下操作
软件安装
superset 环境准备
以下操作均需进入 superset 环境
conda activate superset
# 1.安装更新 yum源依赖
sudo yum install -y gcc gcc-c++ libffi-devel python-devel python-pip python-whee
# 2.pip更新 setuptools 更新
pip install --upgrade setuptools pip -i https://pypi.douban.com/simple/
superset安装
1. pip安装
pip install apache-superset -i https://pypi.douban.com/simple/
2. 初始化 元数据库
superset db upgrade
报错解决
错误一
File “/opt/module/miniconda3/envs/superset1/lib/python3.6/site-packages/sqlalchemy_utils/functions/orm.py”, line 14, in
from sqlalchemy.orm.query import _ColumnEntity
ImportError: cannot import name ‘_ColumnEntity’
执行 pip install sqlalchemy==1.3.24
错误二
File “/opt/module/miniconda3/envs/superset1/lib/python3.6/site-packages/superset/sql_parse.py”, line 18, in
from dataclasses import dataclass
ModuleNotFoundError: No module named ‘dataclasses’
执行pip install dataclasses
出现类似以下结果 说明 初始化成功
INFO [alembic.runtime.migration] Running upgrade f2672aa8350a -> 978245563a02, Migrate iframe in dashboard to markdown component
INFO [alembic.runtime.migration] Running upgrade 978245563a02, f120347acb39 -> f80a3b88324b, empty message
INFO [alembic.runtime.migration] Running upgrade f80a3b88324b -> 2e5a0ee25ed4, refractor_alerting
INFO [alembic.runtime.migration] Running upgrade f80a3b88324b -> 175ea3592453, Add cache to datasource lookup table.
INFO [alembic.runtime.migration] Running upgrade 175ea3592453, 2e5a0ee25ed4 -> ae19b4ee3692, empty message
INFO [alembic.runtime.migration] Running upgrade ae19b4ee3692 -> e5ef6828ac4e, add rls filter type and grouping key
INFO [alembic.runtime.migration] Running upgrade e5ef6828ac4e -> 3fbbc6e8d654, fix data access permissions for virtual datasets
INFO [alembic.runtime.migration] Running upgrade 3fbbc6e8d654 -> 18532d70ab98, Delete table_name unique constraint in mysql
3. 创建管理员用户
export FLASK_APP=superset
superset fab create-admin
第一个输入自己的用户名
第二到i第四直接回车默认
第五个 输入自己的密码 需要输两次
4.初始化 superset
superset init
启动superset
1.安装 gunicorn
pip install gunicorn -i https://pypi.douban.com/simple/
2. 启动
gunicorn --workers 5 --timeout 120 --bind hadoop102:8787 "superset.app:create_app()" --daemon
说明:
workers:指定进程个数
timeout:worker进程超时时间,超时会自动重启
bind:绑定本机地址,即为Superset访问地址
daemon:后台运行
- 登录Superset