superset的基本介绍与安装

superset是由Airbnb（知名在线短租赁公司）开源的数据分析与可视化平台（曾用名Caravel、Panoramix），该工具主要特点是可自助分析、自定义仪表盘、分析结果可视化（导出）、用户/角色权限控制，还集成了一个SQL编辑器，可以进行SQL编辑查询对结果集进行保存可视化等。

1、superset基本介绍

我们已经了解到了superset是一款数据展示的工具，接下来 一起来了解一下superset的基本介绍。

核心功能：

1.快速创建数据可视化互动仪表盘

2.丰富的可视化图表模板，灵活可扩展

3.细粒度高可扩展性的安全访问模型，支持主要的认证供应商（数据库、OpenID、LDAP、OAuth 等）

4.简洁的语义层，可以控制数据资源在 UI 的展现方式

5.与 Druid（其实它貌似就是为了druid而生的）深度集成，可以快速解析大规模数据集

6.快速的通过配置装载仪表盘等

2、superset的安装

第一步：linux验证python的环境

superset的安装运行需要依赖于python3的环境，我们这里安装使用的是centos7的linux操作系统，但是centos7的操作系统自带的python版本是2.x的版本

首先切换到root用户，验证python版本

[hadoop@node03 kkb]$ su root
[root@node03 kkb]# python
Python 2.7.5 (default, Nov 16 2020, 22:23:17) 
[GCC 4.8.5 20150623 (Red Hat 4.8.5-44)] on linux2
Type "help", "copyright", "credits" or "license" for more information.
>>> quit()

第二步：centos7.x安装python3.6版本

前面已经验证了centos7.x当中python的环境是2.x的版本，那么我们可以来给centos7.x安装python3.6的版本。

[root@node03 kkb]# yum install wget
[root@node03 kkb]# cd /usr/local/src/
[root@node03 src]# wget https://www.python.org/ftp/python/3.6.0/Python-3.6.0.tgz
[root@node03 src]# tar -zxf Python-3.6.0.tgz
[root@node03 src]# cd Python-3.6.0
[root@node03 Python-3.6.0]#  ./configure --prefix=/usr/local/python
[root@node03 Python-3.6.0]# make && make install

注意本地编译需要有GCC环境需要，没有的话会报错

    yum -y install gcc

添加python环境变量

[root@node03 Python-3.6.0]# vim /etc/profile
#末尾添加以下内容
export PYTHON_HOME=/usr/local/python
export PATH=:$PYTHON_HOME/bin:$PATH

# 使修改生效
[root@node03 Python-3.6.0]# source /etc/profile

检查python是否安装成功

[root@node03 Python-3.6.0]# python3.6
Python 3.6.0 (default, Feb 15 2021, 18:19:33) 
[GCC 4.8.5 20150623 (Red Hat 4.8.5-44)] on linux
Type "help", "copyright", "credits" or "license" for more information.
>>> quit()

修改系统Python的环境变量

[root@node03 Python-3.6.0]# mv /usr/bin/python /usr/bin/python-2.7.5
[root@node03 Python-3.6.0]# ln -s /usr/local/python/bin/python3.6 /usr/bin/python
[root@node03 Python-3.6.0]# ln -s /usr/local/python/bin/pip3 /usr/bin/pip

因为yum是依赖python的，所以这里我们修改了默认的python，就要修改yum，让其运行指向旧的版本

#修改第一个文件
[root@node03 Python-3.6.0]#  vi /usr/bin/yum
# 第一行修改成如下配置
#!/usr/bin/python-2.7.5


# 修改第二个文件
[root@node03 Python-3.6.0]# vi /usr/libexec/urlgrabber-ext-down
# 第一行修改成如下配置
#! /usr/bin/python-2.7.5

至此centos7上面的python3.x的环境已经安装成功

第三步：安装容器和密码验证工具

使用yum源在centos7上面安装容器以及密码验证工具

[root@node03 Python-3.6.0]# yum upgrade python-setuptools 
[root@node03 Python-3.6.0]# yum install gcc gcc-c++ libffi-devel python-devel python-pip python-wheel openssl-devel cyrus-sasl-devel openldap-devel
[root@node03 Python-3.6.0]# pip install cryptography

pip安装可能会报错

pip版本过低，升级一下

pip3 install --upgrade pip

因为有两个python环境，所以要指定pip3，否则也会报错

第四步：安装Miniconda

miniconda是一个集成化的工具，可以给我们提供各种版本的python运行环境，我们这里通过miniconda来进行安装superset

下载miniconda安装的脚本，然后通过脚本来进行安装

[root@node03 opt]# cd /opt/
[root@node03 opt]# wget https://repo.anaconda.com/miniconda/Miniconda3-latest-Linux-x86_64.sh
[root@node03 opt]# bash Miniconda3-latest-Linux-x86_64.sh 
# 通过以下命令开始执行脚本
[root@node03 opt]# bash Miniconda3-latest-Linux-x86_64.sh
Please, press ENTER to continue
>>> 按下enter回车键
#license证书说明，一路一直按enter回车键
Do you accept the license terms? [yes|no]
[no] >>> yes
Miniconda3 will now be installed into this location:
/root/miniconda3

  - Press ENTER to confirm the location
  - Press CTRL-C to abort the installation
  - Or specify a different location below
# 设置miniconda安装路径
[/root/miniconda3] >>> /opt/module/miniconda3
Do you wish the installer to initialize Miniconda3
by running conda init? [yes|no]
[no] >>> yes

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-BNhk3aps-1615291492454)(superset0.38版本安装.assets/image-20210215185143480.png)]

加载环境变量配置文件，使之生效

[root@node03 opt]# source ~/.bashrc 

miniconda安装成功之后，在我们的shell前面会有一个base这样的提示，表示我们目前出在miniconda的基础环境当中，我们可以通过以下命令来取消激活base环境

(base) [root@node03 opt]# conda config --set auto_activate_base false

第五步：创建python3.6的环境

前面我们已经安装好了miniconda的基础环境，接下来我们来通过conda创建Python3.6的环境

1、配置conda国内镜像

(base) [root@node03 opt]# conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/free
(base) [root@node03 opt]# conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/main
(base) [root@node03 opt]# conda config --set show_channel_urls yes

2、创建Python3.6的环境

(base) [root@node03 opt]# conda create --name superset python=3.6

Proceed ([y]/n)? y

3、激活superset环境

(base) [root@node03 opt]# conda activate superset
(superset) [root@node03 opt]# 

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-1KIxnh2J-1615291492457)(superset0.38版本安装.assets/image-20210215185837824.png)]

4、安装superset依赖

(superset) [root@node03 opt]# sudo yum install -y python-setuptools
(superset) [root@node03 opt]# sudo yum install -y gcc gcc-c++ libffi-devel python-devel python-pip python-wheel openssl-devel cyrus-sasl-devel openldap-devel

5、安装或者更新setuptools和pip

(superset) [root@node03 opt]# pip install --upgrade setuptools pip -i https://pypi.douban.com/simple

6、安装superset

(superset) [root@node03 opt]# pip install apache-superset -i https://pypi.douban.com/simple/



https://pypi.tuna.tsinghua.edu.cn/simple/

7、初始化数据库

(superset) [root@node03 opt]#  superset db upgrade

出现错误如下

ModuleNotFoundError: No module named 'dataclasses'

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-V5uIUPzI-1615291492461)(superset0.38版本安装.assets/image-20210215190614256.png)]

解决数据库初始化失败问题

#安装dataclasses
(superset) [root@node03 opt]# pip install dataclasses
#重新初始化数据库
(superset) [root@node03 opt]#  superset db upgrade

8、创建管理员用户

(superset) [root@node03 opt]# export FLASK_APP=superset

(superset) [root@node03 opt]# flask fab create-admin
Username [admin]: admin
User first name [admin]: admin
User last name [user]: admin
Email [admin@fab.org]: admin
Password: admin
Repeat for confirmation: admin

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-qNu1Z6NK-1615291492463)(superset0.38版本安装.assets/image-20210215191109081.png)]

9、superset初始化

(superset) [root@node03 opt]#  superset init

第六步：启动superset

以上步骤完成之后，准备启动superset

1、安装gunicorn

(superset) [root@node03 opt]#  pip install gunicorn -i https://pypi.douban.com/simple/

2、启动superset

(superset) [root@node03 opt]# gunicorn --workers 5 --timeout 120 --bind node03:8787  "superset.app:create_app()" --daemon

[外链图片转存失败,源站可能有防盗链机制,建议将图片保存下来直接上传(img-UOgCIppd-1615291492466)(superset0.38版本安装.assets/image-20210215191403783.png)]

第七步：superset的停止与退出conda环境

如果需要停止superset可以使用以下命令来停止superset

1、停止superset

(superset) [root@node03 opt]#  ps -ef | awk '/superset/ && !/awk/{print $2}' | xargs kill -9

2、退出superset环境

(superset) [root@node03 opt]# conda deactivate

第八步：浏览器访问superset

使用浏览器访问地址

http://node03:8787/login/

输入用户名：admin

密码：admin