说明:
Apache Superset是一个现代的数据探索和可视化平台。它功能强大且十分易用,可对接各种数据源,包括很多现代的大数据分析引擎,拥有丰富的图表展示形式,并且支持自定义仪表盘。
使用的服务器操作系统为CentOS 7,Superset对接的数据源为clickhouse数据库
安装:
Superset是由Python语言编写的Web应用,这里使用Python3.9的环境。
conda是一个开源的包、环境管理器,可以用于在同一个机器上安装不同Python版本的软件包及其依赖,并能够在不同的Python环境之间切换,Anaconda包括Conda、Python以及一大堆安装好的工具包,比如:numpy、pandas等,Miniconda包括Conda、Python。
此处,我们不需要如此多的工具包,故选择MiniConda。
1)下载Miniconda(Python3版本)
下载地址:https://repo.anaconda.com/miniconda/Miniconda3-latest-Linux-x86_64.sh
2)安装Miniconda
(1)执行以下命令进行安装,并按照提示操作,直到安装完成。
(2)在安装过程中,出现以下提示时,可以指定安装路径
(3)出现以下字样,即为安装完成
3)加载环境变量配置文件,使之生效
[root@hadoop102 lib]$ source ~/.bashrc
4)取消激活base环境
Miniconda安装完成后,每次打开终端都会激活其默认的base环境,我们可通过以下命令,禁止激活默认base环境。
[root@hadoop102 lib]$ conda config --set auto_activate_base false
在conda中创建python环境
先使用命令配置国内镜像源:
conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/free
conda config --add channels https://mirrors.tuna.tsinghua.edu.cn/anaconda/pkgs/main
conda config --set show_channel_urls yes
创建Python3.9环境
conda create --name superset python=3.9
激活superset环境
conda activate superset
退出命令:
conda deactivate
Superset部署
安装依赖
安装Superset之前,需安装以下所需依赖。
sudo yum install -y gcc gcc-c++ libffi-devel python-devel python-pip python-wheel python-setuptools openssl-devel cyrus-sasl-devel openldap-devel
安装Superset
安装(更新)setuptools和pip
pip install --upgrade setuptools pip -i https://pypi.douban.com/simple/
说明:pip是python的包管理工具,可以和centos中的yum类比。
2)安装Supetset
pip install apache-superset -i https://pypi.douban.com/simple/
说明:-i的作用是指定镜像,这里选择国内镜像。
这里需要修改某些包的版本,这样可以大大减少踩坑
pip uninstall flask
pip uninstall Werkzeug
pip uninstall wtforms
pip install --force-reinstall MarkupSafe==2.0.1(3.9可不执行)
pip install Flask==2.0.2 -i https://pypi.douban.com/simple/
pip install Werkzeug==2.0.2 -i https://pypi.douban.com/simple/
pip install WTForms==2.3.3 -i https://pypi.douban.com/simple/
flask是一个python web框架,Superset使用的就是flask。
之后执行:
export FLASK_APP=superset
初始化Supetset数据库
superset db upgrade
superset init
启动Supterset
先安装所需包
pip install gunicorn -i https://pypi.douban.com/simple/
启动:
gunicorn --workers 5 --timeout 120 --bind hadoop102:8787 "superset.app:create_app()" --daemon
创建用户
superset fab create-admin
根据提示
登录Superset
访问http://虚拟机ip:8787
停止superset
停掉gunicorn进程。
ps -ef | awk '/superset/ && !/awk/{print $2}' | xargs kill -9
退出superset环境。
conda deactivate
clickhouse连接驱动安装
首先要在superset环境下
pip install clickhouse-connect -i https://pypi.douban.com/simple/
安装完成后重启superset
之后进入web
之后即连接完成