airflow详细环境搭建

最新推荐文章于 2024-08-15 09:21:14 发布

鱼雁秋

最新推荐文章于 2024-08-15 09:21:14 发布

阅读量700

点赞数

分类专栏： python flask进阶文章标签： linux centos

本文链接：https://blog.csdn.net/qq_38613380/article/details/111885438

版权

本文详述了在Linux CentOS系统上搭建Airflow的步骤，包括Python和Redis的安装，环境准备，如创建airflow用户并配置sudo权限，以及Airflow的配置与服务启动，涉及分布式核心配置和数据库连接设置。

摘要由CSDN通过智能技术生成

airflow

python安装

使用自动化脚本进行安装 Python3.5.4, 若后续更新 Python 版本, 则修改脚本对应代码

#! /bin/sh # download
 
PYTHON_DIR="/opt/python" 
if [ -d "$PYTHON_DIR"];then    
    rm /opt/python -rf 
fi
 
mkdir /opt/python 
cd /opt/python 

wget https://www.python.org/ftp/python/3.5.4/Python-3.5.4.tar.xz 

yum install zlib-devel bzip2-devel openssl-devel ncurses-devel sqlite-devel readline-devel tkdevel gcc make -y

# unzip
xz -d Python-3.5.4.tar.xz
tar -xvf Python-3.5.4.tar 
cd Python-3.5.4
 
# compile and link 
./configure -prefix=/usr/local/python3 
make && make install
 
# create soft link 
ln -s /usr/local/python3/bin/python3 /usr/bin/python3 
ln -s /usr/local/python3/bin/pip3 /usr/bin/pip3 
ln -s /usr/local/python3/bin/virtualenv /usr/bin/virtualenv