- 博客(5)
- 收藏
- 关注
RSS订阅转载 分布式airflow下的日志中文乱码问题
[toc]分布式airflow下的日志中文乱码问题背景我们的airflow部署方式为分布式的，在主节点上部署了webserver，worker节点部署了worker和日志服务器，并没有将日志写入远程服务器，所以任务的日志是直接写本地磁盘并通过日志服务器传输给webserver进行展示的。...
2019-08-06 17:39:00
659
转载 分布式airflow搭建（不使用git或共享存储实现dag目录同步——xsync）
集群资源分配\master1master2slave1slave2slave3组件scheduler, webserver, flower, airflow-scheduler-failover-controllerwebserver, airflow-sche...
2019-08-01 11:27:00
1566
转载 hue安装，hive hdfs oozie集成
[toc]环境需求jdkmavengit第三方依赖 yum install -y gcc-c++ libxml2-devel.x86_64 libxslt-devel.x86_64 python-devel openldap-devel asciidoc cyr...
2019-07-04 14:18:00
190
转载 airflow使用mysql数据库，LocalExecutor并发调度
mysql-airflow在mysql上执行create database airflow; —— 创建数据库GRANT all privileges on airflow.* TO 'airflow'@'%' IDENTIFIED BY '123456'; —— 将数据库airflo...
2019-07-03 20:35:00
610
转载 airflow单机版搭建记录——不使用mysql,redis
[toc]airflow单机版搭建记录环境准备Python(pip)——airflow由python编写安装airflowpip install apache-airflow环境变量配置本人是在root用户下执行，可自行选择export AIRFLOW_HOME=~/airfl...
2019-07-03 20:34:00
587
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人