Azkaban-3.84.4 兼容 mysql-8.0

本文档详细介绍了如何使Azkaban 3.84.4版本兼容MySQL 8.0。包括前期环境准备,如安装git和gcc,配置gradle,以及编译Azkaban源码的步骤,特别是针对MySQL驱动的修改。同时,还涵盖了使用编译后的包搭建环境的过程,如删除旧包,导入新包,配置executor和webServer,以及成功访问和验证Azkaban服务。
摘要由CSDN通过智能技术生成

1.简介

学习尚硅谷的azkaban课程,教程视频里用的mysql5.x,自己机器装的8.x,导致启动executor连接不上,所以改着试试,让他兼容mysql8.x。参考电商数仓项目(五) azkaban安装、配置和使用

2.具体步骤

2.1 前期环境准备

2.1.1 所有服务器安装git,gcc (root) 编译要用么??

yum install -y git gcc*

2.1.2 下载安装 gradle 4.6 (/u02存zip包,/u01存软件)

wget https://downloads.gradle-dn.com/distributions/gradle-4.6-bin.zip
unzip gradle-4.6-bin.zip
mv gradle-4.6  /u01/gradle-4.6
cd /u01/gradle-4.6
mkdir repo user_home    ## 本地库??
cd init.d
vi init.gradle
[root@hadoop102 init.d]# cat init.gradle 
allprojects {
   
    repositories {
   
        maven {
    url 'file:/u01/gradle-4.6/repo'}
        mavenLocal()
        maven {
    name "Alibaba" ; url "https://maven.aliyun.com/repository/public" }
        maven {
    name "Bstek" ; url "http://nexus.bsdn.org/content/groups/public/" }
        mavenCentral()
    }

    buildscript {
   
        repositories {
   
            maven {
    name "Alibaba" ; url 'https://maven.aliyun.com/repository/public' }
            maven {
    name "Bstek" ; url 'http://nexus.bsdn.org/content/groups/public/' }
            maven {
    name "M2" ; url 'https://plugins.gradle.org/m2/' }
        }
    }
}

2.1.3 配置gradle环境变量

## 添加到自己的环境变量里
export GRADLE_HOME=/u01/gradle-4.6
export GRADLE_USER_HOME=/u01/gradle-4.6/user_home
export PATH=$PATH:$GRADLE_HOME/bin
[root@hadoop102 profile.d]# cat my_env.sh 
#JAVA_HOME
export JAVA_HOME=/opt/module/jdk1.8.0_212
export PATH=$PATH:$JAVA_HOME/bin
#HADOOP_HOME
export HADOOP_HOME=/opt/module/hadoop-3.1.3
export PATH=$PATH:$HADOOP_HOME/bin
export PATH=$PATH:$HADOOP_HOME/sbin
#HIVE_HOME
export HIVE_HOME=/opt/module/hive-3.1.2
export PATH=$PATH:$HIVE_HOME/bin
#KAFKA_HOME
export KAFKA_HOME=/opt/module/kafka-3.0.0
export PATH=$PATH:$KAFKA_HOME/bin
#GRADLE_HOME
export GRADLE_HOME=/u01/gradle-4.6
export GRADLE_USER_HOME=/u01/gradle-4.6/user_home
export PATH=$PATH:$GRADLE_HOME/bin

2.2 编译azkaban-3.84.4

2.2.1 下载对应源码包

应该是从这里azkaban-3.84.4

 wget https://github.com/azkaban/azkaban/archive/refs/tags/3.84.4.tar.gz
 tar -zxvf 3.84.4.tar.gz 
  cd azkaban-3.84.4/
  

2.2.2 修改对应的mysql版本

1)azkaban-3.84.4目录下的build.gradle文件107行


                
  • 4
    点赞
  • 7
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
安装和配置Azkaban 3.84.4的步骤如下: 1. 下载Azkaban 3.84.4的安装包。可以从引用\[1\]中提供的链接下载,或者从其他可靠的来源获取。 2. 解压安装包。根据引用\[1\]和引用\[2\]的指示,使用tar命令解压安装包,并将解压后的文件夹重命名。 3. 选择Mysql作为Azkaban的数据库。根据引用\[3\]的建议,使用Mysql作为Azkaban的数据库,因为它提供了一些增强功能和可靠性。 4. 创建安装目录。根据引用\[3\]的指示,创建一个目录来存放Azkaban的安装文件。 5. 解压并重命名其他组件。根据引用\[2\]和引用\[3\]的指示,解压并重命名Azkaban的其他组件,如执行服务器和Web服务器。 6. 发送SQL文件。根据引用\[3\]的指示,将创建所有SQL文件发送到指定的目录。 7. 导入Azkaban脚本。根据引用\[3\]的指示,使用Azkaban脚本导入所需的配置。 请根据上述步骤进行Azkaban 3.84.4的安装和配置。 #### 引用[.reference_title] - *1* *2* [Azkaban-3.84.4 兼容 mysql-8.0](https://blog.csdn.net/qq_33316544/article/details/125074262)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^insertT0,239^v3^insert_chatgpt"}} ] [.reference_item] - *3* [黑猴子的家:Centos7 安装部署 Azkaban 3.84.4](https://blog.csdn.net/qq_28652401/article/details/117772402)[target="_blank" data-report-click={"spm":"1018.2226.3001.9630","extra":{"utm_source":"vip_chatgpt_common_search_pc_result","utm_medium":"distribute.pc_search_result.none-task-cask-2~all~insert_cask~default-1-null.142^v91^insertT0,239^v3^insert_chatgpt"}} ] [.reference_item] [ .reference_list ]
评论 1
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值