Two Server Mode Missing required property 'azkaban.native.lib'

在这里插入图片描述

[root@hadoop000 azkaban-3.40.0]# cd azkaban-common/src/main/
[root@hadoop000 main]# ls
bash  java
[root@hadoop000 main]# pwd
/root/app/azkaban-3.40.0/azkaban-common/src/main
[root@hadoop000 ~]# find . -name execute-as-user.c 
./app/azkaban-3.40.0/az-exec-util/src/main/c/execute-as-user.c

#找到 execute-as-user.c

[root@hadoop000 main]# pwd
/root/app/azkaban-3.40.0/azkaban-common/src/main
[root@hadoop000 main]# cd ~
You have mail in /var/spool/mail/root
[root@hadoop000 ~]# find . -name execute-as-user.c 
./app/azkaban-3.40.0/az-exec-util/src/main/c/execute-as-user.c
[root@hadoop000 ~]# cd app/azkaban-3.40.0/az-exec-util/src/main/c/
You have mail in /var/spool/mail/root
[root@hadoop000 c]# ls
execute-as-user.c
[root@hadoop000 c]# 

创建 plugins/jobtypes 文件夹

复制

[root@hadoop000 c]# cp execute-as-user.c /root/app/azkaban-exec-server-0.1.0-SNAPSHOT/plugins/jobtypes
You have mail in /var/spool/mail/root
[root@hadoop000 c]# pwd
/root/app/azkaban-3.40.0/az-exec-util/src/main/c
[root@hadoop000 c]# 

改成root

[root@hadoop000 jobtypes]# gcc execute-as-user.c -o execute-as-user
[root@hadoop000 jobtypes]# ll
total 20
-rwxr-xr-x. 1 root root 13664 Oct 22 02:27 execute-as-user
-rw-r--r--. 1 root root  3976 Oct 22 02:23 execute-as-user.c
[root@hadoop000 jobtypes]# chown root execute-as-user
You have mail in /var/spool/mail/root
[root@hadoop000 jobtypes]# chmod 6050 execute-as-user

[root@hadoop000 jobtypes]# vim commonprivate.properties 
execute.as.user=false
azkaban.native.lib=/root/app/azkaban-exec-server-0.1.0-SNAPSHOT/plugins/jobtypes                                                                        
### 正确配置 Azkaban 的 `azkaban.native.lib` 参数 #### 1. 错误原因分析 当遇到错误提示 `Missing required property 'azkaban.native.lib'` 时,通常是因为 Azkaban 执行器无法找到指定的本地库路径。此参数用于定义 Azkaban 使用的原生库目录位置[^1]。 如果该属性未正确设置,则可能导致执行失败或插件加载异常。特别是在集群环境中,`azkaban.native.lib` 是必需的配置项,而不仅仅是一个可选选项[^4]。 --- #### 2. 配置文件说明 `azkaban.native.lib` 属性应在以下两个主要配置文件中进行设置: - **`commonprivate.properties` 文件** - 路径通常是 `/path/to/azkaban/conf/commonprivate.properties` - 添加如下内容并保存: ```properties azkaban.native.lib=/usr/local/azkaban/lib/native ``` - **`executor.properties` 文件** - 如果使用的是分布式环境,还需要在 executor 上同步配置。 - 编辑 `/path/to/azkaban-exec-server/conf/executor.properties` 并添加相同的内容: ```properties azkaban.native.lib=/usr/local/azkaban/lib/native ``` 上述路径应替换为实际安装 Azkaban 后解压包中的 native 库所在目录[^3]。 --- #### 3. 插件路径调整 除了 `azkaban.native.lib` 外,还需确认插件路径是否正确。默认情况下,Azkaban 支持通过 `azkaban.jobtype.plugin.dir` 来指定作业类型的插件目录。建议将其也更改为绝对路径以避免潜在问题。例如,在同一配置文件中加入以下内容: ```properties azkaban.jobtype.plugin.dir=/usr/local/azkaban/plugins/jobtypes ``` 完成以上更改后,需重新启动 Azkaban Web Server 和 Executor Server 服务以使新配置生效。 --- #### 4. 特殊场景处理 对于某些特定情况下的报错(如统计信息不可用),可能涉及数据库层面的操作。以下是常见解决措施之一: - 查询当前活跃节点状态: ```sql SELECT * FROM executors; ``` - 若发现无任何记录处于激活状态 (`active=0`) ,则手动更新对应主机的状态为活动模式: ```sql UPDATE azkaban.executors SET active=1 WHERE host='your_executor_host'; ``` 这一步骤适用于部分由于历史数据迁移或其他操作引发的异常状况[^5]。 --- #### 5. 测试验证流程 为了确保配置成功,可以按照以下方式进行测试: 1. 提交一个简单的 Shell Job 到 Azkaban; 2. 查看日志输出是否正常运行且不再抛出关于缺失 `azkaban.native.lib` 的警告消息。 --- ### 示例代码片段 假设我们有一个基本的工作流 JSON 定义文件作为输入样本: ```json { "nodes": [ { "id": "test-job", "type": "command", "configuration": { "command": "echo Hello, Azkaban!" } } ] } ``` 尝试上传至已修复配置后的实例上观察其表现。 ---
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

伟伟哦

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值