记使用azkaban的遇到的错误

最新推荐文章于 2022-10-19 12:48:17 发布
最新推荐文章于 2022-10-19 12:48:17 发布
阅读量627 收藏
点赞数 1
分类专栏： 常见错误
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/biuubi/article/details/117375148
版权
本文讲述了在启动Azkaban Solo Server时遇到的‘database.properties’文件丢失问题，通过理解Azkaban的相对路径依赖，提出了解决方案，即切换到正确路径并提供完整配置文件。
摘要由CSDN通过智能技术生成

[hadoop@hadoop001 azkaban-solo-server]$ bin/start-solo.sh
2021/05/28 21:51:54.381 +0800 ERROR [AzkabanWebServer] [Azkaban] Failed to start single server. Shutting down.
java.io.IOException: Cannot find ‘database.properties’ file in /opt/apps/azkaban/soloserver/bin/sql/database.properties

在这里插入图片描述

返回到azkaban-solo-server根目录

[hadoop@hadoop001 bin]$ cd …/

再执行带bin路径的启动命令

为什么要这样呢，是因为azkaban使用的好像都是相对路径，你在别的路径下执行，它就会找不到文件

biuubi
关注
专栏目录
启动azkaban报错_启动azkaban报错
weixin_39620684的博客
12-21 809
按照文档配置、启动，启动的时候报错，1、在bin下，启动./azkaban-web-start.sh报错Using Hadoop from /home/hadoop/hadoop-2.6.0Using Hive from./..:./../lib/azkaban-2.5.0.jar:./../lib/commons-collections-3.2.1.jar:./../lib/commons-co...
启动azkaban报错_解决启动Azkaban报错问题：java.lang.NoSuchMethodError: com.google.common.collect.ImmutableMap.toIm...
weixin_39888180的博客
12-21 453
问题描述：启动Azkaban报错：java.lang.NoSuchMethodError:com.google.common.collect.ImmutableMap.toImmutableMap解决方法：从报错信息来看，是找不到toImmutableMap这个方法。首先找到类ImmutableMap对应的Jar包为guava，然后在服务器查找这个Jar包：find / -name "guava*...
azkaban启动时出现错误：Could not find or load main class 12321
m0_48830183的博客
02-23 660
记录一次azkaban启动时出现的错误：找不到或无法加载主类 12321 Azkaban无法启动错误Error: Could not find or load main class 12321 网上查找了很久，都是说： A 检查自己的配置文件是否有多个端口配置 B 换个端口试一下，看看是否能够启动 我都尝试了，没有用。最后发现竟然时我在配置端口号的时候在前面多了一个空格，如图： 把空格去掉然后重新启动就好了。 ...
Starting Jetty Azkaban Executor...
xiao111_xiao111的博客
03-12 924
Azkaban部署时遇到的问题：Starting Jetty Azkaban Executor…] 个人在学习部署Azkaban的过程中遇到的问题，希望可以提供给和我遇到同样问题的朋友一些参考，不喜勿喷 ** 实际问题场景：** 在centos7中部署Azkaban启动过程中，executor正常启动，但是server启动失败，在server/currentpid中可以看到启动线程号，jps查看不...
Azkaban 3.X Cannot find 'database.properties' 踩坑
SUDDEV的博客
09-25 1820
前言 今天下载azkaban并编译，使用solo模式运行。在我解压后运行start-solo.sh时出发现运行失败，查看日志发现如下错误 [hadoop@hadoop001 azkaban-solo-server]$ tail bin/soloServerLog__2019-09-25+15\:43\:52.out 2019/09/25 15:44:00.193 +0800 INFO [Azka...
azkaban-3.72.1.tar.gz
05-14
在使用过程中，可能遇到的问题包括依赖下载失败、编译错误、配置错误等，这些都需要根据日志信息进行排查和解决。对于大型项目，建议在持续集成/持续部署（CI/CD）环境中进行编译和部署，以确保稳定性和一致性。
Azkaban Schedulis安装问题记录
Ellinor的博客
12-30 736
参考官方安装手册： Schedulis 是一个批量任务调度系统   Schedulis安装问题记录   1、连接不上数据库 Executor Server：common.properties 说了要用base64加密，密码也是要加密的，就我憨，没加密     2、两个azkaban.properties端口没对上，访问不到页面 Executor Server：azkaban.properties Web Server：azkaban.properties 这两个
工作流调度器Azkaban学习
热门推荐
Hello World
01-23 1万+
1、Azkaban是什么      我们在工作中应该都遇到过这样的场景：有一个任务，这个任务可以划分成多个较小的任务完成，之所以进行划分是因为小任务之间可以并发的进行，例如是一个shell脚本执行的命令吧，大任务A可以划分成B、C、D、E四个子任务（脚本）完成，而B和C是可以同时进行的，D依赖B和C的输出，E又依赖D的输出，于是我们一般的做法可能就是开两个终端同时执行B和C，等两个都
Azkaban的安装与配置详解
- 提供直观的Web界面，易于使用和操作。 - 支持创建复杂的工作流，包括任务依赖、工作流触发器等功能。 - 可以调度和监控Hadoop作业，提高作业的可靠性和执行效率。 ## 1.3 Azkaban的优势和适用场景 - 优势：简单...
Azkaban中任务失败处理策略
什么是Azkaban及任务失败处理策略简介 ## 1.1 Azkaban是什么 Azkaban是一个基于Web的工作流调度器，用于协调Hadoop作业的启动。通过Azkaban，用户可以轻松地创建、调度和监控基于Hadoop的作业流程。 ## 1.2 任务...
azkaban启动时报错
流的博客
11-29 979
报错 6.0/conf:/home/hadoop/hadoop-2.6.0/*:/conf:/lib/* [root@itcast01 bin]# Invalid maximum heap size: -Xmx4G The specified size exceeds the maximum representable size. Error: Could not create the Java ...
azkaban报错
最新发布
weixin_45989161的博客
10-19 379
azkaban的web页面进不去
azkaban的启动失败必坑指南
AmOneBird的博客
12-11 3967
项目场景： 最近在学习工作流调度系统Azkaban时遇到的bug 问题描述： 在azkaban-exec-server-3.84.4目录下执行:bin/bin/start-exec.sh 启动executor 老是不能启动成功 在目录下未生成 executor.port文件 却生成了两个其他文件，貌似 .out文件是log文件， [robot-0@robot-2 azkaban-exec-server-3.84.4]$ cat executorServerLog__2021-12-11+20\:34\:1
Azkaban报错总结
默主归沙的博客
03-26 964
1、azkaban job Preparing 解决方法： 修改 web-server conf/azkaban.properties 配置。 # execute 主机过滤器配置, 去掉 MinimumFreeMemory # MinimumFreeMemory 过滤器会检查 executor 主机空余内存是否会大于 6G，如果不足 6G，则 web-server 不会将任务交由该主机执行 azkaban.executorselector.filters=StaticRemainingFlowSize,Cp
Azkaban 安装(3.x)
u011500419的专栏
04-25 433
原文：https://blog.csdn.net/hg_harvey/article/details/80342396 1.Azkaban 简介 官网：https://azkaban.github.io/ Azkaban 一个批量工作流任务调度器，使用Java语言开发。用于在一个工作流内以一个特定的顺序运行一组工作和流程。Azkaban使用job配置文件建立任务之间的依赖关系，并提供一...
ambari2.7.3离线安装hdp3.1.0时，ambari-hdp-1.repo中baseurl无值
weixin_40578968的博客
07-30 6430
一、问题 stderr: Traceback (most recent call last): File "/var/lib/ambari-agent/cache/stack-hooks/before-INSTALL/scripts/hook.py", line 37, in <module> BeforeInstallHook().execute() File "/usr/lib/ambari-agent/lib/resource_management/librari...
启动azkaban报错
leezsj的博客
07-24 300
Exception in thread "main" java.io.IOException: Cannot find 'database.properties' file in /usr/local/azkaban-solo/bin/sql/database.properties at azkaban.database.AzkabanDatabaseSetup.loadDBProps(AzkabanDatabaseSetup.java:178) at azkaban.d...
安装azkaban踩的坑
qq_46344415的博客
07-31 713
1、2021/07/31 10:07:02.259 +0800 ERROR [DataSourceUtils] [Azkaban] MySQL connection test failed. Please check MySQL connection health! 解决：将azkaban/webserver/lib的mysql驱动换成8的 2、2021/07/31 10:16:28.721 +0800 WARN [log] [Azkaban] failed Server@1800a575: java.i
Azkaban启动报错解决
weixin_45030023的博客
09-30 2907
环境： 一台虚拟机（web和exector都在一台机器上） MySQL 8.x（后面的问题多因他而起） Hive-3.1.2 Azkaban-exec-server-3.84.4 Azkaban-web-server-3.84.4 1、SLF4J问题： ERROR [StdOutErrRedirect] [Azkaban] SLF4J: Class path contains multiple SLF4J bindings. 2021/09/30 10:02:31.820 +0800 ERROR [StdO
Azkaban任务调度服务简介及使用指南
Azkaban 任务调度服务简介与使用 Azkaban 是一个简单的任务调度服务，整体包括三部分：AzkabanWebServer（前端展示）、dbserver（关系型数据库：H2、Mysql）、AzkabanExcutorServer（job 指令执行）。Azkaban 是 ...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值