Oozie在ubuntu下的安装

最新推荐文章于 2022-06-30 17:46:32 发布
最新推荐文章于 2022-06-30 17:46:32 发布
阅读量621 收藏
点赞数
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/playmobil1/article/details/12946733
版权

1，http://oozie.apache.org/下载oozie3.3.2，虽然最新的4.0已经发布了，但是暂时先用一个常用的吧，顺便下载所需的ext2.2.zip，把oozie解压，ext2.2放在常用tools目录；

2，去oozie的bin目录下，使用./mkdistro.sh -DskipTests，后面的参数是为了跳过测试，测试时间太长了！

3，在distro/target/oozie-3.3.2-distro目录里面找到oozie，把他copy到工作目录；

4，把oozie需要的hadoop jar包拷贝过去，OOZIE_HOME/bin/oozie-setup.sh -hadoop 0.20.2 ${HADOOP_HOME} -extjs /home/work/tools/ext-2.2.zip，

留意 hadoop-core-1.1.2.jar和commons-configuration-1.6.jar在不在oozie/oozie-server/webapps/oozie/WEB-INF/lib里面，没有的话，在hadoop目录找到这两个jar包，copy过去。

5，运行bin/oozie-start.sh，如果localhost:11000/oozie可以出现界面，说明成功了

playmobil1
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
Oozie4.2 安装部署、以及example测试
Lucius的专栏
08-01 1万+
编译： 使用的环境是：Hadoop2.6.0、Spark1.4.0、Hive0.13.1、Sqoop1.4.4 编译Oozie的命令：./mkdistro.sh -Phadoop-2 -Dhadoop.auth.version=2.6.0 -Ddistcp.version=2.6.0 -Dsqoop.version=1.4.4 -Dhive.version=0.13.1 -Dpig.versi
oozie 安装
空中的鱼
07-13 318
废话不多说，直接步骤 安装 准备： oozie-3.3.2,oozie-4.0.0在执行oozie-setup.sh时失败，所以选取3.3.2版本 mysql hadoop-1.0.3 apache-6 mavn3（必须是3或者以上版本） ext-2.2.zip拷贝至oozie-3.3.2目录下 创建 oozie 组和用户 /usr/sbin/groupadd oozie /usr/sbin/u
Oozie安装的前提环境安装（虚拟机，ubuntu16.04，mysql，hadoop）
qq_38358499的博客
09-02 3528
概念引入 一个任务可能涉及到很多个作业1，2，3，4。若作业1完成后的结果给到作业2，作业2和作业1的结果又给到作业3程序进行操作，2和3运行完的结果再给到下一个作业进行运行操作。这样下来费时耗力，因此，oozie被提出，能够把多个作业组合为一个逻辑工作单元（一个工作流），从而自动完成任务调用的工具。 简介 四大调度框架之一：数据转换工具Sqoop，文件收集库框架Flume，大数据WEB工...
Oozie安装
12-15 3071
安装基础环境 Maven-3.9.0 Hadoop-2.7.1 Server安装 解压oozie-4.3.0.tar.gz 将oozie的安装包解压到/usr/local目录下： /usr/local/oozie-4.3.0 修改pom.xml <targetJavaVersion>1.8</targetJavaVersion> <...
安装和配置 Oozie
magina507的博客
06-18 2453
安装和配置 Oozie
oozie 安装和运行
徒步成长 --记录我的点滴
04-24 5472
1:安装oozie需要的三个文件：    (1):oozie-3.0.0.distro.tar.gz    (2):ext-2.2.zip    (3):tomcat 2:安装和配置：    建立/usr/oozie ;并将oozie-3.0.0.distro.tar.gz 解压到该目录下；    建立/usr/tomcat;并将tomcat 解压到该目录下；    建立/u
Oozie的安装和使用
需要远程指导仿真实验、代码有问题的，请后台私信或者关注公众号
06-30 1272
本实验练习Oozie的安装和配置，然后运行例子进行oozie的功能测试。学会Oozie的安装和使用Ubuntu16.04、mysql-5.7.22、oozie-4.3.0、hadoop-2.7.3、jdk1.8.0_73解压编译好的oozie安装包，然后进行配置,配置主要有hadoop文件的配置和oozie文件的配置。 ♥ 知识链接 oozie简介   Oozie是一种Java Web应用程序，它运行在Java servlet容器——即Tomcat——中，并使用数据库来存储以下内容：1.工作流定义，2.当前
从头开始 手把手 oozie 安装配置 with an example
My Sunshine
11-20 7849
安装前准备 安装hadoop，可参考文章：https://blog.csdn.net/lucylove3943/article/details/80589422 不需要pig, hive, spark等等。就follow这两篇blog，一切搞定。 一些必要的安装工作 Maven安装 进入maven 下载页面：https://m...
ubuntu18安装CDH6.3.1
zhdan~的专栏
02-02 3423
ubuntu18安装CDH6.3.1
Oozie 调用 Spark on Yarn：傻瓜教程从编译，配置安装到运行
My Sunshine
11-19 828
安装前准备： 安装hadoop，可参考文章：https://blog.csdn.net/lucylove3943/article/details/80589422 安装spark，可参考文章：https://blog.csdn.net/lucylove3943/article/details/96477861 我当前电脑安装的hadoop版本是2.9.2，spark的版本是2.4.4，和上面...
oozie的安装和使用
08-01
包括安装，配置，使用，shell action ，hive action，MapReduce action，sqoop action。
环境搭建（四）oozie3.3.2（ubuntu10.0.4）
wallacegui的专栏
04-16 500
.环境搭建(5)oozie3.3.2 转至元数据结尾 Created and last modified by 刘桂林 on 三月 11, 2015 转至元数据起始 考虑到hadoop-spark-oozie体系的稳定性，这里配置oozie3.3.2 Step-by-step guide 准备工作 安装mysql
oozie4.3编译、安装和启动
四国棋客
10-02 284
背景 昨天在学习《Hadoop权威指南》中关于oozie的内容，本以为不算难，结果却踩了不少坑 环境 由于oozie编译时只能运行sh文件，所以不可避免要安装Cygwin。64位的Cygwin下载地址如下 链接：https://pan.baidu.com/s/1RoL6lyvPyiFPwVEVfowvgg ，提取码：ioi8 安装过程请参见博文https://blog.csdn.net...
Oozie 4.3.0运行Error: …
flash胜龙的博客
04-21 890
fs://master2host:9000/user/master2/share/lib/spark/py4j-0.9.jar,hdfs://master2host:9000/user/master2/share/lib/spark/avro-ipc-1.7.7-tests.jar,hdfs://master2host:9000/user/master2/share/lib/spark/quasi
Oozie 安装 （编译）
zerokissingthefire的博客
04-11 2513
根据官网要求需要的环境如下 安装maven 下载链接Maven – Download Apache Maven 上传至服务器解压 修改环境变量 source 配置文件生效 source /etc/profile 测试是否安装成功 mvn -version 为了编译速度更快可以将maven源改成阿里源 修改方法就是将 安装msyql 这里就不多赘述自行安装 下载oozie 上传服务器解压 tar -xzvf oozie-4.3.1.tar...
安装Oozie的一路坎坷之九九八十一
酒鬼の博客
07-07 763
这里写目录标题前提梗概安装Oozie前的申明使用Docker构建Oozie1、编译发行包2、 使用docker构建Oozie运行Oozie运行案例测试， oozie安装包里自带的例子：map-reduce. 前提梗概 适用于Hadoop的Apache Oozie Workflow Scheduler 总览 Oozie是一个工作流调度程序系统，用于管理Apache Hadoop作业。 Oozie Workflow作业是操作的有向无环图（DAG）。 Oozie Coordinator作业是由时间（频率）和数据可
OOZIE系统成功在hadoop-2.7.3版本…
flash胜龙的博客
04-21 3121
先上图： 　　可以发现oozie和yarn与jobhistory里面的东西是一一对应的。 　　这玩意整起来真是够呛，首先编译安装就会遇到一大堆问题。之前网上看到有推荐将maven转换为中国源可以加速依赖包的下载，结果实验发现这个中国的源居然是无法访问的……Orz只能老实从美国源龟速下载啦……Orz囧。之后又得在hadoop和oozie里面两头跑来回配置，简直要崩溃。被ubuntu系统该死的12
oozie4.3.0安装过程(支持python spark action)
xyf123的专栏
03-11 5295
因本人工作环境需要用到oozie的spark action，oozie4.2.0不支持workflow工作流目录lib子目录下的jar包自动加载，故采用oozie-master的源码（版本为oozie 4.3.0-SNAPSHOT）， 同时为使oozie spark action支持python文件，本人修改了若干源码，将在后面加以说明 1、安装环境 centos: 6.6 jdk
oozie的安装配置
不积跬步，无以至千里；不积小流，无以成江海。
10-10 2666
1.下载oozie http://archive.cloudera.com/cdh5/cdh/5/oozie-4.1.0-cdh5.5.2.tar.gz 解压到指定路径 /usr/local/ tar -xvf oozie-4.1.0-cdh5.5.0-sdh.tar.gz 2.修改配置文件 修改oozie/conf/oozie-site.xml <property...
OOZIE配置与调度详解
在`oozie_run`文件夹下，这些文件协同工作，确保作业按照预设的时间表和逻辑正确运行。 总结起来，OOZIE作为一个强大的工作流管理系统，通过灵活的配置和调度机制，使得大数据处理任务的组织和管理更加高效和可靠。...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值