oozie 定时调度时区设置

转载 2015年07月09日 11:13:03

oozie是hadoop的工作流,能够调度hadoop的相关任务,在这里说一下oozie的时区问题。

时区概念

大家应该知道,地球上按照经纬度将地球划分为二十四个时区(东、西各12个时区),每两个相邻的时区间时间上相差1小时。

标准时间概念

UTC是世界标准时间,指的是零时区(英国格林尼治天文台旧址)里的时间。

中国时区

中国所在的时区为东八区,所以中国的时间应该是UTC时间加上8个小时,即常见的UTC+8时间。

oozie所用时区

oozie规定只使用UTC时间,也就是说,我们在做定时任务调度的时候,所使用的时间是标准时间而不是北京时间,所以假如我们要在2014年6月19号上午9点开始我们的定时任务,那我们的开始时间就要设定为2014年6月19号凌晨1点

 

oozie timezone时区配置

cloudera oozie默认时区是UTC,在开发oozie任务时必须在期望执行的时间上减去8小时,很不习惯。记录下修改时区的配置操作。 1. cloudera oozie配置—>Oozie Ser...
  • dlg07
  • dlg07
  • 2016年03月11日 17:51
  • 3282

oozie定时调度的配置说明第一篇

如果需要做一个循环的定时调度,基本的需要三个文件 job.properties 记录了job的属性workflow.xml 使用hPDL 定义任务的流程和分支coordinator.xml ...
  • oracle8090
  • oracle8090
  • 2017年01月22日 09:55
  • 4349

CDH5 Hue oozie 之 Coordinators 调度使用

CoordinatorsCoordinators: 调度作业执行(workflow)图例 1 :图例 2:图例 3 :图例 4 :图例 5 :图例 6 :图例 7 :图例 8 :Thanks for ...
  • xiewendong93
  • xiewendong93
  • 2017年01月12日 16:44
  • 737

oozie定时调度的配置说明第二篇

这一讲相对上一讲会稍微难点 job.properties 文件 和 coordinato.xml 上一讲已经讲过,本次就不再做过多的赘述了 job.properties # 集群参数 nameNo...
  • oracle8090
  • oracle8090
  • 2017年01月22日 13:17
  • 978

如果修改OOZIE JOB在OOZIE UI上保存的时间

可以查看org.apache.oozie.service.PurgeService这个类,里面有默认的设置是30天,通过以下配置可以进行修改。 There are properties for ...
  • xiao_jun_0820
  • xiao_jun_0820
  • 2015年02月09日 18:13
  • 1326

OOZIE系统成功【2】跑通定时调度的…

【要点】OOZIE跑spark程序会遇到这么一个奇葩的现象:在oozie查job的info,显示SUCCEEDED。去8088端口的yarn那儿查,也显示SUCCEEDED。然后进hdfs看看生成的结...
  • u010770993
  • u010770993
  • 2017年04月21日 10:54
  • 855

Oozie bundle定时调度多job

包含关系 实例 workflow1xml workflow2xml coordinator1xml coordinator2xml bundlexml jobproperties包含关系 几个包含...
  • goodstuddayupyyeah
  • goodstuddayupyyeah
  • 2017年07月06日 10:09
  • 575

CDH中oozie 定时调度sqoop job

在数据开发中,由于数据量非常的大,有时候需要将关系型数据库(Oracle/Postgresql/Mysql等)中的表导入到hdfs中进行分布式存储。本文就oozie定时调用sqoop job从orac...
  • Eason_oracle
  • Eason_oracle
  • 2017年10月24日 16:04
  • 309

oozie web-console 时间本地化

Oozie web console(版本oozie-3.2.0-incubating)显示的时间是GMT,始终跟北京时间差8个小时,且格式不好看,通过修改$OOZIE_HOME/oozie-serve...
  • cheersu
  • cheersu
  • 2012年11月13日 18:05
  • 2852

实战MYSQL数据库中配置时间调度器(继定时操作)

在项目中经常会遇到历史数据删除备份的事情,最近参加的一个移动项目使用MYSQL做数据存储,用户正好提到类似的需求。 回想之前在网站上看到过MYSQL中可以支持配置时间调度器,使用这个MYSQL自带...
  • baidu_30813789
  • baidu_30813789
  • 2015年09月07日 14:49
  • 808
内容举报
返回顶部
收藏助手
不良信息举报
您举报文章:oozie 定时调度时区设置
举报原因:
原因补充:

(最多只允许输入30个字)