Hive-SQL实现连续多天任务失败的情况

问题

任务执行会记录执行情况现在要查询任务连续3天执行失败的情况

思路

• 使用hive窗口先对任务进行分区，然后按日期进行排序
• 然后找到任务失败的的第一天，然后通过data_sub函数找到第二天，第三天

SQL实现

• SQL内容

-- job_id连续 n天 staus = 'FALI' 失败的数据
  select t2.job_id,t2.biz_date,t2.date_diff from
 ( select  t1.job_id,t1.biz_date,date_sub(t1.biz_date,t1.bz) date_diff  from
 	( select *,rank() over (partition by job_id order by biz_date) as bz  from ods.ods_wdp_schedule_bi_scheme_node where  status = 'FAIL' ) t1
 ) t2 
  group by t2.job_id,t2.date_diff,t2.biz_date
   having count(t2.job_id) > 3

• 注: ：hive 需要在每个子查询后面加别名。