- 博客(4)
- 收藏
- 关注
RSS订阅原创 Scala 获取8位数日期 前7天日期
Scala 获取8位数日期 前7天日期 val format1 = new SimpleDateFormat("yyyyMMdd") val date: Date = format1.parse(runDate) val cal = Calendar.getInstance() cal.setTime(date) cal.add(Calendar.DATE, -7) val date1: String = format1.format(cal.getTime)
2021-08-07 16:17:20
292
原创 hive 分区表全量count(1)出现错误，单独查分区没问题
hive 分区表全量count(1)出现错误，单独查分区没问题CDH5 中 hive1.1 版本，当修改表格的元数据信息后，使用ORC格式的文件与Hive的矢量化特性不兼容 ，需要先设置矢量化为falseset hive.vectorized.execution.enabled=false;set hive.vectorized.execution.reduce.enabled=false;...
2020-12-04 17:27:01
784
原创 hive 大小表mapjoin 遇到udf失效问题
hive 大小表mapjoin 遇到udf失效问题执行结果有三个重要信息：/tmp/liangxin/liangxin_20201026173636_ddccc70a-1019-49d4-9cc8-6b072023187a.logStage-4/tmp/liangxin/hive.log问题分析：打开第一个文件发现udf函数没找到，对比执行sql，on dwc_mart.transtring(a.altitem)=dwc_mart.transtring(b.pa_code)
2020-12-02 11:08:16
835
1
原创 shell 获取当月最后一天的方法
shell 获取当月最后一天的方法先获取下个月的第一天，再取lastday先获取下个月的第一天，再取lastdaynextmonth=date -d "+1 month" +%Y-%m-01echo $nextmonthenddate=date -d"$nextmonth last day" +%Y-%m-%d #上个月最后一天echo ${enddate}...
2020-12-02 10:46:40
4006
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人