笔记
cdlgf
这个作者很懒,什么都没留下…
展开
-
Put request failed : INSERT INTO “PARTITION_PARAMS“ (“PARAM_VALUE“,“PART_ID“,“PARAM_KEY“) VALUES (?,
java.sql.SQLException: Error while processing statement: FAILED: Execution Error, return code 1 from org.apache.hadoop.hive.ql.exec.MoveTask. MetaException(message:Put request failed : INSERT INTO “PARTITION_PARAMS” (“PARAM_VALUE”,“PART_ID”,“PARAM_KEY”) V原创 2021-09-08 08:52:52 · 1080 阅读 · 0 评论 -
azkaban的flow文件邮件配置
在使用azkaban-flow-version: 2.0,邮件配置完成,在工作流的配置文件中配置任务失败的邮件地址# 配置全局异常任务失败后,邮件接收联系人config: failure.emails: [email protected] nodes: - name: noexist type: command config: command: sh /tmp/noexist.sh retries: 2 retry.backoff: 1000 在job.f原创 2021-08-13 14:35:25 · 343 阅读 · 0 评论 -
sed的一次使用记录
#!/bin/bash#展示文件夹下的文件前几行dir=/tmp/data/hasbeeline.txt#dir=/tmp/data/file.txtfor file in cat $dirdohead -n 10 $file#echo $file替换第一行sed -i ‘1c #!/bin/bash -x’ $file将函数插入第一行sed -i ‘1a function monitor_command_exec_issuccee(){\nif [ $? -ne 0 ]; then原创 2021-08-13 11:46:52 · 87 阅读 · 0 评论 -
azkaban日志重定向问题记录
azkaban在使用过程中,想着将shell脚本的日志进行重定向.```shellnodes: name: shtype: commandconfig:command: sh /tmp/lgftemp/sh.sh >> ./outaaa.log原创 2021-08-06 09:59:44 · 306 阅读 · 0 评论 -
hive表数据查询多个分区
查询ods_deal数据多个分区的数据#day为一天数分区的数据select * from ods_deal where day in (20210414,20210415);原创 2021-04-20 13:59:34 · 2186 阅读 · 0 评论 -
hive建表语句
创建一个外部表 CREATE EXTERNAL TABLE `dwd_dd`( `bsn_date` string, `sal_order_id` int, `sale_type` int, `lm_total_transacc` decimal(11,2))原创 2021-04-17 11:11:00 · 389 阅读 · 0 评论 -
Window系统重置系统后,帐户被禁用
方法一:①开始→运行→输入:CMD 点击确定(或按回车键),打开命令提示符窗口。② 键入 net user administrator /active:yes。输完后按一下回车键。③看到“命令成功完成”信息即表明系统管理员 Administrator 账户已启用...原创 2021-03-10 23:03:12 · 307 阅读 · 0 评论 -
自定义加载java数据库驱动异常
我们可以用自定义的 URLClassLoader 从外部动态加载类,并使用它。但数据库驱动的管理类 DriverManager 却不比较苛刻,不承认非当前应用系统加载器加载的驱动类。见 DriverManager 的 JavaDocWhen the method getConnection is called, the DriverManager will attempt to locate a suitable driver from amongst those loaded at initializa原创 2020-11-05 11:26:36 · 506 阅读 · 0 评论 -
2020-07-27
js处理文本,英文单词进行完整匹配(全量匹配)正则表达式正则表达式. /\b待替换的英文字母\b/img原创 2020-07-27 09:22:14 · 133 阅读 · 0 评论 -
2020-06-10
记录一次linux中java进程的cpu使用率过大问题将项目部署到linux上时,启动项目,过了两分钟,cpu使用率达到800%.使用top 命令查看,top -p 12368,发现cpu利用率居高不下,使用命令jstack -l 12368 > js tack.log输出日志,查看日志文件中有大量的GC,说明代码中有大量对象产生,或者有大对象。对本地代码查询发现在定时任务,执行的方法中有大量循环和对象的产生,关闭定时任务,优化代码后,本项目cpu利用率正常...原创 2020-06-10 14:37:06 · 139 阅读 · 0 评论