牧锋-CSDN博客

原创 Mysql 不能通过子查询同一张表进行update操作。

cat表的内容执行delete的报错：[2020-05-22 15:56:18] [HY000][1093] You can't specify target table 'cat' for update in FROM clause修改sql为：delete from cat where id in (select t1.id from (select id from cat ...

2020-05-22 16:03:21 702

原创 odps 过滤某一个key的值时的坑

insert overwrite table table_name partition(key='111')select col ,col2 ,col3 from table_name where key='111' and col <> '2311'尼玛，不等于的null值不参与比较。得这么玩insert overwrite tabl...

2019-10-18 10:13:21 392

原创本地日志文件输出成HTML格式

需求：分布式应用 server 获取不同worker应用日志展示到前台服务端的service方法，把@Servicepublic class LogService { @Value("${client.dataxlogpath}") private String dataXLogPath; public String getLog(String taskI...

2019-07-30 18:10:50 988

原创 shell在变量中使用awk命令查找两个数组的差集

生产环境中需要获取原端和目标端的已由文件的差异情况，因为在docker中运行，要求尽量避免落地文件，所以采用比较暴力的比对方式：for i in `echo -e "${source}"`do j=`echo -e "${local}"|grep ${i}$` if [[ "${j}" == "" ]] then str="${str} ${i}" ...

2019-03-08 16:54:13 3443

原创 mac OS系统使用 IDEA开发程序访问虚拟机 Hadoop HA的 HDFS访问失败

就是在你所有的配置都成功了，但是物理机用IDEA开发程序，访问HDFS失败的时候。看看下面报错 Call From jinshengkaideMacBook-Pro.local/192.168.121.1 to master2:9000 failed on connection exception: java.net.ConnectException: Connection r...

2018-09-06 11:11:41 1119

AIX上的时间是标准时区，伦敦时间我们抽取ogg在昨天的日志时，发现0:00的那些目录文件，会把前天的数据写进去。经检查发现AIX的标准时间为伦敦时间北京是东八区，需要减八小时TZ=aaa16 date +%Y-%m-%d+" " +%H:%-M:%-Sbizdate=`TZ=aaa16 date +%Y-%m-%d`附上时区KLT +14:00 基里巴斯线岛时间NZDT +13:00 新西兰夏时...

2018-04-16 16:38:11 2829

原创 Linux基本目录

/etc 存放配置文件/bin 重要的执行文件，启动时会调用的命令/dev 所需要的设备文件/lib 执行文件所需要的函数库与内核所需要的模块/sbin 重要的系统执行文件/opt 第三方软件/var 系统运行后渐渐占用硬盘的目录./当前目录../上一层目录- 前一个目录～account 用户的Home 目录pwd -p 显示非连接目录mkdir -p a/b/c/d 递归创建目录mkdi...

2018-04-16 15:32:01 119

原创 Shell 笔记

awk -F , '{gsub(regular expression, subsitution string, target string)}' gsub(/"[^"]*"/,"");print NF替换双印中间的非引号，打印列数$NF最后一列cp -a = -pdr-p文件属性一同复制-d 复制连接文件属性-f ...

2018-04-16 10:02:26 215

原创正则表达式替换中文字符前面的换行符

数据aaaacccc哈哈哈dddd需要的结果aaaacccc哈哈哈dddd查找目标\n([^a-zA-Z0-9])中文[\u4E00-\u9fa5]我试了，结果不好用替换目标$1

2018-04-12 15:41:07 1265

牧锋的博客