开发小计
提刀向太守
花青蛙,叫呱呱 呱…… 呱……呱
展开
-
开发小计 - 排查Inodes过多问题
记录开发中遇到的小问题原创 2022-02-07 16:20:58 · 450 阅读 · 0 评论 -
开发小计-hive数据异常(二)
最近执行hive 脚本重跑数据的时候,出现数据重跑失败,创建的是外表。重跑数据报以下异常: // ${hdfsPath} 为具体的hdfs 路径,此处做伪代码处理 INFO Failed with exception java.io.IOException:rename for src path: ${hdfsPath} to dest path:${hdfsPath} returned false INFO FAILED: Execution Error, return code 1 from o.原创 2021-10-19 19:30:28 · 201 阅读 · 0 评论 -
开发小计-传输hive 文件(一)
如何执行hive 脚本,得到结果,并传送至目标机器 1、手写SQL脚本文件。 select * from t where dt="20210926" 可以直接写 hive -e ,也可以存储为脚本文件file.sql 2、执行结果输入到当前机器 hive -e xxx > result.txt 或 hive -f file.sql > result.txt 3、传送目标机器 scp ${本地文件} {远程机器用户名}@{远程机器IP}:{远程机器目标地址}...原创 2021-09-27 11:41:33 · 84 阅读 · 0 评论