![](https://img-blog.csdnimg.cn/20201014180756925.png?x-oss-process=image/resize,m_fixed,h_64,w_64)
linux
优荣月华
这个作者很懒,什么都没留下…
展开
-
kettle linux hadoop 一些问题
最近在写linux使用kettle的定时转换方法,碰见了很恶心的问题原本流程是从本地读取文件到hdfs但是一直提示无法找到hdfs位置猜测原因是转换中的与这个相冲突,导致存储地址出现问题解决方法很简单,新建个转换,将读取文件操作放在里面,最后job运行时带上这个转换就可以了至于linux下读取存放文件路径问题,可以参考如下方法其中一定要设置文件编码为GBK,不然文件保存到hdfs里会成乱码...原创 2018-04-26 14:34:07 · 681 阅读 · 0 评论 -
linux kettle hadoop copy file 有时无法保存数据问题
通过脚本启动kettle的job时,会出现有时hadoop copy file 没有启动或运行的情况,其实这都是kettle自带的缓存问题,windows下不会出现这种情况,但linux下会导致一些时候没有启动hadoop copy file操作可以采用如下方式编写脚本将kettle里的缓存文件夹删除即可...原创 2018-04-27 13:23:41 · 1058 阅读 · 0 评论 -
linux 运行kylin自动rebuild脚本
自己写的定时脚本,用于跑kylin的build方法et=$[$(date -d "-1 day -2 hour -59 min" +%s%N)/1000000] curl -X PUT -H "Authorization: Basic QURNSU46S1lMSU4=" -H 'Content-Type: application/json' -d '{"endTime":'${et}', "bui...原创 2018-05-25 17:38:43 · 1365 阅读 · 0 评论