- 博客(6)
- 资源 (18)
- 收藏
- 关注
原创 sqoop导入导出
sqoop看了这么多,昨天犯了一个低级错误,把没有经过hive或者hbase处理的数据直接导出到mysql,这样默认支持的列分隔符是‘,’,而我的是'\t',所以老是报错,后来改了一下,把列分割符改成hive的默认分隔符'\001',成功!!!
2016-01-15 14:41:28 559
原创 hive组件二次开发之HiveF
本文详细介绍了关于hive -f 组件的封装,原因是,hive -f 组件虽然能封装文件,却无法传参,给开发带来诸多不便,如今我们用Java代码完成sql传参,用hive -e执行传参后的sql语句
2016-01-15 14:24:41 961
原创 hadoop运营管理岩机,坏块,负载均衡
我们在企业中很容易遇到以下问题:岩机(重启无效),坏块,负载均衡。岩机,其实很简单,我们把那个进程杀死就是了。坏块怎么办,hadoop修复坏块的能力很慢,我们要等他自己修复吗???NO!!!hadoop fsck / -delete ,这个命令删除坏块。负载均衡呢,其实很多人说,可以把blanacer服务打开,可是这是对于集群而言,要是我说的负载均衡是指一个服务器内两块磁盘的负载均衡,如何???将对应的/data/hadoop/dn/current/下的块文件移到占用率少的磁盘对应的文件夹下。
2016-01-06 15:59:06 1317
原创 关于jps命令-bash: jps: command not found 解决方案
centos6.3 64位有Java1.5自带,当我安装CDH4时,习惯用老的方法来查看进程是否正确启动,即jps,可是他却告知-bash: jps: command not found原因很简单,java1.5没有jps命令以下为解决方式:查看Java1.5位置[hadoop@master bin]$ which java/usr/bin/java
2016-01-01 16:47:05 63719 4
异步校验jquery-ajax
2015-04-12
hibernate自动化工具
2014-12-15
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人