- 博客(5)
- 资源 (10)
- 问答 (4)
- 收藏
- 关注
原创 Hive 的insert into 和 insert overwrite
1、insert into 语句Hive> insert into table account select id,age,name from account_tmp;2、insert overwrite语句hive> insert overwrite table account2 select id,age,name from account_tmp;插入的数据: 001 20 zhangs
2017-04-28 14:49:27 113264 2
原创 linux 后台执行命令
怪自己太晚了解这个命令,nohup ,简直太好用了。nohup 意思是 no hang up ,表示不挂起, 使用方法:nohup Command [ Arg … ] [ & ]每次执行参数是时间的脚本时,都不敢将时间的范围写的太大,因为中断断开连接后,相应的进程也会在这种情况下,可以使用nohup 在后台执行:例如:nohup ./test.sh 2017-04-28 > log/test.lo
2017-04-28 10:54:44 805 1
转载 HADOOP HDFS BALANCER介绍及经验总结
1.集群执行balancer命令,依旧不平衡的原因是什么?该如何解决?2.尽量不在NameNode上执行start-balancer.sh的原因是什么?集群平衡介绍Hadoop的HDFS集群非常容易出现机器与机器之间磁盘利用率不平衡的情况,比如集群中添加新的数据节点。当HDFS出现不平衡状况的时候,将引发很多问题,比如MR程序无法很好地利用本地计算的优势,机器之间无法达到更好的网络带宽使用率,机器磁
2017-04-26 11:12:28 2664
转载 hdfs balancer 源程序详解
最近集群存储倾斜,个别节点存储超过85%,启动balancer之后效果明显,但是有时候balancer启动也不能解决问题。从运维阶段就知道有这么一个balancer,今天终于憋了一口气看看balancer到底咋回事。版本还是1.0.3首先balancer在org.apache.Hadoop.hdfs.server.balancer,balancer作为一个独立程序启动,听说之前是在namenode内
2017-04-26 10:37:48 2408 2
原创 使用ambari扩展hdfs节点
1.Ambari添加节点:Hosts->Action->Add New Hosts 2.在已有节点及Ambari server上添加节点IP及hostname对应关系(/etc/hosts 文件),相当于追加新的节点信息,每个服务器保持一致; 修改主机的hostname; vi /etc/sysconfig/network; service network restart 新机器会
2017-04-26 10:06:08 4305
tpc-ds-tool.zip
2019-10-12
Java EE实用开发指南
2016-09-30
23种设计模式
2016-09-28
java RSA 加密 密钥怎么是这样???请求大神
2017-06-07
Linux关于 ll 命令 有个小疑问,请大神解答
2017-05-31
su - 切换用户 出现 -bash: /root/.bash_profile
2017-05-31
Python 使用write写进文件,在hive中转换数据出现null
2017-03-06
TA创建的收藏夹 TA关注的收藏夹
TA关注的人