2013年09月_黑肚皮的窝

12月 11月 10月 09月 06月 05月 03月

原创 Hive HA参加阿里云大赛，请大家投票支持

Hive HA 参加2013阿里云大赛，请兄弟姐妹们支持！详细说明见前前面博客。投票地址：http://dasai.aliyun.com/signup/works2013/?search=471

2013-09-23 09:56:52 1699

原创 Hive HA使用说明

hive让大数据飞了起来，不再需要专人写MR。平常我们都可以用基于thrift的任意语言来调用hive.不过爱恨各半，hive的thrift不稳定也是出了名的。很容易就出问题，让人无计可施。唯一的办法就是不断kill,不断restart.当然，我们可以用haproxy来解决这个问题，关键，haproxy不管hive是否逻辑可用，不能执行逻辑的hive也“死马当活马”。当然，搞的好的

2013-09-05 15:33:35 6081 2

原创 hadoop的集群copy

hadoop不同版本之间的集群复制。1.基础使用hadoop distcp 来进行集群间的数据复制。2.实战如果两个集群之间版本不一样，应该这样来复制。hadoop distcp hftp://source/source hdfs://dest:9000/source为啥是hftp呢，因为不同版本rpc不太一样。如果一个集群闲置，尽量使用它的MR能力。有一个要注

2013-09-05 15:05:21 4239 1

原创 hadoop故障解析

1.出现namenode日志不断增大2.日志发现datanode 出问题2013-09-03 18:11:44,021 WARN org.apache.hadoop.hdfs.StateChange: BLOCK* NameSystem.blockReceived: blk_8094241928859719036_2147969 is received from dead or unreg

2013-09-03 18:33:56 3546

flink-shaded-hadoop-2-uber-2.7.5-7.0.jar

Flink 1.10 跑作业时候报ClassNotFoundException: yarn.exceptions.YarnException。必须把这个jar放到flink的lib目录下就搞定

2020-06-05

2009信息系统项目管理师考试试题大泄密

2009 信息系统项目管理师考试试题大泄密

2009-10-28

信息系统项目整体管理知识体系要点

信息系统项目整体管理知识要点，更充分应考

2009-10-28

空空如也

TA创建的收藏夹 TA关注的收藏夹

TA关注的人