Hadoop
hadooptech
A simple developer
展开
-
hadoop 配置问题总结
1. eclipse和hadoop插件版本问题 使用yahoo推荐的eclipse3.3 和hadoop-0.20.2中的插件。2. 插件配置注意 当在终端中运行没问题,而且eclipse中运行出问题时。可能是“mapred.child.tmp"没有配置。原创 2012-09-16 16:07:50 · 427 阅读 · 0 评论 -
HBase配置中MasterNotRunningException解决办法
今天安装在Hadoop上安装HBase,已经把Hadoop中的core.jar替换了HBase中的相关包,还是出现MasterNotRunningException问题。弄了将近4个小时,差了各种资料,最后找到问题了。原来是需要拷贝hadoop中的hadoop-0.20.2-core.jar和hadoop-0.20.2-tools.jar到hhase中。问题解决原创 2012-09-16 16:03:36 · 2439 阅读 · 1 评论 -
hadoop 气象数据分析
学习hadoop几天了,配置了三天终端,运行了几个例子。现在自己写一个程序,根据气象数据,计算当年的最高气温。模拟美国气象局发布的数据。数据格式为:0000001010195005+00001+99999999(其中第一个红色数字为年份,第二个数字为气温)。以1950为键,00001为值。模拟数据为:0000001010195005+00001+999999990000001010原创 2012-09-16 16:05:48 · 3671 阅读 · 0 评论