hadoop
zhangningdlut
这个作者很懒,什么都没留下…
展开
-
fedora下配置hadoop(一)
在Hadoop启动以后,Namenode是通过SSH(Secure Shell)来启动和停止各个节点上的各种守护进程的,这就需要在节点之间执行指令的时候是不需要输入密码的方式,故我们需要配置SSH使用无密码公钥认证的方式。两台电脑一台NameNode(NameNode,192.168.0.100)一台DataNode1,(DataNode1, 192.168.0.101)修改每台电原创 2013-03-18 15:27:17 · 796 阅读 · 0 评论 -
hadoop配置namenode无法启动,secondarynamenode正常启动
hadoop配置中,namenode无法启动,secondarynamenode正常启动,很可能是因为没有hadoop文件夹的权限。把权限分配给用户就行。然后stop-all, 再格式化format, 再重新启动就ok了。原创 2014-02-02 19:43:26 · 2162 阅读 · 1 评论 -
hadoop问题之 运行一直卡在map100% ,reduce0%
如果hadoop运行例子或者自己编写的程序卡在了map100,reduce 0%, 那么可能是/etc/hosts文件的问题,在/etc/hosts文件里加入127.0.0.1 "PCname“ 的对应项就行了。或者如果etc/hosts里127.0.0.1 对应了不只一台主机(除去localhost, localhost.localadmin 等项),那么删除不正确的项就可以了。原创 2014-02-03 11:12:15 · 6456 阅读 · 0 评论 -
hadoop1.2.1 编译eclipse插件
hadoop 提供了eclipse插件供编译。 要编译的源码必须是 hadoop版本.tar.gz 包里才有,bin.tar.gz 包里是没有的。具体在/src/contrib/eclipse-plugin 文件夹下,用ant 编译,编译的时候制定hadoop版本和eclipse安装目录。但是直接编译会提示错误。错误如下: ....... ......原创 2014-02-05 21:03:47 · 802 阅读 · 0 评论