hadoop
静默时间-花开灿然
这个作者很懒,什么都没留下…
展开
-
hadoop集群下配置ssh本机免密码登陆
[root@Master ~]# ssh localhostroot@localhost's password: [root@Master ~]# ssh-keygen -t dsa -P '' -f ~/.ssh/id_dsaGenerating public/private dsa key pair.Your identification has been saved in /root原创 2014-11-24 14:14:16 · 873 阅读 · 0 评论 -
Hadoop在格式化HDFS时,报未知名主机错误UnknownHostException
bin/hdfs namenode -format在执行hdfs格式化时,报一下错误:java.net.UnknownHostException: localhost.localdomain: localhost.localdomain at java.net.InetAddress.getLocalHost(InetAddress.java:1353)原创 2014-12-16 13:51:11 · 1463 阅读 · 0 评论 -
hadoop2.5的第一个HelloWorld程序—单词计数(WordCount.)
首先启动hadoop服务.在文件系统上创建一个文件夹data:[root@Master hadoop-2.5.0]# hdfs dfs -mkdir /dataJava HotSpot(TM) Client VM warning: You have loaded library /home/jzz/hadoop-2.5.0/lib/native/libhadoop.so.1.0.0 wh原创 2014-12-22 15:00:24 · 809 阅读 · 1 评论 -
hadoop2.5伪分布式搭建
虚拟机网络设置为仅主机模式(HostOnly),对应本地网卡VMnet1虚拟机ip设置如下图:本机windows系统设置VMnet1:所以我们的Linux系统的ip地址必须在第一步设置的192.168.122.128与192.168.122.254之间,如下图:然后虚拟机与主机之间互相ping,ping通网络即可用:[root@Master ~]# pi原创 2014-12-22 17:11:22 · 765 阅读 · 0 评论 -
(hadoop2.5)namenode或datanode未启动
第一个问题:namenode未启动, 当我执行start-all.sh命令完成时,使用jps检测当前进程,发现hadoop的5个进程中唯独少了namenode,所以访问文件系统50070也失败。原因:因为不小心把自己配置的hadoop临时文件里的信息全删除了。那么之前namenode的格式化信息也丢失了。所以需要重新格式化文件系统。首先,我们在core-site.xml中配置过hadoop原创 2014-12-24 09:13:42 · 757 阅读 · 0 评论