刚刚开始接触 hadoop ,也开始试着搭建环境
记下遇到的小白问题:(Ubuntu 14.04 Hadoop1.2.1 jdk1.7)
1, 关闭防火墙 sudo ufw disable
2, 关闭安全模式 bin/hadoop dfsadmin -safemode leave
3, 禁用 IPV6
打开sudo gedit /etc/sysctl.conf,此文件需要root权限。
再次打开文件中,追加如下:
net.ipv6.conf.all.disable_ipv6 = 1
net.ipv6.conf.default.disable_ipv6 = 1
net.ipv6.conf.lo.disable_ipv6 = 1
重启,测试是否配置成功:
cat /proc/sys/net/ipv6/conf/all/disable_ipv6
如果是1就ok了。
4,运行测试程序wordcount ; bin/hadoop jar hadoop-examples-1.2.1.jar wordcount input output
5, 操作hdfs 文件:
bin/hadoop -fs -cat file
bin/hadoop -fs -mkdir dir
bin/hadoop -fs -rmr dir
bin/hadoop -fs -put [local] [hdfs] 上传
bin /hadoop -fs -get [hdfs] [local] 下载