[hadoop]成功搭建Hadoop集群后简单实验

1>  检查对HDFS的访问(在namenode上操作)
       #./hadoop-0.20.2/bin/hadoop fs -ls
2>  hadoop中的文件系统操作
       #./hadoop-0.20.2/bin/hadoop fs -mkdir  test
       #./hadoop-0.20.2/bin/hadoop fs -ls  test
       #./hadoop-0.20.2/bin/hadoop fs -rmr test
3>  测试hadoop
       a> 创建子目录
             #./hadoop-0.20.2/bin/hadoop fs -mkdir input
       b> 把本地文件移动到hdfs
             #./hadoop-0.20.2/bin/hadoop fs -put /usr/share/doc/pam-1.1.1/rfc86.0.txt  input
             #./hadoop-0.20.2/bin/hadoop fs -put /usr/share/doc/pam-1.1.1/Linux-PAM_SAG.txt  input
       c> 查看文件是否存在
             #./hadoop-0.20.2/bin/hadoop fs -ls input
       d> 执行计算单词频率的MapReduce作业
             #./hadoop-0.20.2/bin/hadoop jar /root/hadoop-0.20.2/hadoop-0.20.2-examples.jar wordcount input output
             Found 2 items
             drwxr-xr-x   - root supergroup          0 2012-11-26 04:25 /user/root/output/_logs
             -rw-r--r--   2 root supergroup       8315 2012-11-26 04:25 /user/root/output/part-r-00000
       e> 查看输出结果
             #./hadoop-0.20.2/bin/hadoop fs -ls output
             #./hadoop-0.20.2/bin/hadoop fs -cat output/part-r-00000 | head -n 13
       f> 从HDFS提取输出
             #./hadoop-0.20.2/bin/hadoop fs -get output/part-r-00000 output.txt
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值