5、分布式文件系统

检查hadoop集群的状态:输入http://localhost:50070

出现


表明dfs启动成功;


或者查看java安装目录下:usr/java/jdk1.7.0_71/bin/jps   (java process status)

[hadoop@skx1 jdk1.7.0_71]$ bin/jps
12060 SecondaryNameNode
11908 NameNode
12297 Jps
12202 ResourceManager

****


创建一个子目录 input在这个目录下创建两个 文件

[hadoop@skx1 Desktop]$ cd
[hadoop@skx1 ~]$ mkdir input
[hadoop@skx1 ~]$ cd input
[hadoop@skx1 input]$ echo "hello skx" >nick1.txt
[hadoop@skx1 input]$ echo "hello hadoop " >nick2.txt

拷贝到hadoop的文件系统的目录下

[hadoop@skx1 input]$ cd ../hadoop-2.6.0
[hadoop@skx1 hadoop-2.6.0]$ bin/hadoop dfs -put ../input   newput

解释:dfs是一个操作接口,表示现在执行hadoop的文件分布方法

            -put表示将系统中的文件目录../input  放入hadoop系统中的newput目录

出现DEPRECATED: Use of this script to execute hdfs command is deprecated.   Instead use the hdfs command for it.

如果Apache hadoop版本是0.x 或者1.x,
  bin/hadoop hdfs fs -mkdir -p /in
  bin/hadoop hdfs fs  -put /home/du/input   /in

如果Apache hadoop版本是2.x.
  bin/hdfs  dfs  -mkdir -p /in
  bin/hdfs  dfs   -put /home/du/input   /in

出现:DFSClient: DataStreamer Exception

这是由于没有添加节点的原因,即需要先启动namenode,再启动datanode,然后自动jobtracker和tasktracker;





  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值