hadoop学习笔记(HDFS的文件操作)

命令行方式和API方式:

列出HDFS下的文件    bin/hadoop dfs -ls   /-ls ./in

上传文件到HDFS   bin/hadoop dfs -put ../abc abc

将HDFS的文件复制到本地bin/hadoop dfs -get abc ./xyz

删除HDFS下的文档 bin/hadoop dfs -rmr abc

查看HDFS下某个文件内容bin/hadoop dfs -cat ./out/part-00000

查看HDFS基本统计信息bin/hadoop dfsadmin -report

进入和退出安全模式 bin/hadoop dfsadmin -safemode enter bin/hadoop dfsadmin -safemode leave

启动某些后台进程而不是全部进程start -all.sh  stop -all.sh(stop)start -dfs.sh      (stop)start -mapred.sh 

API列表:

hadoop.apache.org/hdfs/docs/r0.22.0/api/index.html

负载均衡:当节点出现故障,或新增节点时,数据块分布可能不均匀,负载均衡可以重新平衡各个datanode上的数据块的分布。

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值