通过对Hadoop分布式文件系统的的基本使用,对HDFS Shell的基本操作进行如下总结
1.HDFS Shell基本操作总结
1.1 浏览你的HDFS目录
[root@slave1 bin]# hadoop fs -ls
1.2 上传数据到HDFS
上传:
[root@slave1 bin]# hadoop fs -put ../conf input
检查已上传的数据:
[root@slave1 bin]# hadoop fs input
1.3 下载HDFS的数据到本地目录
下载:
[root@slave1 bin]# hadoop fs -get input FromHDFS
检查已下载的数据
[root@slave1 bin]# ls -al FromHDFS
[root@slave1 bin]# ls -al | grep FromHDFS
1.4 删除HDFS的数据
[root@slave1 bin]# hadoop fs -ls
[root@slave1 bin]# hadoop fs -rmr input
1.5 直接查看HDFS中的数据
[root@slave1 bin]# hadoop fs -cat input/conf/slaves
2. 更多HDFS Shell的用法
2.1 HDFS完整的路径
[root@slave1 conf]# hadoop fs -ls hdfs://202.173.253.34:9000/user/root/input
2.2 改变文件所属的组
[root@slave1 conf]# hadoop fs -chgrp -R root own
2.3 改变文件的权限
[root@slave1 bin]# hadoop fs -chmod -R 755 own
2.4 改变文件的所有者
[root@slave1 bin]# hadoop fs -chown -R hadooper own
2.5 显示目录中所有文件的大小
[root@slave1 bin]# hadoop fs -du input
2.6 显示目录中所有文件的大小
[root@slave1 bin]# hadoop fs -dus input
2.7 清空垃圾桶
[root@slave1 bin]# bin/hadoop fs -expunge
2.8 在HDFS建立文件夹
[root@slave1 bin]# hadoop fs -mkdir a b c
1.HDFS Shell基本操作总结
1.1 浏览你的HDFS目录
[root@slave1 bin]# hadoop fs -ls
1.2 上传数据到HDFS
上传:
[root@slave1 bin]# hadoop fs -put ../conf input
检查已上传的数据:
[root@slave1 bin]# hadoop fs input
1.3 下载HDFS的数据到本地目录
下载:
[root@slave1 bin]# hadoop fs -get input FromHDFS
检查已下载的数据
[root@slave1 bin]# ls -al FromHDFS
[root@slave1 bin]# ls -al | grep FromHDFS
1.4 删除HDFS的数据
[root@slave1 bin]# hadoop fs -ls
[root@slave1 bin]# hadoop fs -rmr input
1.5 直接查看HDFS中的数据
[root@slave1 bin]# hadoop fs -cat input/conf/slaves
2. 更多HDFS Shell的用法
2.1 HDFS完整的路径
[root@slave1 conf]# hadoop fs -ls hdfs://202.173.253.34:9000/user/root/input
2.2 改变文件所属的组
[root@slave1 conf]# hadoop fs -chgrp -R root own
2.3 改变文件的权限
[root@slave1 bin]# hadoop fs -chmod -R 755 own
2.4 改变文件的所有者
[root@slave1 bin]# hadoop fs -chown -R hadooper own
2.5 显示目录中所有文件的大小
[root@slave1 bin]# hadoop fs -du input
2.6 显示目录中所有文件的大小
[root@slave1 bin]# hadoop fs -dus input
2.7 清空垃圾桶
[root@slave1 bin]# bin/hadoop fs -expunge
2.8 在HDFS建立文件夹
[root@slave1 bin]# hadoop fs -mkdir a b c