hdfs文件创建查看

[root@master localfiles]# hdfs dfs -mkdir /user
[root@master localfiles]# hdfs dfs -mkdir /user/root
[root@master localfiles]# hdfs dfs -mkdir /user/root/input
[root@master localfiles]# hdfs dfs -mkdir /user/root/output
[root@master localfiles]# hdfs dfs -put ./testHdfs.txt /user/root/input



看文件信息

hadoop fsck /user/filename

更详细的
hadoop fsck /user/filename -files  -blocks -locations -racks
 
-files  文件分块信息,
-blocks    在带-files参数后才显示block信息
-locations   在带-blocks参数后才显示block块所在datanode的具体IP位置,

-racks       在带-files参数后显示机架位置



HDFS Web界面 
HDFS Web界面上只能查看文件系统数据。网址:http://localhost:50070 
界面如下: 
web界面
执行完WordCount程序后可以到本界面上下载output结果并查看,截图有误,理解就好,如图: 
Hadoop web界面查看文件系统数据
3、 shell命令 
这个方法是最基本的,能进行所有文件操作。

hadoop fs -ls /user/hadoop/output #查看指定目录下的文件和文件夹。/user/hadoop/output是HDFS上的目录,不是本地目录
hadoop fs -cat  /user/hadoop/output #查看文件内容
  • 1
  • 2

博主的用户名是dblab,相应的HDFS上的目录变为/user/dblab/output。界面截图如下: 
shell

版权声明:本文为博主原创文章,未经博主允许不得转载。 https://blog.csdn.net/Flyfish111222/article/details/51995523

阅读更多
个人分类: 大数据
想对作者说点什么? 我来说一句

没有更多推荐了,返回首页

关闭
关闭
关闭