java获取hadoop目录结构_2、查看 hadoop HDFS 的文件元信息

[zwh@hadoop current]$ hdfs oiv -p XML -i fsimage_0000000000000000025  -o fsimage.xml

[zwh@hadoop current]$ ll

总用量 3128

-rw-rw-r--. 1 zwh zwh      42 1月   6 20:27 edits_0000000000000000001-0000000000000000002

-rw-rw-r--. 1 zwh zwh 1048576 1月   6 20:50 edits_0000000000000000003-0000000000000000004

-rw-rw-r--. 1 zwh zwh     575 1月   7 12:39 edits_0000000000000000005-0000000000000000013

-rw-rw-r--. 1 zwh zwh      42 1月   7 13:39 edits_0000000000000000014-0000000000000000015

-rw-rw-r--. 1 zwh zwh     150 1月   7 14:39 edits_0000000000000000016-0000000000000000019

-rw-rw-r--. 1 zwh zwh      96 1月   7 15:39 edits_0000000000000000020-0000000000000000022

-rw-rw-r--. 1 zwh zwh      42 1月   7 16:39 edits_0000000000000000023-0000000000000000024

-rw-rw-r--. 1 zwh zwh 1048576 1月   7 16:39 edits_0000000000000000025-0000000000000000025

-rw-rw-r--. 1 zwh zwh     113 1月  14 17:39 edits_0000000000000000026-0000000000000000028

-rw-rw-r--. 1 zwh zwh 1048576 1月  14 17:39 edits_inprogress_0000000000000000029

-rw-rw-r--. 1 zwh zwh     598 1月  14 16:57 fsimage_0000000000000000025

-rw-rw-r--. 1 zwh zwh      62 1月  14 16:57 fsimage_0000000000000000025.md5

-rw-rw-r--. 1 zwh zwh     655 1月  14 17:39 fsimage_0000000000000000028

-rw-rw-r--. 1 zwh zwh      62 1月  14 17:39 fsimage_0000000000000000028.md5

-rw-rw-r--. 1 zwh zwh    3588 1月  14 18:03 fsimage.xml

-rw-rw-r--. 1 zwh zwh       3 1月  14 17:39 seen_txid

-rw-rw-r--. 1 zwh zwh     213 1月  14 16:57 VERSION

[zwh@hadoop current]$ more fsimage.xml

-6412b9a8c1d3a2caf1e733d57f346af3ff0d5ba529c

708675991100010010

Id>107374182525

1、在 ErasureCodingSection 节点，我们可以看到默认启用的是 RS-LEGACY-6-3-1024k  编码

3RS-LEGACY-6-3-1024k1048576DISABLED

rs-legacy63

2、导出来的 fsimage.xml 目录结构 和hdfs 目录一致

截图上的三个目录加上 / 目录一共四个目录

163894

16385DIRECTORY1546841948483zwh:supergroup:07559223372036854775807-1

16386DIRECTORYzwh1546779031886zwh:supergroup:0755-1-1

16388DIRECTORYdit1546834420397zwh:supergroup:0755-1-1

16389FILEcontroller.log315468344224781546845769649134217728zwh:supergroup:06441073741825100143251

0

controller.log文件的 block id 对应关系

1073741825

参考资料

http://hadoop.apache.org/docs/current/hadoop-project-dist/hadoop-hdfs/HdfsImageViewer.html#XML_Processor