python遍历Hdfs的文件和目录,并且返回文件或目录的基本属性,包括创建时间,修改时间,文件或目录标识...

使用client.walk()可以遍历hdfs的文件和目录,加上参数status=True可以同时返回这个文件的基本属性,指示这个文件是file还是directory,以及创建日期和修改日期
 
# -*- coding: utf-8 -*-
 
from hdfs import *
import os
from hdfs.ext.avro import AvroReader, AvroWriter
 
def main():
client=Client("http://192.168.56.101:50070")
path = "/home"
for root, dir, files in client.walk(path,status=True):
for file in files:
#full_path = os.path.join(root, file)
print(root)
print(file)
 
main()
 
--返回结果:
 
('
  • 0
    点赞
  • 6
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值