python3操作HDFS

最新推荐文章于 2023-08-13 11:42:27 发布

九叶不睡觉

最新推荐文章于 2023-08-13 11:42:27 发布

阅读量3.7k

点赞数

分类专栏：大数据/云计算文章标签： python3 hdfs 教程

本文链接：https://blog.csdn.net/qq_29186199/article/details/81531969

版权

本文主要介绍如何使用Python3与HDFS进行交互，通过实例代码展示操作过程，包括文件的上传、下载、读取等基本操作。

摘要由CSDN通过智能技术生成

直接贴代码

# -*- coding: utf-8 -*-
"""
Created on Thu Aug  9 09:09:56 2018

@author: admin
"""
from hdfs import Client
#url：ip：端口，root：制定的hdfs根目录，proxy：制定登陆的用户身份，timeout：设置的超时时间
client = Client("http://localhost:50070",root="/",timeout=100,session=False)

def main():
#    list(hdfs_path, status=False),status：为True时，也返回子目录的状态信息，