hadoop3.x——HDFS的API环境准备

wakeup42

已于 2022-09-05 08:51:51 修改

阅读量373

点赞数

分类专栏： hadoop 文章标签： hdfs java hadoop

于 2022-09-05 08:50:33 首次发布

本文链接：https://blog.csdn.net/wake_up_42/article/details/126693182

版权

hadoop 专栏收录该内容

12 篇文章 0 订阅

订阅专栏

HDFS的API操作

在这里插入图片描述

配置客户端环境

下载windows依赖，并保存至非Windows的非中文目录下。
配置环境变量。
在系统环境变量中添加HADOOP_HOME的的路径。
在path中添加路径。

idea中的准备

新建一个maven项目。
在pom.xml中添加以下代码：

    <dependencies>
        <dependency>
            <groupId>org.apache.hadoop</groupId>
            <artifactId>hadoop-client</artifactId>
            <version>3.1.3</version>
        </dependency>
        <dependency>
            <groupId>junit</groupId>
            <artifactId>junit</artifactId>
            <version>4.12</version>
        </dependency>
        <dependency>
            <groupId>org.slf4j</groupId>
            <artifactId>slf4j-log4j12</artifactId>
            <version>1.7.30</version>
        </dependency>
    </dependencies>

在resource中新建一个log4j.properties的文件，并输入以下内容：

log4j.rootLogger=INFO, stdout 
log4j.appender.stdout=org.apache.log4j.ConsoleAppender 
log4j.appender.stdout.layout=org.apache.log4j.PatternLayout 
log4j.appender.stdout.layout.ConversionPattern=%d %p [%c] - %m%n 
log4j.appender.logfile=org.apache.log4j.FileAppender 
log4j.appender.logfile.File=target/spring.log 
log4j.appender.logfile.layout=org.apache.log4j.PatternLayout 
log4j.appender.logfile.layout.ConversionPattern=%d %p [%c] - %m%n

在java目录下，新建一个HDFSClient的类。
在这里插入图片描述
至此准备工作完成。