hadoop入门【3】java访问HDFS服务

最新推荐文章于 2023-08-01 21:08:03 发布

万和IT教育

最新推荐文章于 2023-08-01 21:08:03 发布

阅读量417

点赞数

分类专栏： hadoop入门文章标签： HDFS hadoop 大数据分布式 java

本文链接：https://blog.csdn.net/qq_41717874/article/details/90768422

版权

本文介绍如何在Java环境中连接并操作HDFS服务。首先确保Hadoop已安装并运行，然后通过Eclipse创建项目，导入所需jar包，并在C盘创建hadoop2.7.2目录解压文件。接着编写测试类，实现对HDFS的增删改查功能。

摘要由CSDN通过智能技术生成

上一节课我们熟悉了HDFS的命令行操作，接下来我们将通过java代码访问HDFS服务。

1 系统、软件以及前提约束

hadoop已经安装完毕并且启动
https://www.jianshu.com/p/b7ae3b51e559
hadoop2.7.2.zip windows简化版
下载到相关jar包
上述软件下载链接：https://pan.baidu.com/s/1c_skDYabCRSkS5hRUB6lFQ
提取码：a00t

2 操作

1 在eclipse中创建一个项目，加入下载好的jar包并设置到环境变量
2 将hadoop2.7.2.zip解压到C:\hadoop2.7.2目录下
3 写入以下的测试类

package net.wanho.hdfs;

import java.io.IOException;

import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.fs.FileSystem;
import org.apache.hadoop.fs.Path;

public class HDFSTest01 {
        //在HDFS中创建一个文件夹
    public static boolean CreatDir(String dst, Configuration conf) {
        Path dstPat