HDFS Java API实战：创建目录，上传，下载，删除代码

最新推荐文章于 2024-04-23 14:13:01 发布
最新推荐文章于 2024-04-23 14:13:01 发布
阅读量897 收藏 1
点赞数
分类专栏： java hadoop 文章标签： java hadoop
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/kerry_55/article/details/80824952
版权
HDFS Java API实战：创建目录，上传，下载，删除代码如下：package javaApi;   import java.io.IOException; import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.fs.FileSystem; import org.apache.hadoop.fs....
摘要由CSDN通过智能技术生成

HDFS Java API实战：创建目录，上传，下载，删除

代码如下：

package javaApi;

 

import java.io.IOException;

import org.apache.hadoop.conf.Configuration;

import org.apache.hadoop.fs.FileSystem;

import org.apache.hadoop.fs.Path;

 

/**

 * 创建目录

 * @author kym

 */

public class HdfsTest01 {

         public static boolean CreatDir(String s,Configuration conf){

                   Path dstPath = new Path(s);

                   try{

                            FileSystem fs = FileSystem.get(conf);

                            fs.mkdirs(dstPath);

                   }

                   catch(IOException e){

                            e.printStackTrace();

                            return false;

<
最低0.47元/天 解锁文章
柯努力
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
HDFS-API文件上传、创建、删除、重命名
03-05
通过调用hdfs的api，进行文件上传、创建、删除、重命名等操作的代码
Hadoop之HDFS上测试创建目录、上传、下载文件(这些基本操作记录下来，总有忘的时候)
u011495642的博客
10-24 3428
  1、HDFS上创建目录 ${HADOOP_HOME}/bin/hdfs dfs -mkdir /demo1 1 2、上传本地文件到HDFS上 ${HADOOP_HOME}/bin/hdfs dfs -put ${HADOOP_HOME}/etc/hadoop/core-site.xml /demo1   3、上传本地文件到HDFS上 ${HADOOP_HOME}/bin/hd...
hadoop调用HDFS java api实现在HDFS上创建文件夹
fcx1234的博客
06-28 3124
HDFS文件系统JavaAPI接口 HDFS是存取数据的分布式文件系统，HDFS文件操作常有两种方式，一种是命令行方式，即Hadoop提供了一套与Linux文件命令类似的命令行工具。另一种是JavaAPI，即利用Hadoop的Java库，采用编程的方式操作HDFS的文件。
大数据-hdfs-使用java API在HDFS创建目录-方法步骤
橙汁糖的博客
11-09 3061
1.实例化configuration Configuration configuration = new Configuration(); 2.实例化文件系统FileSystem FileSystem fileSystem = FileSystem.get(new URI(“hdfs://主节点IP:8082”),configuration); 3.使用文件系统对象调用mkdir（相应的API操作...
最全源码提供，直接Copy拿走，如何使用Java API操作HDFS
悟空非空也
09-14 1691
前言 由于Hadoop是使用Java语言编写的，因此可以使用Java API操作Hadoop文件系统。 使用HDFS提供的Java API构造一个访问客户端对象，然后通过客户端对象对HDFS上的文件进行操作（增、删、改、查）。 准备工作 Hadoop集群搭建 请参考文章 https://www.bilibili.com/read/cv7591643 hadoop-win-2.7.7 window简化阉割版（up主提供，下载链接请见文末） 步骤 1.在Window系统下，配置hadoop环境，使用Jav
hdfs-java-api
10-17
《深入理解HDFS Java API：构建大数据处理基石》 在大数据领域，Hadoop Distributed File System（HDFS）作为核心组件，扮演着存储和处理海量数据的关键角色。而HDFS Java API则是开发人员与HDFS进行交互的主要接口...
hadoop Java API
06-30
- 文件操作：如创建、打开、关闭、重命名和删除文件或目录。`FileSystem`类提供了这些操作的方法，例如`FileSystem.create()`用于创建文件，`FileSystem.rename()`用于重命名。 - 数据读写：`FSDataInputStream`和...
hadoop实战源代码Java
11-22
本资源"hadop实战源代码Java"聚焦于利用Java编程语言与Hadoop Distributed File System (HDFS)进行交互，实现文件的上传、下载以及删除等核心功能。这里我们将深入探讨这些知识点。 首先，了解Hadoop的基本架构是...
实验项目 实战 HDFS 实验报告
04-18
HDFS Shell命令则用于交互式操作，如创建目录、上传/下载文件、查看文件内容等，这些命令包括ls、mkdir、put、get、rm等，通过它们可以熟练掌握HDFS的基本操作。 四、HDFS项目开发环境 在Hadoop集群的主节点上搭建...
Hadoop:midsem hadoop代码和输出
04-22
8. **实战项目**：实际操作中，可能涉及到数据上传、任务提交、监控任务状态等实际操作。 在深入学习Hadoop时，除了理论知识，还需要通过编写和运行代码来加深理解，比如创建一个简单的WordCount程序，或者处理更...
java操作Hadoop源码之HDFS Java API操作-创建目录
01-17
java操作Hadoop源码之HDFS Java API操作-创建目录，附带所需全部jar包，欢迎下载学习。
使用JavaAPI操作HDFS创建目录和权限问题
大数据学习
01-03 7227
一、创建目录 1.首先在虚拟Linux上找到jar包 $HADOOP_HOME/share/hadoop/common/*.jar $HADOOP_HOME/share/hadoop/common/lib/*.jar $HADOOP_HOME/share/hadoop/hdfs/*.jar $HADOOP_HO...
HDFS操作--文件上传/创建/删除/查询文件信息
weixin_30287169的博客
10-20 171
1.上传本地文件到HDFS //上传本地文件到HDFS public class CopyFile { public static void main(String[] args) { try { Configuration conf = new Configuration(); ...
HDFS的API操作(文件上传 下载 删除 名更改 详情查看 文件夹的判断 )
Knight
03-21 497
1.首先在eclipse创建 注意获取fs对象要设置一下，这个获取fs对象是简便写法(标准的写法在另外一篇博客HDFS环境客户端的环境和测试) 一般都设置成root package com.client; import java.io.IOException; import java.net.URI; import java.net.URISyntaxException; import ...
使用Java API操作HDFS
weixin_64270471的博客
11-23 439
Hadoop整合了众多文件系统，HDFS只是这个文件系统的一个实例。Maven Repository（Maven仓库）-FileSystem对象的一些方法可以对文件进行操作。创建Maven项目 - HDFSDemo。在Hadoop WebUI界面查看。利用HDFS集群WebUI查看。已经存在，此时会提示用户创建失败。注意：导包千万不要导错了。单击【Finish】按钮。目录，在该目录里创建。
Hadoop之HDFS上测试创建目录、上传、下载文件,遍历目录
热门推荐
Vincent
08-27 1万+
遍历 循环遍历根目录，慎重 hdfs dfs -ls -R / 遍历根目录文件夹和文件 hdfs dfs -ls / 上传文件 到HDFS已经存在的目录下 上传文件到 / 跟目录下 hdfs dfs -put /home/vc/dev/hadoop/hadoop-2.7.7/etc/hadoop/hdfs-site.xml / 查看刚才上传文件 ...
Java API实现HDFS有关目录与文件的相关功能
行秋的博客
10-24 1万+
HDFS常用操作 JavaAPI实现HDFS以下功能。 1.在HDFS中创建一个新目录； 2.从本地拷贝文件到新创建的目录中； 3.将HDFS中指定文件的内容输出到终端中； 4.显示一个指定目录下所有文件； 5.完成指定目录下指定类型文件的合并 6.在HDFS中，将文件从源路径移动到目的路径。 7.删除HDFS中指定的文件； 实验环境：IDEA 项目如下： 代码如下： 1.在HDFS中创建一个新目录； import org....
Hadoop——HDFS文件系统的Java API操作（上传、下载、查看、删除、创建文件）详细教学
最新发布
2401_83329402的博客
04-23 497
首先，启动Hadoop集群服务然后在浏览器访问Hadoop，点击Browse the file system 查看HDFS文件系统的目录可以看到目前HDFS文件系统的目录是空的，没有任何的文件和文件夹，下面开始今天的API操作。
hadoop用HDFS java api在HDFS上创建文件
lvxingzhongderen的博客
06-28 896
我的分享就到这里啦，希望能帮到你，我分享的只是最基础的知识，希望我们以后能学的越来越多的知识。
hdfs java API 创建目录实例
05-04
以下是使用HDFS Java API创建目录的示例代码： ```java import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.fs.FileSystem; import org.apache.hadoop.fs.Path; public class CreateDirectory { public static void main(String[] args) throws Exception { //设置Hadoop的配置信息 Configuration conf = new Configuration(); conf.set("fs.defaultFS", "hdfs://localhost:9000"); //创建HDFS文件系统对象 FileSystem fs = FileSystem.get(conf); //创建目录 Path path = new Path("/test"); boolean isCreated = fs.mkdirs(path); if (isCreated) { System.out.println("目录创建成功！"); } else { System.out.println("目录创建失败！"); } //关闭HDFS文件系统对象 fs.close(); } } ``` 在这个示例中，我们首先设置了Hadoop的配置信息，然后创建了HDFS文件系统对象。接着，我们使用`fs.mkdirs()`方法在根目录下创建了一个名为`test`的目录。最后，我们根据`fs.mkdirs()`方法的返回值判断目录是否创建成功，并关闭了HDFS文件系统对象。 你也可以自己定义目录的路径，比如使用一个相对路径。然而，这种方式并不推荐，因为它可能会导致路径无法正确解析。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

柯努力

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值