FileSystem以标准输出格式显示Hadoop文件中的文件

//通过FileSystem API读取数据
//这里是以FileSystem以标准输出格式显示Hadoop文件中的文件


package com;


import java.io.InputStream;
import java.net.URI;


import org.apache.hadoop.conf.Configuration;
import org.apache.hadoop.fs.FileSystem;
import org.apache.hadoop.fs.Path;
import org.apache.hadoop.io.IOUtils;


public class FileSystemCat{


/**
* @param args
*/
public static void main(String[] args) throws Exception{
// TODO Auto-generated method stub

String uri = args[0];
Configuration conf = new
  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
可以使用Hadoop API来获取Hadoop文件系统文件并输出文件内容。以下是一个简单的Java代码示例: ```java import org.apache.hadoop.conf.Configuration; import org.apache.hadoop.fs.FileSystem; import org.apache.hadoop.fs.Path; import org.apache.hadoop.fs.FSDataInputStream; public class HadoopFileSystemExample { public static void main(String[] args) throws Exception { Configuration conf = new Configuration(); conf.set("fs.defaultFS", "hdfs://localhost:9000"); // 设置Hadoop文件系统的地址 FileSystem fs = FileSystem.get(conf); Path filePath = new Path("/path/to/file.txt"); // 文件的路径 if (fs.exists(filePath)) { // 判断文件是否存在 System.out.println("File exists!"); // 读取文件内容 FSDataInputStream inputStream = fs.open(filePath); byte[] buffer = new byte[1024]; int bytesRead = inputStream.read(buffer); while (bytesRead > 0) { System.out.print(new String(buffer, 0, bytesRead)); bytesRead = inputStream.read(buffer); } inputStream.close(); } else { System.out.println("File does not exist!"); } fs.close(); // 关闭文件系统对象 } } ``` 在上述代码,我们首先创建了一个`Configuration`对象,并将Hadoop文件系统的地址设置为`fs.defaultFS`属性。然后,我们使用`FileSystem.get(conf)`方法获取一个文件系统对象。接着,我们传入文件路径,判断文件是否存在。如果文件存在,我们打开它的输入流,读取文件内容并输出。最后,我们关闭了文件系统对象。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

杨鑫newlfe

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付:¥1
获取中
扫码支付

您的余额不足,请更换扫码支付或充值

打赏作者

实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值