Hadoop FileSystem


org.apache.hadoop.fs

构造方法
protected FileSystem()
FileSystem是一个抽象类,不能通过new 来创建

通过静态get(Configuration conf)方法获得FileSystem子类的实例
fs.$scheme.impl
org.apache.hadoop.hdfs.DistributedFileSystem

主要子类
LocalFileSystem
本地文件系统
DistributedFileSystem
分布式文件系统

boolean createNewFile(Path f)
不会覆盖已有文件
创建成功返回true,失败返回false
FSDataOutputStream create(Path f)
覆盖已有文件
创建文件并返回输出流
FSDataOutputStream create(Path f,boolean overwrite)
创建文件并返回输出流
FSDataOutputStream create(Path f,boolean overwrite,int buffer)
FSDataOutputStream create(Path f,boolean overwrite,int buffer,short replication,long blockSize)

FSDataInputStream open(Path f)
FSDataInputStream open(Path f, int bufferSize)
返回输入流
如果文件不存在会抛出异常
不指定bufferSize时,会从Configuration中读取io.file.buffer.size,默认为4096字节

FSDataOutputStream append(Path f)
FSDataOutputStream append(Path f, int bufferSize)

块不足64M时,会补足到64M
块达到64M之前,该块不可见,ls看不到该块新增的大小,也无法读取
不能同时多个writer追加同一个文件

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值