java hdfs 压缩_【hadoop】——HDFS解压缩实现

1简介

codec其实就是coder和decoder两个单词的词头组成的缩略词。CompressionCodec定义了压缩和解压接口，我们这里讲的codec就是实现了CompressionCodec接口的一些压缩格式的类，下面是这些类的列表：

2使用CompressionCodes解压缩

CompressionCodec有两个方法可以方便的压缩和解压。

压缩：通过createOutputStream(OutputStream out)方法获得CompressionOutputStream对象

解压：通过createInputStream(InputStream in)方法获得CompressionInputStream对象

压缩的示例代码

package com.sweetop.styhadoop;

import org.apache.hadoop.conf.Configuration;

import org.apache.hadoop.io.IOUtils;

import org.apache.hadoop.io.compress.CompressionCodec;

import org.apache.hadoop.io.compress.CompressionOutputStream;

import org.apache.hadoop.util.ReflectionUtils;

/**

* Created with IntelliJ IDEA.

* User: lastsweetop

* Date: 13-6-25

* Time: 下午10:09

* To change this template use File | Settings | File Templates.

*/

public class StreamCompressor {

public static void main(String[] args) throws Exception {

String codecClassName = args[0];

Class> codecClass = Class.forName(codecClassName);

Configuration conf = new Configuration();

CompressionCodec codec = (CompressionCodec) ReflectionUtils.newInstance(codecClass, conf);

CompressionOutputStream out = codec.createOutputStream(System.out);

IOUtils.copyBytes(System.in, out, 4096, false);

out.finish();

}

}

从命令行接受一个Compr