hbase实战 与mysql_HBase实战系列1—压缩与编码技术

1、hbase压缩与编码的配置 安装LZO 解决方案： 1)apt-get install liblzo2-dev 2)hadoop-gpl-compression-0.2.0-dev.jar 放入classpath 把libgpl下的共享库文件放入/opt/hbase/hbase/lib/native/Linux-amd64-64/ libgplcompression.a libgplcompression.la

1、hbase压缩与编码的配置

安装LZO

解决方案：

1)apt-get install liblzo2-dev

2)hadoop-gpl-compression-0.2.0-dev.jar　放入classpath

把libgpl下的共享库文件放入/opt/hbase/hbase/lib/native/Linux-amd64-64/

libgplcompression.a libgplcompression.la libgplcompression.so libgplcompression.so.0 libgplcompression.so.0.0.0

3)配置：

io.compression.codecs

com.hadoop.compression.lzo.LzoCodec,com.hadoop.compression.lzo.LzopCodec

io.compression.codec.lzo.class

com.hadoop.compression.lzo.LzoCodec

4)测试：

hbase org.apache.hadoop.hbase.util.CompressionTest hdfs:///user.dat lzo

创建表格时，针对ColumnFamily设置压缩和编码方式。

HColumnDescriptor.