对hbase 的hfile 进行snappy压缩的配置:
1> hadoop集群必须先配置好snappy压缩 参考http://hymanliu.iteye.com/blog/2224330
2>在hbase的lib/native目录下一个软链接 Linux-amd64-64 -> $HADOOP_HOME/lib/native 重启hbase集群。
mkdir -p $HBASE_HOME/lib/native
cd $HBASE_HOME/lib/native
ln -s $HADOOP_HOME/lib/native Linux-amd64-64
验证:
$HBASE_HOME/bin/hbase org.apache.hadoop.util.NativeLibraryChecker
3>以在你的hbase-site.xml
加上配置 hbase.regionserver.codecs
值你需要的codecs。例如,如果hbase.regionserver.codecs
的值是 snappy,lzo,gz
同时lzo不存在或者没有正确安装, RegionServer在启动的时候会提示配置错误。多个用","隔开。