HBase集群配置Snappy压缩算法
2019-10-15 本文已影响0人
yiming1012
一、背景介绍
在生产环境搭建了Hadoop HA集群(Hadoop2.7.7+HBase1.4.10)。根据官方文档,Snappy 压缩算法在Hadoop 1.0.2中即可使用。
二、配置步骤
1、首先通过命令查看Hadoop是否支持Snappy。
hadoop checknative -a
2、已知Hadoop支持Snappy算法,配置hbase-env.sh,使得HBase能够支持Snappy算法。
export LD_LIBRARY_PATH=$LD_LIBRARY_PATH:$HADOOP_HOME/lib/native/
export HBASE_LIBRARY_PATH=$HBASE_LIBRARY_PATH:$HBASE_HOME/lib/native/
3、在HBase中新建压缩算法为Snappy的表。
create 'test_snappy', { NAME => 'gps', COMPRESSION => 'snappy'}
4、至此,HBase配置Snappy成功。