HBase在CentOS上的数据压缩如何配置
导读:在CentOS上配置HBase的数据压缩,可以按照以下步骤进行: 1. 安装HBase 首先,确保你已经在CentOS上安装了HBase。如果还没有安装,可以参考HBase官方文档进行安装。 2. 配置HBase的压缩 HBase支持多种压...
在CentOS上配置HBase的数据压缩,可以按照以下步骤进行:
1. 安装HBase
首先,确保你已经在CentOS上安装了HBase。如果还没有安装,可以参考HBase官方文档进行安装。
2. 配置HBase的压缩
HBase支持多种压缩算法,包括Snappy、GZIP、LZO等。以下是如何配置HBase使用Snappy压缩的示例:
2.1 修改hbase-site.xml
编辑HBase的配置文件hbase-site.xml,通常位于/etc/hbase/conf/目录下。
<
configuration>
<
!-- 启用压缩 -->
<
property>
<
name>
hbase.regionserver.global.memstore.size<
/name>
<
value>
0.4<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.lower.limit<
/name>
<
value>
0.38<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.block.multiplier<
/name>
<
value>
4<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.flush.size<
/name>
<
value>
134217728<
/value>
<
!-- 128MB -->
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.safety.percent<
/name>
<
value>
0.9<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.size<
/name>
<
value>
0.8<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.period<
/name>
<
value>
60000<
/value>
<
!-- 1 minute -->
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.min<
/name>
<
value>
0.2<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.max<
/name>
<
value>
0.8<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.size<
/name>
<
value>
0.8<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.period<
/name>
<
value>
60000<
/value>
<
!-- 1 minute -->
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.min<
/name>
<
value>
0.2<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.max<
/name>
<
value>
0.8<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.size<
/name>
<
value>
0.8<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.period<
/name>
<
value>
60000<
/value>
<
!-- 1 minute -->
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.min<
/name>
<
value>
0.2<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.max<
/name>
<
value>
0.8<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.size<
/name>
<
value>
0.8<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.period<
/name>
<
value>
60000<
/value>
<
!-- 1 minute -->
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.min<
/name>
<
value>
0.2<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.max<
/name>
<
value>
0.8<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.size<
/name>
<
value>
0.8<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.period<
/name>
<
value>
60000<
/value>
<
!-- 1 minute -->
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.min<
/name>
<
value>
0.2<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.max<
/name>
<
value>
0.8<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.size<
/name>
<
value>
0.8<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.period<
/name>
<
value>
60000<
/value>
<
!-- 1 minute -->
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.min<
/name>
<
value>
0.2<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.max<
/name>
<
value>
0.8<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.size<
/name>
<
value>
0.8<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.period<
/name>
<
value>
60000<
/value>
<
!-- 1 minute -->
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.min<
/name>
<
value>
0.2<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.max<
/name>
<
value>
0.8<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.size<
/name>
<
value>
0.8<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.period<
/name>
<
value>
60000<
/value>
<
!-- 1 minute -->
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.min<
/name>
<
value>
0.2<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.max<
/name>
<
value>
0.8<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.size<
/name>
<
value>
0.8<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.period<
/name>
<
value>
60000<
/value>
<
!-- 1 minute -->
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.min<
/name>
<
value>
0.2<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.max<
/name>
<
value>
0.8<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.size<
/name>
<
value>
0.8<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.period<
/name>
<
value>
60000<
/value>
<
!-- 1 minute -->
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.min<
/name>
<
value>
0.2<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.max<
/name>
<
value>
0.8<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.size<
/name>
<
value>
0.8<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.period<
/name>
<
value>
60000<
/value>
<
!-- 1 minute -->
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.min<
/name>
<
value>
0.2<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.max<
/name>
<
value>
0.8<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.size<
/name>
<
value>
0.8<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.period<
/name>
<
value>
60000<
/value>
<
!-- 1 minute -->
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.min<
/name>
<
value>
0.2<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.max<
/name>
<
value>
0.8<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.size<
/name>
<
value>
0.8<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.period<
/name>
<
value>
60000<
/value>
<
!-- 1 minute -->
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.min<
/name>
<
value>
0.2<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.max<
/name>
<
value>
0.8<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.size<
/name>
<
value>
0.8<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.period<
/name>
<
value>
60000<
/value>
<
!-- 1 minute -->
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.min<
/name>
<
value>
0.2<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.max<
/name>
<
value>
0.8<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.size<
/name>
<
value>
0.8<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.period<
/name>
<
value>
60000<
/value>
<
!-- 1 minute -->
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.min<
/name>
<
value>
0.2<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.max<
/name>
<
value>
0.8<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.size<
/name>
<
value>
0.8<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.period<
/name>
<
value>
60000<
/value>
<
!-- 1 minute -->
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.min<
/name>
<
value>
0.2<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.max<
/name>
<
value>
0.8<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.size<
/name>
<
value>
0.8<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.period<
/name>
<
value>
60000<
/value>
<
!-- 1 minute -->
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.min<
/name>
<
value>
0.2<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.max<
/name>
<
value>
0.8<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.size<
/name>
<
value>
0.8<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.period<
/name>
<
value>
60000<
/value>
<
!-- 1 minute -->
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.min<
/name>
<
value>
0.2<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.max<
/name>
<
value>
0.8<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.size<
/name>
<
value>
0.8<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.period<
/name>
<
value>
60000<
/value>
<
!-- 1 minute -->
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.min<
/name>
<
value>
0.2<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.max<
/name>
<
value>
0.8<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.size<
/name>
<
value>
0.8<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.period<
/name>
<
value>
60000<
/value>
<
!-- 1 minute -->
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.min<
/name>
<
value>
0.2<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.max<
/name>
<
value>
0.8<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.size<
/name>
<
value>
0.8<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.period<
/name>
<
value>
60000<
/value>
<
!-- 1 minute -->
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.min<
/name>
<
value>
0.2<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.max<
/name>
<
value>
0.8<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.size<
/name>
<
value>
0.8<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.period<
/name>
<
value>
60000<
/value>
<
!-- 1 minute -->
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.min<
/name>
<
value>
0.2<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.max<
/name>
<
value>
0.8<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.size<
/name>
<
value>
0.8<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.period<
/name>
<
value>
60000<
/value>
<
!-- 1 minute -->
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.min<
/name>
<
value>
0.2<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.max<
/name>
<
value>
0.8<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.size<
/name>
<
value>
0.8<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.period<
/name>
<
value>
60000<
/value>
<
!-- 1 minute -->
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.min<
/name>
<
value>
0.2<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.max<
/name>
<
value>
0.8<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.size<
/name>
<
value>
0.8<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.period<
/name>
<
value>
60000<
/value>
<
!-- 1 minute -->
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.min<
/name>
<
value>
0.2<
/value>
<
/property>
<
property>
<
name>
hbase.regionserver.global.memstore.evictor.max<
/name>
<
value>
0.8
声明:本文内容由网友自发贡献,本站不承担相应法律责任。对本内容有异议或投诉,请联系2913721942#qq.com核实处理,我们将尽快回复您,谢谢合作!
若转载请注明出处: HBase在CentOS上的数据压缩如何配置
本文地址: https://pptw.com/jishu/783632.html
