HBase 优化总结

本文总结了HBase的高可用配置、基础优化措施、预分区策略、RowKey设计原则以及内存优化方法,旨在提升HBase系统的稳定性和效率。包括配置HMaster的HA、调整HDFS与MapReduce参数、预分区技术应用、RowKey设计技巧以及合理分配内存来优化HBase性能。
摘要由CSDN通过智能技术生成

1.高可用

HBase 中的 Hmaster 存在单点故障隐患, 故需要配置 HA, HBase 原生支持对 Hmaster 的 HA

步骤如下:

1.关闭HBase集群(如果没有开启则跳过此步)

[rayfun@hadoop102 hbase]$ bin/stop-hbase.sh

2.在conf目录下创建backup-masters文件

[rayfun@hadoop102 hbase]$ touch conf/backup-masters

3.在backup-masters文件中配置高可用HMaster节点

[rayfun@hadoop102 hbase]$ echo hadoop103 > conf/backup-masters

4.将整个conf目录scp到其他节点

5.查看webUI http://hadooo102:16010

2.基础优化

1.允许在 HDFS 的文件中追加内容

相关配置 hdfs-site.xml、hbase-site.xml

属性:dfs.support.append

解释:开启 HDFS 追加同步,可以优秀的配合 HBase 的数据同步和持久化。默认值为 true

2.优化 DataNode 允许的最大文件打开数

相关配置 hdfs-site.xml

  • 0
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值