--------【HBase优化】
代立冬
StayHungryStayFoolish外功修行内功修神
展开
-
Hbase万亿级存储性能优化总结
转载请注明原文链接:http://blog.csdn.net/odailidong/article/details/41794403一、服务端调优 1、参数配置 1)、hbase.regionserver.handler.count:该设置决定了处理RPC的线程数量,默认值是10,通常可以调大,比如:150,当请求内容很大(上MB,比如大的put、使用缓存的scans)的时候,如果该值设置过大则会占用过多的内存,导致频繁的GC,或者出现OutOfMemory,因此该值不是越大越好。原创 2014-12-07 23:49:30 · 17424 阅读 · 14 评论 -
HBase工具之监控Region的可用和读写延时状况
1、介绍HBase集群上region数目由于业务驱动而越来越多,由于服务器本身,网络以及hbase内部的一些不确定性bug等因素使得这些region可能面临着不可用或响应延时情况。通过对region的监控,也可以反映出hdfs集群的状况2、工具org.apache.hadoop.hbase.tool.Canary 监控Region的可用和读写状况Usage: bin/hba转载 2014-02-10 16:51:26 · 4956 阅读 · 0 评论 -
HBase客户端访问超时的多个因素及参数
在一个需要低延时响应的hbase集群中,使用hbase默认的客户端超时配置简直就是灾难。但是我们可以考虑在客户端上加上如下几个参数,去改变这种状况原创 2016-03-14 16:03:21 · 2959 阅读 · 2 评论 -
HBase之Rowkey设计总结及易观方舟实战篇
一、引言HBase由于其存储和读写的高性能,在OLAP即时分析中越来越发挥重要的作用,在易观精细化运营产品--易观方舟也有广泛的应用。作为Nosql数据库的一员,HBase查询只能通过其Rowkey来查询(Rowkey用来表示唯一一行记录),Rowkey设计的优劣直接影响读写性能。HBase中的数据是按照Rowkey的ASCII字典顺序进行全局排序的,有伙伴可能对ASCII字典序印象不够深刻,...原创 2018-06-02 21:52:46 · 6435 阅读 · 2 评论