hbase
wending-Y
这个作者很懒,什么都没留下…
展开
-
Hbase 常见问题
Master 在hbase中的角色分配region给region server,和regionserver的负载均衡zookeeper在hbase中的角色存储配置信息,分布式同步,负责客户端和region server交流hregionserver在hbase中的角色响应数据读写,管理regionhbase cataglog tablesMeta表,里面包含所以region和他们的位置信息Hhbase write/write读路径-memstore(写缓存)—>blockcache(原创 2020-07-25 01:17:33 · 362 阅读 · 0 评论 -
hbase 查看region start key&&end key
region 的start key&& end key可以得到region的位置,start key ,end key有利于更加深入的理解hbasepublic static void main(String[] args) { Configuration conf = new Configuration(); conf.set("hbase.zookeeper.quorum", "centos-6"); Connection conn =原创 2020-07-25 00:49:32 · 1910 阅读 · 0 评论 -
一图理解 Hbase Bloom Filter 的使用
结论Bloot Filter能在大数据量的情况下判断元素在集合中是否存在如果过滤器判断不存在则一定不在集合中如果判断在,则有一定的误差,实际可能不在集合中场景hbase 在查询的时候通过Filter就可以高效的判断数据是否在block之中,提高查询效率图解...原创 2020-06-23 20:59:35 · 372 阅读 · 0 评论 -
HBASE 常用shell命令,增删改查
首先给出本次操作的数据create 'student','info','address'put 'student','1','info:age','20'put 'student','1','info:name','wang'put 'student','1','info:class','1'put 'student','1','address:city','zhengzhou'put原创 2017-04-09 14:04:51 · 22041 阅读 · 0 评论 -
Hive 或 Impala 与 Hbase表结合
创建hbase表create 'message','info','school'2.创建hive表CREATE EXTERNAL TABLE hivemessage ( id int, name string, age int, address string, teacher string ) ST原创 2018-01-03 23:06:42 · 613 阅读 · 0 评论 -
Hbase热点写问题
1.热点写问题表现在大量的写请求集中在一个region上,造成单点压力大,降低写效率. 2.解决方法.创建表的指定多个region,默认情况下一个表一个region,刚开始写的时候就会造成所有的写请求都写到一个region上面,创建多个region的话,写请求就会分流到多个region上面去。提高写的效率 3.第二个方法,对rowkey进行散列,既然我们要把多个请求写分到不同的region上,我原创 2018-01-06 20:48:52 · 1697 阅读 · 0 评论 -
HBase分布式安装
安装前准备工作三台机器上HADOOP和zookeeper安装正常2.在机器A上下载jar包,解压,修改配置文件如下hbase-ev.shexport JAVA_HOME=/opt/soft/jdk1.8.0_162///由单独zk管理 export HBASE_MANAGES_ZK=false // regionservers 文件 centos-1 centos-2 centos原创 2018-04-20 00:47:35 · 198 阅读 · 0 评论