HBASE技术问题

#### hbase 需要时间同步,节点间同步最大时间差是30s


#### hbase 创建表
hbase(main):004:0> create 'emp', 'cf1', 'cf2'

 

#### hbase 配置高可用
1、配置bakup mater
echo "${备节点机器名}" >> $HBASE_HOME/conf/backup-masters
例:
echo "master2" >> $HBASE_HOME/conf/backup-masters

2、HBase的Replication(假设已经部署好了两套HBase系统,并且在配置文件中已经开启了replication配置),
    a、首先尝试配置下Master-Slave模式的高可用:
        1)、在Master上通过add_peer 命令添加复制关系,如下
        add_peer '1', ’db-xxx.photo.163.org:2181:/hbase‘
        2)、在Master上新建表t,该表拥有一个列簇名为cf,并且该列簇开启replication,如下:
        create ‘t’, {NAME=>’cf’, REPLICATION_SCOPE=>’1’}
        上面REPLICATION_SCOPE的值'1'需要跟步骤1)中的对应
        3)、 在slave建立相同的表(HBase不支持DDL的复制),在master-slave模式中,slave不需要开启复制,如下:
        create ‘t’, {NAME=>’cf’ }
        这样,我们就完成了整个master-slave模式高可用的搭建,后续可以在master上通过put操作插入一条记录,查看slave上是否会复制该记录
    b、Master-Master模式,配置的时候与Master-Slave模式不同的是,在Master上添加完复制关系后,需要在另外一台Master也添加复制关系(如a中的步骤1)),而且两边的cluster_id必须相同,
    并且在另外一台Master上建表的时候,需要加上列簇的REPLICATION_SCOPE=>’1’配置
    
3、rsgroup,在HBase还没有发布的2.0版本有一个新特性,全称叫做RegionServer Group,简称rsgroup。顾名思义,就是regionServer的分组功能,
通过引入这个功能可以指定某些表在特定一组服务器上,从而达到隔离的效果。目前从一些大会的分享来看,阿里千台规模和雅虎800+的大集群都使用了这个功能,
所以从这点来看,这个功能似乎成为了管理大集群的一种手段。
HBase是无法保证region落到哪个RegionServer上,多个region公用一台RegionServer。当然你可以关掉balance,然后单独move region到特定机器上。
所以,其实一直存在一个问题:各个region的读写之间会相互影响。
没有分组之前,一般是如何解决这些问题的?
最简单的方方式就是拆分集群。例如我们在94版本集群上,底层一个hadoop集群会配置多个HBase集群,不同集群对应不同的业务,
这样来避免不同业务间的影响。但是这种方式带来的问题一个最大问题就是小集群多,运维不方便。本来HBase就以难运维“著称”,这样搞需要干的活就更多了。
分组的本质其实就是打“标签”,rsgroup的分组就是给每台regionServer和table打上标签,从而划分所属分组,然后通过balance的,把表的region move到所属分组的机器上。
 

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
基于MySQL+Vue.js开发集成实时聊天系统的动态项目管理web端软件源码+答辩PPT+使用说明.zip 【优质项目推荐】 1.项目代码功能经验证ok,确保稳定可靠运行。欢迎下载使用!在使用过程中,如有问题或建议,请及时私信沟通,帮助解答。 2.项目主要针对各个计算机相关专业,包括计科、信息安全、数据科学与大数据技术、人工智能、通信、物联网等领域的在校学生、专业教师或企业员工使用。 3.项目具有丰富的拓展空间,不仅可作为入门进阶,也可直接作为毕设、课程设计、大作业、项目初期立项演示等用途。 4.如果基础还行,或热爱钻研,可基于此项目进行二次开发,DIY其他不同功能。 基于MySQL+Vue.js开发集成实时聊天系统的动态项目管理web端软件源码+答辩PPT+使用说明.zip 部署前端服务 1. 打包前端文件生成 dist 文件夹 ```js // genal-chat-client npm i npm run build ``` 1. 将 dist 下所有文件放到 nginx 下的 html 文件夹中 2. 配置 nginx 的 gzip (提高传输速度)和请求级别(注意只是新增下面的代码,不是替换整个nginx文件) ```js 记得重启一下nginx #### 数据库配置 1. 安装 mysql 2. 设置 mysql 账号密码 3. 创建名为 `chat` 的数据库 4. 配置后端 `app.module.ts` 中的 mysql 账号密码 部署后端服务 1. 安装 pm2 ```js // genal-chat-server npm i pm2 -g ``` 2. 生成 dist 文件 ```js // genal-chat-server npm i npm run build ``` 3. 使用 pm2 运行 ```js // genal-chat-server npm run pm2 ```
该资源内项目源码是个人的课程设计,代码都测试ok,都是运行成功后才上传资源,答辩评审平均分达到96分,放心下载使用! ## 项目备注 1、该资源内项目代码都经过测试运行成功,功能ok的情况下才上传的,请放心下载使用! 2、本项目适合计算机相关专业(如计科、人工智能、通信工程、自动化、电子信息等)的在校学生、老师或者企业员工下载学习,也适合小白学习进阶,当然也可作为毕设项目、课程设计、作业、项目初期立项演示等。 3、如果基础还行,也可在此代码基础上进行修改,以实现其他功能,也可用于毕设、课设、作业等。 下载后请首先打开README.md文件(如有),仅供学习参考, 切勿用于商业用途。 该资源内项目源码是个人的课程设计,代码都测试ok,都是运行成功后才上传资源,答辩评审平均分达到96分,放心下载使用! ## 项目备注 1、该资源内项目代码都经过测试运行成功,功能ok的情况下才上传的,请放心下载使用! 2、本项目适合计算机相关专业(如计科、人工智能、通信工程、自动化、电子信息等)的在校学生、老师或者企业员工下载学习,也适合小白学习进阶,当然也可作为毕设项目、课程设计、作业、项目初期立项演示等。 3、如果基础还行,也可在此代码基础上进行修改,以实现其他功能,也可用于毕设、课设、作业等。 下载后请首先打开README.md文件(如有),仅供学习参考, 切勿用于商业用途。
该资源内项目源码是个人的课程设计,代码都测试ok,都是运行成功后才上传资源,答辩评审平均分达到96分,放心下载使用! ## 项目备注 1、该资源内项目代码都经过测试运行成功,功能ok的情况下才上传的,请放心下载使用! 2、本项目适合计算机相关专业(如计科、人工智能、通信工程、自动化、电子信息等)的在校学生、老师或者企业员工下载学习,也适合小白学习进阶,当然也可作为毕设项目、课程设计、作业、项目初期立项演示等。 3、如果基础还行,也可在此代码基础上进行修改,以实现其他功能,也可用于毕设、课设、作业等。 下载后请首先打开README.md文件(如有),仅供学习参考, 切勿用于商业用途。 该资源内项目源码是个人的课程设计,代码都测试ok,都是运行成功后才上传资源,答辩评审平均分达到96分,放心下载使用! ## 项目备注 1、该资源内项目代码都经过测试运行成功,功能ok的情况下才上传的,请放心下载使用! 2、本项目适合计算机相关专业(如计科、人工智能、通信工程、自动化、电子信息等)的在校学生、老师或者企业员工下载学习,也适合小白学习进阶,当然也可作为毕设项目、课程设计、作业、项目初期立项演示等。 3、如果基础还行,也可在此代码基础上进行修改,以实现其他功能,也可用于毕设、课设、作业等。 下载后请首先打开README.md文件(如有),仅供学习参考, 切勿用于商业用途。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值