hbase的行锁与多版本并发控制(MVCC)

最新推荐文章于 2021-09-28 13:27:40 发布
最新推荐文章于 2021-09-28 13:27:40 发布
阅读量426 收藏 1
点赞数 1
分类专栏： HBase 文章标签： 大数据 数据库
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/SAN_YUN/article/details/84685963
版权
本文介绍了HBase如何通过行锁和多版本并发控制(MVCC)来实现高效的并发读写。MVCC允许无锁读取，以避免读写冲突，保证数据一致性。HBase在写操作时分配写序号，读操作则基于读取点读取相应版本的数据，从而在不牺牲性能的情况下实现ACID特性。
摘要由CSDN通过智能技术生成

参考：http://www.rigongyizu.com/hbase-row-lock-and-multiversion-concurrency-control/

 

MVCC (Multiversion Concurrency Control)，即多版本并发控制技术，它使得大部分支持行锁的事务引擎，不再单纯的使用行锁来进行数据库的并发控制，取而代之的是，把数据库的行锁与行的多个版本结合起来，只需要很小的开销，就可以实现非锁定读，从而大大提高数据库系统的并发性能。

HBase正是通过行锁+MVCC保证了高效的并发读写。

为什么需要并发控制

HBase系统本身只能保证单行的ACID特性。ACID的含义是：

  • 原子性(Atomicity)
  • 一致性(Consistency)
  • 隔离性(Isolation)
  • 持久性(Durability)

传统的关系型数据库一般都提供了跨越所有数据的ACID特性；为了性能考虑，HBase只提供了基于单行的ACID。

下面是一个

最低0.47元/天 解锁文章
SAN_YUN
关注
专栏目录
hbase锁机制
wangneng_168的专栏
12-02 910
博文说明：1、研究版本hbase0.94.12；2、贴出的源代码可能会有删减，只保留关键的代码。     hbase的锁是采用jdk的ReentrantReadWriteLock类实现     一、HRegion有两种锁：lock、updatesLock，这两种锁均是ReentrantReadWriteLock类的实例，基本上所有的region操作均需要获取lock的read共享锁，在...
HBase行锁
weixin_30609331的博客
11-26 171
1 行锁简介 在事务特性方面，hbase只支持单row的事务，不能保证跨row(cross-row)的事务。hbase通过行锁来实现单row事务。客户端进行操作时，可以显式对某一个行加锁，但是大部分情况下是没有必要的，因为如果没有显式的加行锁，hbase在内部会默认的加行锁。为了描述方便，用户显式加的行锁简称为显式行锁。 源码1：客户端使用显式行锁的示例代码 HTabl...
HBase行锁原理及实现
weixin_34242658的博客
07-04 130
        请带着例如以下问题阅读本文。        1、什么是行锁？        2、HBase行锁的原理是什么？        3、HBase行锁是怎样实现的？        4、HBase行锁是怎样应用的？         一、什么是行锁？         我们知道。数据库中存在事务的概念。事务是作为单个逻辑工作单元运行的一系列操作，要么全然地运行，要么全...
HBase基础知识(5):行锁
weixin_30770495的博客
08-26 220
像put()、delete()、checkAndPut()这样的修改操作是独立执行的，这意味着在一个串行方式的执行中，对于每一行必须保证行级别的操作是原子性的。region服务器提供了一个行锁（row lock的特性，这个特性保证了只有一个客户端能获取一行数据相应的锁。同时对该行进行修改，在实践中，大部分客户端应用程序都没有提供显示的锁，而是使用这个机制来保障每个操作的独立性。...
【HBase】13-HBase行锁
通往神秘的道路的专栏
12-09 1110
像put()、 delete()、 checkAndPut(这样的修改操作是独立执行的,这意味着在一个行方式的执行中,对于每一行必须保证行级别的操作是原子性的。 region服务器提供了一个行锁( row lock)的特性,这个特性保证了只有一个客户端能获取一行数据相应的锁,同时对该行进行修改。在实践中,大部分客户端应用程序都没有提供显式的锁,而是使用这个机制来保障每个操作的独立性。 用户应该尽可...
大数据技术-HBase：HBase并发版本控制MVCC
黄刚的技术博客
05-27 3583
hbase为用户提供了一致的且易于理解的数据模型，同时保证高性能。这篇文章将向大家介绍下hbase数据模型保证和与传统关系数据库之间的区别，接着说下并发写控制的必要性，介绍了一个简单的并发控制方案。最后我们讨论读写并发控制讨论了MVCC。 为了理解hbase并发控制，我们首先需要理解为什么hbase需要并发控制，换句话说，hbase的什么属性需要引入并发控制。hbase是基于row级别的ACID
HBase-并发控制机制解析
02-25
为了实现事务特性，HBase采用了各种并发控制策略，包括各种锁机制、MVCC机制等。本文首先介绍HBase的两种基于锁实现的同步机制，再分别详细介绍行锁的实现以及各种读写锁的应用场景，最后重点介绍MVCC机制的实现策略...
HBase的MVCC
ThreeAspects的博客
05-30 1039
  MVCC是一种通过数据的多版本来解决读写一致性问题的解决方案。HBase在保证写数据一致性的同时，还保证读取的高性能。这一机制的实现就是通过MVCC来控制的。HBase为什么需要并发控制？可能存在多个客户端，可能同时在操作某一个Region的某一行的某一列。HBase的MVCC是在HRegion中的写操作的实现。 MVCC实现类   MVCC的实现类是MultiVersionConsistencyControl，是个Region级别的MVCC控制。当有写操作来时，MVCC会做如下事情： HRegion
HBase行锁原理
wandier的博客
05-28 235
HBase 行锁实现原理 HBase 行锁是利用 Java 并发包 concurrent 里的 CountDownLatch(1) 来实现的。它的主要思想就是在服务器端每个访问者单独一个数据处理线程，每个处理线程针对特定行数据修改时必须获得该行的行锁，而其他客户端线程想要修改数据的话，必须等待前面的线程释放锁后才被允许，这就利用了 Java 并发包中的 CountDownLatch ， CountDownLatch 为 Java 中的一个同步辅助类，在完成一组正在其他线程中进行的操作之前，它允许一个或多个线
HBase行锁和扫描
法海你懂不?
03-05 683
HBase的主要客户端接口是由org.apache.hadoop.hbase.client包中的HTable类提供的，通过这个类，用户可以完成向HBase存储和检索数据，以及删除无效数据之类的错做。 所有修改数据的操作都保证了行级别的原子性，这会影响到这一行数据所有的并发读写操作，换句话说，其他客户端或线程对统一行读写操作都不会影响到改行数据的原子性：要么读到最新的修改，要么等待系统允许写入该行...
HBase 行锁概念
数据源的港湾
12-12 1070
在HBase中有一个概念叫“行锁”。我们知道，HBase有一些客户端API，如put()、delete()、checkAndPut()等操作都是独立执行的，这意味着在一个串行方式执行中，对于每一行必须保证行级别的操作是原子性的。 “行锁”的特性保证了只有一个客户端能获取一行数据相应的锁，同时对该行进行修改，其它客户端则需要等到锁释放后才能修改同一行。 “行锁”机制一般是隐式的，当然客户端也可以显
总结一下HBase各种级别的锁以及对读写的阻塞
HelloWorld
06-21 2528
原文地址：http://blog.csdn.net/yangbutao/article/details/12950083       为了保证并发操作时数据的一致性和性能，HBase中应用了各种各样高效的可重入锁，包括行级别的rowlock、mvcc，region级别的读写锁，store级别的读写锁，memstore级别的读写锁等等。       1、  行级别的锁RowLock      
HBase原子性保证
热门推荐
yfk的专栏
07-14 1万+
HBase提供基于单行数据操作的原子性保证 即：对同一行的变更操作（包括针对一列/多列/多column family的操作），要么完全成功，要么完全失败，不会有其他状态
HBase的高并发和实时处理数据、HBase系统架构
justlpf的专栏
09-28 2469
参考文章：HBase的高并发和实时处理数据、HBase系统架构 本文首先简单介绍了HBase,然后重点讲述了HBase的高并发和实时处理数据 、HBase数据模型、HBase物理存储、HBase系统架构，HBase调优、HBase Shell访问等。 不过在此之前，你可以先了解Hadoop生态系统，若想运行HBase，则需要先搭建好Hadoop集群环境。 好了，让我们来学习HBase吧！ HBase简介 HBase的发展史 2006年底由PowerSet 的Chad Walters和Jim Ke
乐观锁与悲观锁随笔
jason_xiaojie_liu的博客
08-06 138
  乐观锁与悲观锁随笔 2017年03月16日 09:37:18 阅读数：997 1.乐观锁 介绍：认为数据在使用过程中，不会被其他程序修改、所以只有在数据提交时才检测数据是否已经被修改  实现方法  1.使用版本号：给数据所在表加个字段，记录数据版本号。提交时检测版本号与未修改前的版本号一不一致。不一致说明数据已经被其他线程修改。  2.使用时间截：给数据所在表加个字段，记录...
悲观锁和乐观锁
三也_攻城狮
08-29 906
悲观锁 对数据被修改，非常保守，必须要将事务加锁，所以在悲观锁的情况下，所有事务操作都要加锁，依靠数据库的锁机制来保证数据的一致性。 但是性能开销较大 如一个金融系统，当某个操作员读取用户的数据，并在读出的用户数据的基础上进  行修改时（如更改用户帐户余额），如果采用悲观锁机制，也就意味着整个操作过  程中（从操作员读出数据、开始修改直至提交修改结果的全过程，甚至还包括操作  员中
HBase并发控制：行锁、读写锁与MVCC解析
在分布式数据库HBase中，为了支持其行级事务和保证数据的一致性，它采用了一系列的并发控制策略，主要包括基于锁的同步机制和多版本并发控制（MVCC）机制。本文将深入探讨这两种机制的实现细节。 首先，HBase提供了...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值