复习HBase之读流程

最新推荐文章于 2024-08-30 14:07:29 发布
最新推荐文章于 2024-08-30 14:07:29 发布
阅读量879 收藏
点赞数 1
分类专栏： HBase 文章标签： hbase
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_45450889/article/details/123596201
版权
本文介绍了如何通过Zookeeper定位HBase:meta表所在RegionServer，利用Metacache缓存查询结果，高效访问HBase数据。涉及客户端操作、RegionServer通讯和数据检索优化的过程。
摘要由CSDN通过智能技术生成

在这里插入图片描述

  1. Client访问Zookeeper，获取hbase:meta位于哪个Region Server中
  2. 访问对应的Region Server，获取hbase:merta表，根据读请求的namespace:table/rowkey，查询出目标数据位于哪个Region，并将该表的region信息和meta表的位置信息缓存在客户端的meta cache中方便下次访问
  3. 和目标Region Server进行通讯
  4. 夫人你别再Block Cache（读缓存）、MemStore 和Sotre File（HFile）中拆线呢目标数据，并把查询到的数据进行合并
  5. 将从文件中查询到的数据块缓存到Block Cache中
  6. 把合并后的最终结果返回到客户端
daladalabao
关注
  • 1
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
HBase总复习
昕昕子的博客
12-31 2480
一、基础知识记忆 二、知识简答 1、HBase 的数据模型 2、HBase 分布式数据库与传统数据库的区别。 3、HBase 架构 4、HBase读数据流程 5、HBase写数据流程 三、知识分析解答 1、下面关系表在HBase中的物理模型和逻辑模型。 2、在HBase Shell交互界面中，可通过一系列Shell命令操作HBase，下面通过一张表列举操作HBase表常见的Shell命令。 3、写出下面HBase操作的shell命令 4、Java API 四、编写程序代码
第五章：HBase架构
tyh1579152915的博客
10-17 152
HBase 第五章：HBase架构 文章目录 一、HBase逻辑存储模型 二、HBase架构 （1） HMaster （2） HRegionServer （3） HRegion （4）MemStore （5） HLog （6） HFile （7）StoreFile 三、HBase写流程 四、刷写 （1）自动刷写的时机 （2）手动刷写 五、读流程 六、Compaction （1）Minor Compaction的验证 （2）Major Compaction 一、HBas
hbase复习题、面试题
m0_46191714的博客
01-24 1628
1. HBASE架构 我们知道HBase依赖HDFS也依赖Zookeeper，那么首先出来的应该是HDFS，这是他底层的存储地，随便画几个DataNode无所谓，然后HBase还依赖Zookeeper，因此我们在启动HBase之前需要先启动它们。那接下轮到HBase启动了，HBase需要启动两大进程HMaster和HRegionServer，这个Master工作太累了，它需要把某些工作交给Zookeeper，后面在说具体都交给些什么任务。Master主要管理DDL相关的操作，操作表，操作命名空间，HReg
Hbase阶段性复习
Smartloe的博客
01-05 805
Hbase阶段性复习
Hbase知识点全复习
qq_43521665的博客
06-23 1478
Hbase写数据 Hbase写数据是先将数据写入wal(预写日志),再写入内存。在代码实现中，首先要获得锁，（因为要写数据）。然后写入日志文件。但并不同步（也就是不写入hdfs中）。再写入内存，之后进行释放锁（写完数据了）。之后同步日志文件（写入hdfs中）。如果wal同步失败了，就进行回滚操作单元格，将keys从内存中移除。所以最后要判断是否日志文件写入成功，如果成功，内存中数据就保留；如果不成功，内存中数据就删除。保证了数据一致性。 重要信息 Hbase表非常稀疏，但是不占存储空间。 DDL：是表的
大数据期末复习资料——
06-20
分布式数据库HBase是基于列存储的NoSQL数据库，它在Hadoop生态系统中用于实时读/写大规模数据集。HBase的设计和实现原理与传统关系型数据库有所不同，它通过实现CAP和BASE原则来保证系统的可用性和一致性。HBase的...
大数据存储复习笔记
weixin_43608722的博客
01-06 988
第一章 大数据存储技术概述 大数据的特点 大数据需要怎样的存储系统 第二章 分布式数据库系统体系结构 基于“中间件”的客户/服务器的体系结构（举例说明） 关系型分布式数据库系统的模式结构 分布式数据库系统的数据透明性（定义，举例） 多数据库系统和分布式数据库系统的区别与联系 第三章 HBase 数据结构及读写过程 HBase解决了HDFS的哪些问题？具有哪些特点？ HBase数据库中region的含义及其特性。 同一个表不同行的数据可以存放在不同的服务器，同一个表相同行的数据也可以存放在不同
spark复习
cafebar123的专栏
11-14 571
scala 构造方法初始化初探
大数据技术之HBase 快速入门(2)
qq_45115959的博客
08-30 1178
在 HBase 中 HMaster 负责监控 HRegionServer 的生命周期，均衡 RegionServer 的负载，如果 HMaster 挂掉了，那么整个 HBase 集群将陷入不健康的状态，并且此时的工作状态并不会维持太久。表示删除所有版本的数据，即为当前行当前列的多个 cell。修改读取 cell 的版本数，默认读取一个。如果重复写入相同 rowKey，相同列的数据，会写入多个版本进行覆盖。是扫描数据，能够读取多行数据，不建议扫描过多的数据，推荐使用。来控制读取的数据，默认范围左闭右开。
泛微协同办公平台E-cology9.0版本后台维护手册(D)--流程引擎.docx
09-03
泛微后端技术文档
A fast intra mode decision algorithm combining neighboring info
09-03
论文提出了一种用于H.264/AVC高配置文件的快速帧内模式决策算法，旨在降低编码复杂度。 算法基于当前块的内容以及邻块的空间连续性来选择最佳预测模式。 通过使用重建的邻域像素，不同的预测模式会导致不同的残差块，算法利用残差块的特征来辅助模式决策。 提出的算法使用绝对变换差之和（SATD）来衡量残差块，并使用最可能的模式来指示邻块预测模式的影响。 实验结果表明，与全搜索算法相比，所提出的算法在编码性能略有下降的情况下，有效降低了帧内预测的复杂度
《会员卡刷卡消费管理系统专业版》是一款集系统设置、会员管理、充值积分、会员消费、查询统计于一体的软-MbccmsP.zip
09-03
c 《会员卡刷卡消费管理系统专业版》是一款集系统设置、会员管理、充值积分、会员消费、查询统计于一体的软_MbccmsP.zip 《会员卡刷卡消费管理系统专业版》是一款集系统设置、会员管理、充值积分、会员消费、查询统计于一体的软_MbccmsP.zip 《会员卡刷卡消费管理系统专业版》是一款集系统设置、会员管理、充值积分、会员消费、查询统计于一体的软_MbccmsP.zip 《会员卡刷卡消费管理系统专业版》是一款集系统设置、会员管理、充值积分、会员消费、查询统计于一体的软_MbccmsP.zip 《会员卡刷卡消费管理系统专业版》是一款集系统设置、会员管理、充值积分、会员消费、查询统计于一体的软_MbccmsP.zip 《会员卡刷卡消费管理系统专业版》是一款集系统设置、会员管理、充值积分、会员消费、查询统计于一体的软_MbccmsP.zip 《会员卡刷卡消费管理系统专业版》是一款集系统设置、会员管理、充值积分、会员消费、查询统计于一体的软_MbccmsP.zip《会员卡刷卡消费管理系统专业版》是一款集系统设置、会员管理、充值积分、会员消费、查询统计于一体的软_MbccmsP.zip 《会
基于springboot学生选课系统设计与实现.docx
09-03
基于springboot学生选课系统设计与实现.docx
【天线阻抗】基于matlab耦合偶极子天线阻抗计算【含Matlab源码 7447期】.mp4
09-03
Matlab研究室上传的视频均有对应的完整代码，皆可运行，亲测可用，适合小白； 1、代码压缩包内容 主函数：main.m； 调用函数：其他m文件；无需运行 运行结果效果图； 2、代码运行版本 Matlab 2019b；若运行有误，根据提示修改；若不会，私信博主； 3、运行操作步骤 步骤一：将所有文件放到Matlab的当前文件夹中； 步骤二：双击打开main.m文件； 步骤三：点击运行，等程序运行完得到结果； 4、仿真咨询 如需其他服务，可私信博主或扫描视频QQ名片； 4.1 博客或资源的完整代码提供 4.2 期刊或参考文献复现 4.3 Matlab程序定制 4.4 科研合作
【无线电】基于matlab认知无线电网络中协同频谱传感的优化【含Matlab源码 7449期】.mp4
09-03
Matlab研究室上传的视频均有对应的完整代码，皆可运行，亲测可用，适合小白； 1、代码压缩包内容 主函数：main.m； 调用函数：其他m文件；无需运行 运行结果效果图； 2、代码运行版本 Matlab 2019b；若运行有误，根据提示修改；若不会，私信博主； 3、运行操作步骤 步骤一：将所有文件放到Matlab的当前文件夹中； 步骤二：双击打开main.m文件； 步骤三：点击运行，等程序运行完得到结果； 4、仿真咨询 如需其他服务，可私信博主或扫描视频QQ名片； 4.1 博客或资源的完整代码提供 4.2 期刊或参考文献复现 4.3 Matlab程序定制 4.4 科研合作
【误码率仿真】基于matlab 2x2MIMO-LDPC系统误码率仿真【含Matlab源码 7446期】.zip
09-03
CSDN海神之光上传的代码均可运行，亲测可用，直接替换数据即可，适合小白； 1、代码压缩包内容 主函数：main.m； 调用函数：其他m文件；无需运行 运行结果效果图； 2、代码运行版本 Matlab 2019b；若运行有误，根据提示修改；若不会，私信博主； 3、运行操作步骤 步骤一：将所有文件放到Matlab的当前文件夹中； 步骤二：双击打开main.m文件； 步骤三：点击运行，等程序运行完得到结果； 4、仿真咨询 如需其他服务，可私信博主或扫描博客文章底部QQ名片； 4.1 博客或资源的完整代码提供 4.2 期刊或参考文献复现 4.3 Matlab程序定制 4.4 科研合作 功率谱估计： 故障诊断分析： 雷达通信：雷达LFM、MIMO、成像、定位、干扰、检测、信号分析、脉冲压缩 滤波估计：SOC估计 目标定位：WSN定位、滤波跟踪、目标定位 生物电信号：肌电信号EMG、脑电信号EEG、心电信号ECG 通信系统：DOA估计、编码译码、变分模态分解、管道泄漏、滤波器、数字信号处理+传输+分析+去噪（CEEMDAN）、数字信号调制、误码率、信号估计、DTMF、信号检测识别融合、LEACH协议、信号检测、水声通信
小程序-同乐居商城：购物车合算（源码）.zip
最新发布
09-03
小程序-同乐居商城：购物车合算（源码）.zip
新增1986-2017年农村固定观察点数据，三农数据大全(全新整理)
09-03
1、资源内容地址：https://blog.csdn.net/2301_79696294/article/details/141282812 2、代码特点：今年全新，手工精心整理，放心引用，数据来自权威，相对于其他人的控制变量数据准确很多,适合写论文做实证用 ，不会出现数据造假问题 3、适用对象：大学生，本科生，研究生小白可用，容易上手！！！ 3、课程引用: 经济学，地理学，城市规划与城市研究，公共政策与管理，社会学，商业与管理 【新增数据】 全国农村固定观察点数据服务是由农业农村部主导的逐年农户层级跟踪调查数据库，具有全国代表性以及权威性，是目前全国样本数量规模最大的农户层级数据。
.请简述hbase的读数据流程
06-08
HBase的读数据流程如下： 1. 客户端向HBase的Zookeeper集群发送读请求，目标RegionServer的地址。 2. 客户向目标RegionServer发送RPC请求，获取该RegionServer上包含目标行的Region的地址。 3.户端向包含目标的Region发送RPC请求，请求获取目标行的数据。 4. 如果目标行存在于Region Cache中，直接从Cache中获取数据并返回给客户端，否则从磁盘中读取数据。 5. RegionServer将目标行的数据返回给客户端，并更新Region Cache中的数据。 6. 客户端收到数据并进行处理。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值