深入浅出理解什么是HTAP

已于 2022-05-12 01:14:33 修改
阅读量1.8w 收藏 27
点赞数 4
CC 4.0 BY-SA版权
分类专栏： 数据仓库 大数据挖掘与大数据应用案例 文章标签： 数据库 big data database HTAP 大数据
于 2022-05-12 01:13:09 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/u012965373/article/details/124722903
本文介绍了HTAP（Hybrid Transactional/Analytical Processing），它是OLAP和OLTP的结合，旨在同时处理在线事务和分析。Gartner预测HTAP数据库将是数据库领域的关键趋势，对于数字化转型具有推动作用。

关于HTAP

HTAP（Hybrid Transactional/Analytical Processing）混合事务 / 分析处理。这里的HTAP就是常见的比较经典的OLAP和OLTP的处理场景的结合体。即可解决OLTP在线事务处理场景，还可以解决OLAP在线分析场景。Gartner也认为HTAP数据库将成为数据库领域的一个重要的发展趋势，一个集成的数据平台将会加速数字化转型。

HTAP的概念最早在2014年Gartner的报告中提出这一概念， 《混合事务/分析处理促进重大商业创新 》。对于这个HTAP的概念可以满足当前的所有数据处理模型，而且可以支持各类数据工作者的各类模式需求。其中我们知道的比较流行的TiDB和OceanBase都是基于HTAP实现的。

什么是OLAP和O

了解本专栏 订阅专栏 解锁全文
不同数据库背后的数据存储方案
不断学习，不断进步，提高自己
06-03 3681
如果以组件的类型是关系型数据库还是非关系型数据库，并结合服务的场景是OLTP还是OLAP来对业界各种存储组件进行划分的话，可以得到如下图所示的结果。关系型数据库中既有为OLTP设计的，也有为OLAP设计的，同时还有新兴发展起来兼容二者的HTAP数据库。这些系统都有各自适用的业务场景，它们在存储引擎选型时，往往会根据适用场景来决定。如果是读多写少的场景，通常会选择B+树、哈希表来构建存储引擎。而如果是写多读少的场景，往往会选择LSM树来构建存储引擎。本文摘编自《深入浅出存储引擎》，经出版方授权发布。
Leo赠书活动-26期 不同数据库背后的数据存储方案
分享思想，留下痕迹。
06-03 3394
如果以组件的类型是关系型数据库还是非关系型数据库，并结合服务的场景是OLTP还是OLAP来对业界各种存储组件进行划分的话，可以得到如下图所示的结果。关系型数据库中既有为OLTP设计的，也有为OLAP设计的，同时还有新兴发展起来兼容二者的HTAP数据库。这些系统都有各自适用的业务场景，它们在存储引擎选型时，往往会根据适用场景来决定。如果是读多写少的场景，通常会选择B+树、哈希表来构建存储引擎。而如果是写多读少的场景，往往会选择LSM树来构建存储引擎。
OLTP、OLAP与HTAP、HSAP详解
xiayuhaisong的博客
02-23 6391
HTAP、HSAP是OLAP与OLTP综合需求驱动下的新的数据库系统，既满足事务处理，又满足大规模分析查询，并且是基于一套系统下实现。
KingbaseES数据库HTAP混合负载引擎：打破数据处理边界
最新发布
远程部署调试 运行安装 项目调试 二次开发 项目技术新 持续迭代 部分源码免费分享
10-27 1042
摘要：KingbaseES HTAP混合负载引擎技术通过行列混合存储、向量化计算和智能资源隔离等创新设计，实现了事务处理与分析查询的高效协同。该技术在金融行业应用中展现出卓越性能，如某券商风控平台实现300万TPS峰值和毫秒级查询响应，银行反欺诈系统通过向量化相似度计算快速识别异常交易。相比传统数据库行列分离架构，KingbaseES HTAP兼具OLTP高并发与OLAP复杂分析能力，支持实时决策并降低系统复杂度。未来该技术将与AI、存算分离等趋势深度融合，拓展在工业互联网、政务等领域的智能化应用场景。（1
TiDB 学习笔记
sun%moon
08-26 1732
TiDB 简介 读音/’taɪdiːbi:/ 支持HTAP(Hybrid Transactional and Analytical Processing，超级事务分析和处理) 强一致性、高可用性、水平扩展比较容易 核心特性 1. 水平扩展容易 TiDB的架构是基于计算和存储分离架构设计的，因此，该架构使得用户可以在线为计算资源或者存储资源扩容。而且该过程对运维团队是透明的。 2. Financial-grade高可用 TiDB的数据是基于Multi-Raft协议多副本存储的，事务是成功的当且仅当数据被
HTAP 数据库的应用场景：是否被过度夸大？
ith321的博客
09-27 1042
HTAP 数据库的应用场景：是否被过度夸大？
深度干货！你真的了解HTAP吗（一）
DBAIOps的博客
01-31 1033
而这种设计会让单一的数据库太重了，一旦这个数据库出现一点点问题，可能就会影响整个企业的业务，这是我们无法承受的。目前来说，电是不可大规模存储的资源，而且电源侧发出的电必须平衡的被消耗掉，否则多发出来的电必须被尽快消耗掉，而某个局部网络上的电能不足时，就只能拉闸限电，确保电能在网络上整个是平衡的。只是说，目前我们的国产数据库的HTAP能力建设还处于初级阶段，目前大多数国产数据库能够提供的HTAP能力大部分可以通过业务系统优化来避开，而真正对HTAP强需求的场景，我们的产品的支撑能力还不足。
什么是HTAP 阿里云上实现
fei33423的专栏
05-10 2806
讲师介绍 梁成辉（城璧），阿里数据库事业部技术专家，阿里分布式数据层中间件TDDL、云产品分布式关系型数据库服务DRDS技术负责人。曾多次担任数据层稳定性负责人并保障双十一TDDL & DRDS的稳定性，目前主要聚焦在DRDS HTAP(phil注 即 polardb )的技术研发，致力于提供云上OLTP与OLAP一体式解决方案。 本文根据梁成辉（城璧）老师在【dbaplus数据架构与优化沙龙上海站】现场演讲内容整理而成。 19年 从 DRDS 到分布式 POLARDB—— 云上分布式关系
一文带你深入浅出存储引擎
小知识吖
06-03 5380
如果以组件的类型是关系型数据库还是非关系型数据库，并结合服务的场景是OLTP还是OLAP来对业界各种存储组件进行划分的话，可以得到如下图所示的结果。关系型数据库中既有为OLTP设计的，也有为OLAP设计的，同时还有新兴发展起来兼容二者的HTAP数据库。这些系统都有各自适用的业务场景，它们在存储引擎选型时，往往会根据适用场景来决定。如果是读多写少的场景，通常会选择B+树、哈希表来构建存储引擎。而如果是写多读少的场景，往往会选择LSM树来构建存储引擎。
深入浅出 TiDB 架构与分布式存储机制
标签中提及的关键技术点包括：TiDB Server、MySQL 兼容性、SQL 解析、执行计划、存储引擎、无状态服务等，这些构成了理解 TiDB 架构的基础知识体系。 首先，TiDB 的整体架构采用典型的三层分离设计：计算层（TiDB ...
TiDB如何在HTAP架构下实现强一致性和高可用性？请详细解析其背后的机制。
11-06
这份资料深入浅出地介绍了TiDB的设计理念和操作实践，将帮助你在实际项目中高效运用TiDB，实现数据库技术的最新进展与业务需求的无缝对接。 参考资源链接：[TiDB入门学习与测试题解析]...
HTAP专场：什么是HTAP数据库（陈琢）.pdf
09-20
HTAP专场：什么是HTAP数据库（陈琢）.pdf
深度干货！聊聊HTAP（二）
DBAIOps的博客
01-31 1126
最近这几年数据库领域有一个十分热门的词汇，就是HTAP。如果你家的数据库不是HTAP数据库，都不好意思拿出来和别人见面。对于HTAP数据库这个概念老白是一头雾水的。在20年前，我在给客户做oracle数据库培训的时候，就会提到HTAP负载，OLTP负载和OLAP负载是天然不同的两种不同的负载。OLTP负载是日常的交易型工作负载，其特点是高并发和小事务，SQL语句一般都相对简单，不过并发访问量很大，数据修改的量很大；OLAP负载是一种低并发，少修改，复杂查询的工作负载，一些SQL可能需要进行大规模的数据扫描，
阿里云数据库开源发布：PolarDB HTAP的功能特性和关键技术
阿里云云栖号
03-11 4042
简介：在3月2日的阿里云开源 PolarDB 企业级架构发布会上，阿里云 PolarDB 内核技术专家严华带来了主题为《PolarDB HTAP详解》的精彩演讲。在PolarDB存储计算分离架构的基础上，我们研发了基于共享存储的MPP分布式执行引擎，解决了单条SQL执行时无法利用其它节点计算资源、无法发挥共享存储池的IO大带宽的问题，同时提供了弹性计算，弹性扩展的保障，使得PolarDB初步具备了 HTAP 的能力。本议题主要介绍PolarDB HTAP的功能特性和关键技术。 在3月2日的阿里云开源 Po
什么是真正的HTAP？（一）背景篇
StoneDB_的博客
07-22 634
自 StoneDB 开源的第一天，我们就说要做真正的 HTAP，那么究竟我们对 HTAP是怎么理解的？解读一门技术，就要从其发展背景入手，本篇文章中我们将从 OLTP 和 OLAP 最近的发展介绍及各自遇到的问题为基础，引出 HTAP 相关概念。...
HTAP与OLAP&OLTP之间的关系
CYH_job的博客
12-26 2603
HTAP是近些年来比较火的一个概念，下面就聊聊其前世今生及技术特点。 1. 数据应用类别 根据数据的使用特征，可简单做如下划分。在选择技术平台之前，我们需要做好这样的定位。 1).OLTP 联机事务处理OLTP （On-Line Transaction Processing） OLTP是事件驱动、面向应用的，也称为面向交易的处理过程。其基本特征是前台接收的用户数据可以立即传送到计算...
OLTP，OLAP，HTAP是什么，数据库该怎么选
WannaRunning的博客
08-02 1109
在互联网高速发展的今天，大量数据的复杂分析和高并发事务处理不可兼得，不同场景对各自需求的性能要求使得数据库的处理模式被分为两类，OLTP和OLAP，后来还衍生了两者兼顾的HTAP。
聊聊 HTAP 的前世今生
Era666的博客
02-23 1507
由于传统的数仓ETL链路长，延迟大，很难满足业务快速多变的诉求，业务场景的变化也掀起了一股 HTAP 浪潮。点击查看 HTAP 的前世今生！
HTAP 简介
热门推荐
weixin_34112030的博客
03-28 1万+
2019独角兽企业重金招聘Python工程师标准>>> ...
HTAP是什么简写
06-21
我们正在讨论HTAP的全称及其在数据库领域，特别是TiDB中的意义。根据引用[3]，HTAP是HybridTransactional/AnalyticalProcessing的缩写，中文译为“混合事务/分析处理”。它结合了OLTP（在线事务处理）和OLAP（在线...
评论
成就一亿技术人!
拼手气红包6.0元
还能输入1000个字符
 
红包 添加红包
表情包 插入表情
表情包 代码片
 条评论被折叠 查看
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

杨鑫newlfe

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值