【TiDB理论知识08】HATP概述

已于 2023-12-05 19:27:48 修改
阅读量867 收藏
点赞数
分类专栏： TiDB 文章标签： 数据库
于 2023-08-03 17:00:29 首次发布
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_48154829/article/details/132085372
版权

目录

 

1 HTAP技术

2 传统解决方案

3 HTAP的要求

 

4 TIDB的HTAP架构

5 MPP

应用场景

 

1 HTAP技术

 OLTP 在线事务 支付 转账 高并发 每次操作的数据量少 ，行存 

OLAP 报表分析 每次操作大量数据  列存储

2 传统解决方案

数据抽取到数仓或者数据湖 

ETL有延迟 ，一般会有T+1 T+2的延迟

数据多副本，维护起来困难

3 HTAP的要求

 

4 TIDB的HTAP架构

列存 ,

一致性，与TIKV实时同步 。

智能选择 

5 MPP

 

 过滤数据 

交互数据 ，方便连接 聚合发生在同一个TiFlash 上

应用场景

参考

TiFlash 简介 | PingCAP 文档中心

DBA之路
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 打赏
    打赏
  • 0
    评论
专栏目录
阿里云数据库开源发布：PolarDB HTAP的功能特性和关键技术
阿里云云栖号
03-11 3686
简介：在3月2日的阿里云开源 PolarDB 企业级架构发布会上，阿里云 PolarDB 内核技术专家严华带来了主题为《PolarDB HTAP详解》的精彩演讲。在PolarDB存储计算分离架构的基础上，我们研发了基于共享存储的MPP分布式执行引擎，解决了单条SQL执行时无法利用其它节点计算资源、无法发挥共享存储池的IO大带宽的问题，同时提供了弹性计算，弹性扩展的保障，使得PolarDB初步具备了 HTAP 的能力。本议题主要介绍PolarDB HTAP的功能特性和关键技术。 在3月2日的阿里云开源 Po
009、体系架构之HTAP
细致-专业-实操
06-16 1687
SQL过来，TiDB Server作为协调者，Tidb 会将每个TiFLASH 上面的列存做交换，交换后让表连接需要的数据只在一个TiFLASH上。数据存到TiKV的同是也会同步（也是使用raft算法，并且它不参与选举，只用于同步）到TiFlash，并且是它是列式。TiDB HTAP 可以满⾜企业海量数据的增产需求、降低运维的⻛险成本、与现有的⼤数据栈⽆缝缝合，从⽽实现数据资产价值的实时变现。然后做连接的时候，只发生在本节点，不需要到其他节点查找数据，这样就可以并行执行了。它在TiFLASH中处理。
TiDB的HATP对我们来说意味着什么？
TiDB 社区干货传送门
03-22 430
作者：xuexiaogang 原文来源： https://tidb.net/blog/28bb7882 ...
OLAP列式存储之引擎特性
style_boy的博客
04-24 962
本文简要从存储结构、索引结构和数据更新方式等几个方面介绍当前比较热门的OLAT/HATP列式存储引擎，包括ClickHouse和SqlServer。 ClickHouse 1.1 存储结构和索引结构 ClickHouse拥有多种表引擎类型，在这众多的表引擎中，MergeTree是比较有代表性的引擎之一，被广泛使用。MergeTree采用列式存储，类似LSM Tree的架构组织数据。数据导入时被划分为多个Part，每个Part对应一个目录。Part中包含各个列的数据，每个列都有独立的文件。后台会调度合并任
OLTP、OLAP与HTAP
热门推荐
ZG_24的博客
02-21 2万+
OLTP On-Line Transaction Processing联机事务处理过程(OLTP) 也称为面向交易的处理过程，其基本特征是前台接收的用户数据可以立即传送到计算中心进行处理，并在很短的时间内给出处理结果，是对用户操作快速响应的方式之一。 这样做的最大优点是可以即时地处理输入的数据，及时地回答。也称为实时系统(Real time System)。衡量联机事务处理结果的一个重要指标...
【TiDB理论知识01】TiDB数据库架构概述
DBA之路的博客
07-10 604
TiDB 的整体架构
tidb技术分享.pptx
03-23
tidb的简介、安装部署、Sql操作等
TiDB-讲义，详细版
06-20
数据库技术在理论研究和系统开发上都取得了辉煌的成就。 数据库技术可以分为三个阶段： 1. 人工管理阶段：在这个阶段，数据量小，独立，用户直接管理。 2. 文件系统阶段：在这个阶段，使用文件存取数据，冗余度高...
TiDB体系架构思维导图
01-04
TiDB体系架构思维导图
tidb中文官方文档
10-03
tidb中文官方文档！
TiDB in action.pdf 介绍Tidb原理和最佳实践
10-16
TiDB in action, TiDB-in-action, 原网站url链接https://book.tidb.io/。介绍tidb的一些原理和最佳实践。由于想要离线看，所以生成pdf，原网站pdft的链接失效，无法下载。本pdf导出时间为 2022.10.16
HTAP数据库(OLTP+OLAP) - 数据库典型架构 优缺点剖析(shard VS shared)
weixin_33721344的博客
10-28 1438
标签 PostgreSQL , 共享分布式存储 , 存储计算能力。 背景 随着互联网的发展，数据爆炸性的增长，数据库逐渐成为了很多业务的绊脚石，很多业务也哭着喊着要上分布式数据库（个人认为大部分是高估了自己的业务）。 分布式数据库又分很多流派，比如重点要说的sharding和共享分布式存储的架构，它们有着什么样的优缺点呢？ sharding vs ...
canal应用
qq_33816292的博客
06-12 134
canal分享模块链接。
源码编译安装LAMP
潇的博客
06-12 867
LAMP 架构是目前成熟的企业网站应用模式之一，指的是协同工作的一整套系统和相关软件，能够提供动态Web站点服务及其应用开发环境。LAMP是一个缩写词，具体包括Linux操作系统、Apache网站服务器、MySQL数据库服务器、PHP(或Perl、Python)网页编程语言。本章将以源码编译的方式搭建LAMP环境，能够满足企业定制化的需求。在构建LAMP平台时，各组件的安装顺序依次为Linux、Apache、MySQL、PHP。其中Apache和MySQL的安装并没有严格的顺序；
C#操作MySQL从入门到精通(16)——使用子查询
qq_34059233的博客
06-09 157
我们在查询数据的过程中有时候查询的数据不是从数据库中来的，而是从另一个查询的结果来的，这时候就需要使用子查询，本文进行详细介绍！
Django UpdateView视图
人生苦短，何妨一试
06-11 428
UpdateView是Django中的一个通用视图，用于处理对象的更新操作。它允许用户更新一个已经存在的对象。UpdateView通常与一个模型表单一起使用，这样用户就可以看到当前对象的值，并可以修改它们。
SpringBoot+MyBatis批量插入数据的三种方式
最新发布
pscool的博客
06-12 826
在开发过程中，我们经常会遇到往数据库表中插入大量数据的场景，比如excel批量导入数据。那么该如何快速地插入数据呢？我们可以考虑使用批量插入来实现，实测100000条数据添加，后附具体实现代码。用一个 for 循环，把数据一条一条地插入。/*** 第一种方案，用 for语句循环插入 10万 条数据*/i < count;i++) {user.setName("方案1测试" + i);user.setGender("男");user.setUsername("方案1测试");
liquibase做数据库版本管理
weixin_44554979的博客
06-10 203
通过这个配置就会自动启动liquibase。
tidb ptca题库
02-05
tidb ptca是一个面向数据库从业者的题库，涵盖了数据库基础知识、TiDB架构及原理、TiDB运维等相关内容。该题库旨在帮助数据库从业者系统地学习TiDB相关知识，提高其在实际工作中的应用能力。题库中的题目设计贴近实际工作场景，能够帮助从业者更好地理解和掌握TiDB的核心概念和技术细节。通过学习和练习，数据库从业者可以更好地应对工作中遇到的各种挑战和问题，提高工作效率。 此外，tidb ptca题库还为数据库从业者提供了在线测评和考试的机会，通过参与测评和考试，从业者可以评估自己的TiDB技术水平，发现自身的不足之处，并有针对性地进行学习和提升。通过不断的学习和实践，数据库从业者可以逐渐提升自己在TiDB领域的专业能力，为个人职业发展打下坚实的基础。 总之，tidb ptca题库是一个帮助数据库从业者学习和提升TiDB技术能力的重要平台，通过系统的学习和实践，从业者可以更好地应对工作挑战，提高工作效率，为个人职业发展注入新的动力。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包

打赏作者

DBA之路

你的鼓励将是我创作的最大动力

¥1 ¥2 ¥4 ¥6 ¥10 ¥20
扫码支付：¥1
获取中
扫码支付

您的余额不足，请更换扫码支付或充值

打赏作者

实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值