分布式存储--聊聊分布式数据库NewSQL

最新推荐文章于 2024-05-10 08:58:41 发布
最新推荐文章于 2024-05-10 08:58:41 发布
阅读量485 收藏
点赞数
分类专栏： 分布式 大数据 文章标签： 分布式数据库
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_42002747/article/details/128177003
版权

发展历程

1）单机数据库
最常用的SQL数据库MySQL，计算和存储都在一个节点上，受到单机存储容量的限制，难以存储海量数据
2）分库分表+数据库代理中间件
单机数据库难以存储，所以出现了分库分表，根据hash或者range等分区算法把数据存储在不同节点上，但是分库分表会出现各种问题，难以动态扩缩容，原生sql受限，dml操作困难
3）分布式存储–NoSQL
不使用SQL读写数据，比如MongoDB文档数据库，HBase&Cassandra表格存储。牺牲SQL，没有事务保证
4）分布式数据库
在NoSQL的基础上支持SQL和事务，比如有TiDB，底层基于分布式kv存储引擎–TiKV来实现SQL，存储与计算分离，也支持事务。也称为NewSQL
5）企业级分布式数据库
上面4的数据库的存储是分布式kv，计算是SQL，事务，没有严格意义上存储与计算分离。借鉴Amazon Aurora数据库思想，出现了像OceanBase一类的分布式SQL数据库

梦江河
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
【NewSQL】-- 分布式数据库 TiDB 和 CockroachDB
欢迎来到我的博客，一起探索代码里的世界！
01-17 1205
国产骄傲。从2015年开始，至今已8年，当前最新版本是6.5.x。TiDB 开源分布式 NewSQL 关系型数据库 是新一代开源分布式 NewSQL 数据库，模型受 Google Spanner / F1 论文的启发，实现了自动的水平伸缩，强一致性的分布式事务，基于 Raft 算法的多副本复制等重要 NewSQL 特性。TiDB 结合了 RDBMS 和 NoSQL 的优点，部署简单，在线弹性扩容和异步表结构变更不影响业务， 真正的异地多活及自动故障恢复保障数据安全，同时兼容 MySQL 协议。
第四届全球数据库大赛赛道2：分布式NewSQL性能挑战--复赛方案分享
dreamflyly的博客
04-09 690
初赛幸运的获得第10名进入复赛，复赛目标是出分（600秒以内），但是复赛的难度远远大于初赛，分布式集群、8亿数据量，一座座大山横亘面前，出分遥遥无期。解题过程可谓历尽艰辛，在其它参赛队伍都非常卷的刺激下日夜鏖战，拼尽全力，最终复赛成绩256秒，又是第10，如此巧合，压线进入决赛答辩。总结起来，在整个解题过程中学习到了不少新知识，收获良多，也取得了参赛之初不敢想的成绩。比赛结束后看到其它队伍分享的技术实现方案，发现自己的方案还是有很多不足之处，也学到不少新的思路与方法(比如页高缓等，让我眼界大开)。
newsql数据库的技术特色和技术特点有哪些及其应用场景
最新发布
ducanwang的博客
05-10 1194
数据库发展至今已经有3代了：SQL，传统关系型数据库，例如 MySQLnoSQL，例如 MongoDB,RedisnewSQL。
SQL SERVER-单用户数据库
网络资源
12-29 201
单用户数据库 SQL SERVER有时需要在单用户下维护一个数据库，比如增量上云的时候， 在最后一次备份尾日志的时候就需要进入单用户模式，进行备份，防止其他系统在动数据。 --进入单用户 USE master; GO ALTER DATABASE Demo SET SINGLE_USER WITH ROLLBACK IMMEDIATE; GO --恢复多用户 ALTER DATABAS...
猿创征文｜一文带你了解国产TiDB数据库
一个菜鸡的博客
10-04 3445
很多小伙伴在日常接触中接触国产数据库很少，大部分在开发应用上使用的是由甲骨文，微软等公司提供了MySQL，SQLserver。普通程序员很少能用到newSQl数据库，TiDB就是一种newSQL数据库，在大趋势下，向国际对接是避免不了的，但也存在一个问题，近期看到新闻国外某知名数据库厂商宣布称“暂停在俄罗斯的所有业务”，相信很多国内小伙伴的心情，绝不是隔岸观火，而是细思恐极。数据库产品一直都是国内人员的焦点话题，面对现如今全球的“非常时期”，国产数据库到底能不能支棱起来呢？今天呢我就带领大家认识国产数据库T
数据库SQL Server单机安装步骤
右后方，天才的博客
04-29 1080
数据库SQL Server单机安装步骤 双击装载镜像后，进入目录 右击以管理员身份运行。 2.选择以全新SQL独立安装 3，继续下一步 4.同意授权许可，下一步，不勾选推荐更新。 5.选择安装的功能及更改安装目录 5.1实列功能 5.2共享功能 ...
Go-TiDB一个分布式NewSQL数据库兼容MySQL协议
08-13
TiDB（全称为“Ti-Database”）是一个开源的分布式NewSQL数据库，它设计的目标是同时支持在线事务处理（OLTP）和在线分析处理（OLAP），并具有水平扩展的能力。Go语言是TiDB的主要开发语言，这使得它在性能、稳定性...
如何对分布式 NewSQL 数据库 TiDB 进行性能调优1
08-03
Region 是 TiDB 分布式存储的基本单位，随着数据增长，Region 会自动分裂，保证水平扩展。二阶段提交协议保证了事务的原子性和一致性，但也会引入额外的延迟。在调优时，我们可能需要调整 Region 大小、复制因子或者...
如何对分布式NewSQL数据库TiDB进行性能调优
02-25
TiDB是开源的混合事务处理/分析处理（HTAP）的NewSQL数据库。一个TiDB集群拥有几个TiDB服务、几个TiKV服务和一组PlacementDeiver（PD）（通常3-5个节点）。TiDB服务是无状态SQL层，TiKV服务是键值对存储层，PD则是...
从GoogleSpanner漫谈分布式存储与数据库技术
03-02
Spanner的设计反映了Google多年来在分布式存储系统领域上经验的积累和沉淀，它采用了Megastore的数据模型，Chubby的数据复制和一致性算法，而在数据的可扩展性上使用了BigTable中的技术。新颖之处在于，它使用高精度...
【建议收藏】数据库 SQL 入门——数据查询操作（内附演示）
复杂网络的博客
03-08 4794
本次列举了SQL中DQL的相关语句，在实际学习的过程中还需要多学习以及使用才能熟练掌握。余下的SQL内容我也将持续更新，如果感兴趣的话不妨订阅本专栏或者点个关注，我们下次再见。
安装mysql单机版
12-25
mysql 在windows和 linux下的安装配置等，截图最全面。
New SQL
hhkun0120的专栏
06-27 549
是的我看见到处是阳光 快乐在城市上空飘扬 新世纪来得像梦一样 让我暖洋洋
分布式数据存储
宇宙小懒糖
08-19 2650
分布式存储概念 存储方式的演进 [1] 直连式存储DAS [2] 集中式存储NAS 、SAN等 分布式存储 基本架构 [1] 有中心管理节点，存储节点有主从 [2] 有中心管理节点，存储节点无主从 分布式系统存储指标
分布式NewSQL数据库Hyperbase
qq_37121044的博客
07-05 2558
Hyperbase Hyperbase简介 概念 Transwarp Hyperbase实时数据库是建立在Apache HBase和Elasticsearch基础之上，融合了多种索引技术、分布式事务处理、全文实时搜索、图形数据库在内的实时NewSQL数据库。Hyperbase可以高效地支持企业的在线OLTP应用、高并发OLAP应用、批处理应用、全文搜索或高并发图形数据库检索应用，结合Inceptor高速SQL引擎，是企业创建可扩展在线运营数据库（Operational Database）或者实时分析型数据
newsql的分布式事务实现机制
woliuqiangdong的博客
11-02 348
前言:本文仅从事务角度论述，难免一些结论性的东西会有些偏颇，毕竟数据库不仅仅只有事务，但事务却是数据库中最复杂，最难实现，最重要的技术之一。 背景：互联网公司从成立初业务往往会飞速发展，系统高并发、数据量急速膨胀对系统扩展性提出了更高的需求。对于系统应用服务来说很容易进行扩展，但是数据库却并非那么容易，因此数据库层难于扩展往往成为拖累业务发展的瓶颈。 目前主流的关系型数据库如：Oracle 、MySQL、SQL Server、 PostgreSQL 等面对数据量爆发增长，无法线性扩展问题日益凸显。主流的
【数据库架构】NewSQL和PGXC
卡兹戴尔
04-07 1881
数据库的两种架构风格：NewSQL（代表Google Spanner）、Prxoy（PostgreSQL-XC）的区别。
什么是分布式数据库
热门推荐
鸭梨的博客
08-04 2万+
基本概念 分布式数据库，从名字上可以拆解为：分布式+数据库。用一句话总结为：由多个独立实体组成，并且彼此通过网络进行互联的数据库。 理解新概念最好的方式就是通过已经掌握的知识来学习，下表对比了大家熟悉的分布式数据库与集中式数据库之间主要的 5 个差异点。 分布式数据库的核心——数据分片、数据同步。 1. 数据分片 该特性是分布式数据库的技术创新。它可以突破中心化数据库单机的容量限制，从而将数据分散到多节点，以更灵活、高效的方式来处理数据。这是分布式理论带给数据库的一份礼物。 分片方式包括两种。 水平分片：
分布式事务的分布式存储与分布式数据库
禅与计算机程序设计艺术
01-25 65
更高效的一致性算法：如果可以在分布式事务中实现更高效的一致性算法，则可以提高系统性能和可靠性。更智能的故障恢复：如果可以在分布式事务中实现更智能的故障恢复机制，则可以提高系统的可用性和容错性。更安全的加密技术：如果可以在分布式事务中实现更安全的加密技术，则可以提高系统的安全性和隐私性。一致性与性能之间的权衡：在分布式事务中，一致性和性能之间是矛盾相容的。需要在保证一致性的同时，提高性能。分布式锁的竞争：在分布式事务中，分布式锁的竞争可能导致系统性能下降。需要采用合适的锁定策略来解决这个问题。
谷歌Spanner：全球分布式NewSQL数据库解析
"Google Spanner (NewSQL相关) - 分布式数据库、同步复制、外部一致性" Google Spanner是一个由谷歌公司开发的NewSQL数据库系统，它具有高度的可扩展性、多版本特性，并且是全球分布式和同步复制的。作为第一个实现...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值