[原创] 分布式数据库系统+数据备份与恢复

最新推荐文章于 2023-12-08 11:19:05 发布

congnangwu6519

最新推荐文章于 2023-12-08 11:19:05 发布

阅读量303

点赞数

文章标签：数据库

问题：.假如有一个分布式数据库系统，包含10台数据库，每台数据库上存放有10T的数据，数据通过sql*loader定时批量加载到分布式环境中的每台数据库中，在允许增加硬件的前提下，设计一套数据备份和恢复方案，让系统down机的时间尽可能的短，设计架构如下，欢迎与大家一起交流分享！

我是用visio设计的分布式数据库架构图，请大家多多指正，请给我留言，谢谢

Leonarding
2012.9.13
天津&autumn
分享技术~收获快乐
Blog：http://space.itpub.net/26686207

来自 “ ITPUB博客 ” ，链接：http://blog.itpub.net/26686207/viewspace-743323/，如需转载，请注明出处，否则将追究法律责任。

转载于:http://blog.itpub.net/26686207/viewspace-743323/

确定要放弃本次机会？

福利倒计时

: :

立减 ¥

普通VIP年卡可用

立即使用

congnangwu6519

关注关注

0
点赞
踩
0

收藏

觉得还不错? 一键收藏
0
评论
复制链接

分享到 QQ

分享到新浪微博

扫一扫

第01课：走进分布式中间件（课前必读）

Jin_Kwok的博客

10-28

1784

关于“分布式系统”的定义，《分布式系统原理和范型》一书中是这样阐述的：“分布式系统是若干独立计算机的集合，这些计算机对于用户来说就像是单个相关系统”。本文作为《分布式中间件实践之路》的开篇，概述以kafka为代表的分布式消息队列，以Redis为代表的分布式缓存，以及以etcd为代表的分布式锁。

第02课：主流分布式缓存方案的解读及比较

Jin_Kwok的博客

10-28

1456

分布式缓存一般被定义为一个数据集合，它将数据分布（或分区）于任意数目的集群节点上。集群中的一个具体节点负责缓存中的一部分数据，整体对外提供统一的访问接口。分布式缓存一般基于冗余备份机制实现数据高可用，又被称为内存数据网格（IMDG，In-Memory Data Grid）。在云平台飞速发展的今天，作为提升应用性能的重要手段，分布式缓存技术在工业界得到了越来越广泛的关注和研发投入。本文将介绍三种分...

参与评论您还未登录，请先登录后发表或查看评论

TDSQL分布式数据库的HDFS和LOCAL备份配置

weixin_43872058的博客

09-06

887

产品介绍：TDSQL分布式数据库是腾讯公司结合自身支付、金融等核心业务需求，紧紧抓住了国外传统集中式数据库难以适应业务规模快速增长这一现实问题，从2009年开始研制新一代分布式数据库系统TDSQL。并通过持续的产品化完善，实现国产分布式数据库的市场通用化，助力金融政务等行业实现数据库安全可控，并持续降低IT成本，提升数字化运营效率，从而进一步推动普惠金融、数字政务等传统行业升级发展。产品特点：TDSQL作为一款具有金融级特性的分布式数据库产品，具备强一致高可用、全球部署架构、分布式水平扩展、高性能、易运维

mysql分布式数据库备份数据_一种实现分布式架构的数据库备份方法与流程

weixin_42517987的博客

02-07

505

本发明主要应用于数据库备份技术领域，特别适用于mysql等类型数据库高可用备份，具体是一种实现分布式架构的数据库备份方法。背景技术：近年来，随着互联网和移动网络的不断发展，企业级数据库的规模和访问并发数已经急剧增长，传统备份技术已经难以适应现在的高可用需求，数据库备份技术正在朝着高可用、集中化、智能化等新方向发展。在大规模互联网应用数据库中，如何高效地在不影响正常业务运行的情况下，进行异步集中化的...

分布式数据库的数据备份/恢复，这些你一定要了解

巨杉数据库技术社区

07-24

8548

一、概述在数据作为生产资料的今天，数据早已成为各行各业的生命源泉，数据安全的重要性不言而喻。数据备份是数据安全的基础,完整的备份和有效的恢复手段是应对一切突发状况的重要保障。同时数据备份也对数据的重新利用，发挥数据更大价值，有着重大的作用。而数据备份的重点是对数据库的备份。定期对数据库进行数据备份，以便能在未来发生系统故障、人为误操作等情况时，进行数据恢复，防范于未然。巨杉数据库作为新一代分布式交易型数据库，采用“计算与存储分离”的架构；和同时期发展分布式数据库的灯塔厂商AWS在架构..

mysql分布式思维（二）-备份恢复

互联网思维

04-14

144

存储引擎优化一、myisam存储引擎优化1.索引缓存优化 1.1myisam存储引起实现机制及索引文件的存放格式 .myi文件中头（四部分信息）紧跟索引数据信息索引数据以Block(page)为最小单位 Index Block ---->逻辑上组织形式物理上是以File Block存储磁盘 Key Cache中缓存的索引信息是以Cache...

Navicat 技术指引 | 适用于 GaussDB 分布式的备份/还原功能

Navicat 官方账号

12-08

893

Navicat Premium（16.3.3 Windows 版或以上）正式支持 GaussDB 分布式数据库。GaussDB 分布式模式更适合对系统可用性和数据处理能力要求较高的场景。Navicat 工具不仅提供可视化数据查看和编辑功能，还提供强大的高阶功能（如模型、结构同步、协同合作、数据迁移等）。这使得Navicat 可以极大地满足 GaussDB 分布式用户的管理开发需求。本文，我们就来介绍 Navicat 连接 GaussDB 分布式的快速入门。

数据库误操作后悔药来了：AnalyticDB PostgreSQL教你实现分布式一致性备份恢复

阿里云技术

08-12

200

一、背景 AnalyticDB PostgreSQL版（简称ADB PG）是阿里云数据库团队基于PostgreSQL内核（简称PG）打造的一款云原生数据仓库产品。在数据实时交互式分析、HTAP、ETL、BI报表生成等业务场景，ADB PG都有着独特的技术优势。作为一款企业级数据仓库产品，数据安全的重要性不言而喻。备份恢复功能是保障数据安全的基本手段，也是ADB PG应对突发状况进行数据库恢复的重要保障。备份恢复，顾名思义，是对数据库进行数据备份，以便在必要时进行数据的恢复，防范于未然。当前，ADB P

2019上半年数据库系统工程师考试真题及解析答案.zip

05-19

5. 数据库安全与备份恢复：这部分内容涉及用户权限管理、访问控制、审计机制，以及数据库的备份策略、恢复技术和故障处理。 6. 数据库管理：涵盖数据库的安装、配置、监控、维护等实际操作，包括日志管理、事务处理...

数据库系统的架构（ArchitectureDBSystem）

最新发布

02-01

1. **客户端请求**：机场登机口的个人电脑发起API调用，通过网络与数据库管理系统的客户端管理器通信。 2. **连接管理**：客户端与数据库服务器之间建立连接，可能是直接连接(如通过ODBC或JDBC协议)，也可能通过中间...

基于分布式数据库本身的定时备份方法

KaiwuDB 数据库

06-10

556

KaiwuDB 提供了一种定时备份方法。此种方法可通过数据库本身定时对数据库数据进行备份，避免数据的大规模丢失，保障数据的安全性。同时，相比于其他类似技术，该方法解决了定时备份任务强依赖于操作系统及脚本的问题，使得定时备份变得更为灵活且容易实现，更利于数据库管理人员操作使用。...

分布式数据库系统之【故障恢复与数据复制】

丧心病狂Loli控的博客

01-08

577

content 故障恢复数据复制故障恢复 ▍两阶段提交协议中的故障场地故障——在协调者场地/参与者场地发生的故障（下面的5处）通信故障——在发出命令/应答时发生的故障（下面的4处） ▍场地故障的恢复协调者场地故障：启动终结协议，选举出一个参与者作为新的协调者；新上任的协调者再次访问所有参与者并作出决定（提交/废弃？）参与者场地故障：写日志和发送报文是两个动作且一前一后，因此故障恢复需要具体情况具体分析（重发？忽视？直接启动终结协议？） .

分布式恢复【进阶篇】

07-21

442

每当一个MySQLserver新加入或者重新加入一个MGR集群时，它都必须追平集群内相差的事务，保证这个节点的数据和集群内最新的数据是同步的。这个新加入集群的节点在追平集群中的数据或者重新加入集群的节点追评它脱离集群后到现在这段时间内相差的事务数据的过程称为分布式恢复。申请加入集群的节点首先检查groupreplicationapplier通道中的中继日志，检查该节点目前尚未从集群中同步过来的事务数据。如果是重新加入集群的节点，则该节点会找到在离开集群后到现在和集群最新数据中未回放的事务数据，在这种情况。.

分布式数据库挑战与分析

CSDN 人工智能

03-16

1584

分布式系统+数据库主从复制详解

ky290382281的博客

09-20

4190

分布式系统总结 分布式系统为什么用分布式系统 分布式系统局限设计分布式 数据库主从复制 数据库主从复制操作 1 分布式系统1.1 “分布式系统”定义《分布式系统原理和范型》一书中是这样定义分布式系统的：“分布式系统是若干独立计算机的集合，这些计算机对于用户来说就像是单个相关系统”。从进程角度看，两个程序分别运行在两个台主机的进程上，它们相互协作最终完成同一个服务（或者功能），那么理论上这两个

分布式数据库和多活数据库的区别

刘振锋的博客

01-11

5428

分布式数据库 分布式数据库每个节点上存的数据与其它节点都不同，业务的全部数据是分布式数据库各个节点数据的和。多活数据库每个节点都是一套完整的业务数据，各个节点之间是相互备份的关系。

分布式事务数据跨机房灾备

m0_46473154的博客

10-15

397

数据是企业的核心，是企业发展最重要的生产资料，数据丢失对企业的影响往往是致命的。分布式事务数据库产品有完整配套的跨机房灾备解决方案可以为数据库服务带来更高的可用性和安全保障。热璞数据库HotDB Server提供基于MySQL原生复制功能解决HotDB Server跨机房灾备问题的解决方案，能够实现跨机房数据同步功能以及解决跨机房分布式事务数据库服务灾备的问题。 HotDB Server 灾备目标支持跨机房数据同步传输，保障中心机房分布式事务数据库服务发生故障时，可切换到备用机房，在存储节点MySQL开

如何利用Spring Cloud构建起自我修复型分布式系统

cnhome的专栏

05-29

4177

引自：英文原文：利用Netflix所打造的组件及各类大家熟知的工具，我们完全可以顺利应对由微服务以及分布式计算所带来的技术挑战。在过去一年当中，微服务已经成为软件架构领域一个炙手可热的新名词，而且我们也能轻松举出由其带来的诸多比较优势。然而，我们必须清醒意识到的是，一旦开始遵循微服务思路而对现有架构体系进行拆分，就意味着我们将不可避免地进入分布式系统领域。在之前的文章中我们

一种分布式数据库同步方案

框架提高生产力

07-15

4563

对于大型企业，业务分布在世界各地，为了改善当地业务服务能力，不得不在当地部署数据库以提高性能，而各个区域之间的数据交互或者同步，成为不可不面对的问题。其间要解决的技术问题主要有： 1、同步数据的提取。从数据库里提取出需要同步的数据，这包括增、删、改三类动作对数据造成的改变。在数据表安装触发器是提取同步数据的简单有效的手段，而且触发器对应用层而言是透明的，应用程序感觉不到触发器的存在。