- 博客(19)
- 收藏
- 关注
RSS订阅原创 GBase RTSync 关键技术
松耦合架构GBase RTSync 采用多组件松耦合的架构，将控制流与业务流分离，将同 步过程中增量数据捕获和数据投递功能分别赋予数据捕获组件和数据投递组 件，从而实现模块职责单一化的目标，可以具备以下优势:1、单一职责，可实现分布式部署; 2、性能更加优化; 3、可实现与第三方同步系统集成。实时同步GBase RTSync 的数据捕获组件从源数据库实时获取事务逻辑日志，完成 解析与格式化，并以消息中间件为中介提供给数据投递组件，最终由数据投递 组件实时将数据写入目标数据库。数据一致性
2022-04-28 09:46:29
198
原创 GBase RTSync 产品架构
GBase RTSync 实时同步系统由四个子系统组件组成，分别是数据捕获组 件、消息队列组件、数据投递组件和管理组件 : 数据捕获组件，从数据源获取并解析增量数据逻辑日志，按照特定的 协议标准封装后发送给消息队列; 消息队列组件，传输和缓冲数据捕获组件发送的数据。目前支持 Kafka 以及 Rabbit MQ，两者均可保证高可用; 数据投递组件，从消息队列组件中获取协议数据，并根据目标库的类 型，组织和优化数据，将数据写入目标数据库; 管理组件，启、停和监控数据捕获、投递组件，校验
2022-04-27 22:03:37
98
原创 南大通用实时同步系统-GBase RTSync
南大通用实时同步系统，简称:GBase RTSync，它是一款自主研发的异 构及同构数据库增量数据实时同步产品，具备实时性、一致性、精准性、易扩 展性和可集成特性，适用于 OLTP 数据库与 OLAP 数据库联动向应用系统提供 数据管理和数据分析功能的业务场景，可以实现将 OLTP 数据库的数据实时同 步到 OLAP 数据库，从而使得 OLAP 数据库具备了实时数据分析的基础，解决 数据增量同步问题，能够有效提升数据仓库系统、BI 系统和决策支持系统的数 据分析效率和及时性。...
2022-04-27 21:59:32
1825
原创 通用管理平台GBase 8c Platform
GBase 8c Platform通用管理平台是一款功能强大的数据库集群管理平台，以图形可视化的形式，实现集群的系统部署、配置管理、运维监控、告警管理、备份恢复、扩容缩容、灰度发布等特性。
2022-04-27 21:52:32
1716
原创 GBase 8c的运行环境
GBase 8c支持如下运行环境：CPU：Intel、AMD、申威、龙芯、飞腾、海光、鲲鹏等。 服务器：x86_64 的标准 PC 服务器、PowerLinux 服务器、浪潮、华为、曙光、H3C等。 存储：本地存储（SATA、SAS、NVMe等）、阵列存储（SAN、NAS）、软件定义存储（vSAN、Ceph等）。 网络：千兆、万兆、InfiniBand。 操作系统：CentOS、Red Hat、SUSE、麒麟、PowerLinux、统信等 64 位操作系统。...
2022-04-27 21:49:04
1439
原创 GBase 8c的安全性
GBase 8c具有完备的安全特性，包括身份认证和鉴别、数据透明加密、三权分立、安全审计等。身份认证和鉴别：在GBase 8c中，每个数据库用户都有一个不可重复的唯一性用户标识，并在数据库整个生命周期实现该用户标识的唯一性。用户在使用数据库时必须首先给出用户标识，通过检验合格后才能进入使用。数据库用户的密码使用加密算法处理后存储在GBase 8c的系统表中，密码加密后不可逆，从而保证了密码自身的安全性。 数据透明加密：GBase 8c的数据存储加密采用库内加密的方式，在数据库内核存储引擎中进行数据加解
2022-04-27 21:46:31
65
原创 GBase 8c多部署方案
随着虚拟化和云计算技术的不断深入应用，业务上云成了IT架构发展的趋势，进而对数据库的云上部署能力提出了要求。GBase 8c支持物理服务器部署、虚拟机部署、容器部署、云上裸金属服务器部署、私有云部署、公有云部署等多种部署方式，为不同IT架构下的数据库部署提供了多种选择。物理服务器部署：传统的部署方式，适合对数据库资源需要物理隔离，IT架构尚未云化的客户。 虚拟机/容器部署：对于希望采用虚拟化部署，但IT架构尚未云化的客户可以使用容器来部署GBase 8c。 云上裸金属部署：适合IT架构已经云化，
2022-04-27 21:45:34
2139
原创 GBase 8a MPP Cluster V9 集群轻松应对多租户需求
在企业信息化建设的发展过程中，当前数据量的增长已经达到了前所未有的速度。“数据大集中”的发展趋势已在金融、电信、能源等行业获得了广泛的认同，一些大型企业已经投入到数据中心的建设中，这些企业用户对大数据平台或数据仓库要求能支撑多租户需求，满足各省分支机构按需提供资源的需求，GBase 8a MPP Cluster V9版本集群通过虚拟集群技术和资源管理技术完美实现了这些需求。首先，来了解一下GBase 8a MPP Cluster V9 虚拟集群技术，虚拟集群是一种资源隔离手段，逻辑子集群可以独立规划部署
2022-04-27 21:37:51
59
原创 GBase 8c功能简介
功能 描述 结构化查询语言 符合SQL标准，支持CREATE、ALTER、DROP等DDL语法， 支持SELECT、INSERT、UPDATE、DELETE、MERGE等DML语法， 支持单表，多表联合查询 数据类型 boolean布尔数据类型 integer、smallint、bigint、decimal、real等数值数据类型 char、var...
2022-04-27 21:30:12
220
原创 部署Gbase 8c的系统要求
在推荐的部署环境下，一般需要1台GTM服务器和3台数据库服务器集群分别部署Coordinator和Datanode节点。服务器推荐的硬件和操作系统配置要求如下表所示： 资源 物理机环境 虚拟机环境 CPU 2*10（cores）及以上 2*10（cores）及以上 内存 128G及以上 8G及以上 磁盘.
2022-04-27 21:16:10
1092
原创 GBase RTSync 具备的技术特征
1.实时性:GBase RTSync 通过流模式实现源数据库到目标数据库的实 时数据同步，确保上层业务系统能够通过目标数据库获取实时业务数 据;2.灵活性:既支持独立部署，完成从源数据库到目标数据库的数据同步; 也支持部署部分组件，完成从源数据库捕获增量数据到消息中间件的 功能，并实现与第三方同步系统的集成;同时，可根据业务需要，既 可以实现整库级别的增量数据同步，也可以实现表级增量数据同步， 甚至可以实现字段级数据同步;3.支持断点续传:GBase RTSync 支持断点续传功能，当出现网络异
2022-04-27 21:12:36
57
原创 GBase 8c支持灰度发布
GBase 8c支持灰度发布，可以在保证业务持续可用的条件下，进行数据库版本升级和发布。在进行GBase 8c版本升级时，需要先下线一部分节点，剩下一部分节点继续提供服务，系统功能不受影响，性能会有一定程度下降。接着将下线的节点升级到新的版本，上线后提供服务，系统性能能够恢复到初始状态。新旧版本同时提供服务，运行一段时间确保新版本无异常后，再下线一部分节点继续升级。如此循环，通过灰度发布将所有节点都升级到新版本。在灰度发布的过程中，GBase 8c不中断服务，只是有短暂的性能下降，具备系统持续可用的
2022-04-15 09:19:51
1135
原创 分布式数据库GBase 8c架构
GBase 8c采用shared nothing的分布式架构，计算节点和存储节点分离，节点间通过高速网络进行通信，所有节点都有主从互备，确保系统的高可用性。由于没有资源共享，增加节点就可以线性地扩展集群的存储能力和计算能力，满足业务规模增长的要求。GBase 8c的节点分为三类，分别是协调器（Coordinator,CN）、数据节点（Data Node,DN）和全局事务管理器（Global Transaction Manager,GTM）。协调器：协调器管理和客户端的连接，对客户端发来的SQL进
2022-04-14 16:35:53
300
原创 GBase 8a集群双活容灾方案
1MPP分析型集群容灾备份的必要性容灾备份要求MPP分析型集群的容灾备份在技术实现上、灾备级别要求上都与在线生产系统的OLTP事务数据库有较大差异。如事务数据库具有完备的WAL（write ahead logging）事务日志，灾备可以通过事务日志实现数据库的备份、双活复制、异地容灾等；MPP分析型数据库为追求大吞吐性能去掉了事务日志支持，无法采用基于事务日志的容灾备份方案。随着《“十四五”大数据产业发展规划》发布，大数据日趋成为重要的数字经济支撑，对承载数据仓库、负责高价值密度大数
2022-04-06 16:51:49
246
原创 趣说GBase 8a数据库集群（三）—之高可用特性
各位GBase 8a的粉丝以及对其感兴趣的朋友，大家好，GBase 8a数据库集群是南大通用自研的的核心分析型数据库产品，在国内数据库行业特别是分析型数据库领域长期处于主导地位，历经13年时间演进与发展，GBase 8a产品随着客户的业务需求逐渐成长壮大，在金融、电信等行业得到规模化的应用，IDC报告与赛迪报告显示其位列国产分析型数据库市场占有率第一。本篇“趣说”也将和大家一起从满足客户主要需求的角度剖析一下GBase 8a的高可用特性。伴随客户需求成长的GBase 8a通过前面的两
2022-04-06 16:49:46
265
原创 趣说GBase 8a数据库集群（二）
各位GBase数据库的粉丝以及对其感兴趣的朋友，大家好，GBase 8a数据库集群是南大通用自研的的核心分析型数据库产品，自2009年启动研发以来，历经13年演化及发展，已经在金融、电信领域实现规模化部署，并覆盖除金融电信外的其他各个行业，总节点数超过30000+个，管理数据总量250+PB。通过上一篇“趣说”，我们了解到GBase 8a MPP Cluster产品演进分为三个阶段，即：列存数据库阶段、MPP+列存数据库阶段和逻辑数仓LDW阶段。前一阶段是后一阶段的研发基础，本篇“趣说（二）”将续接
2022-04-06 16:48:03
149
原创 趣说GBase 8a数据库集群（一）
各位GBase 8a的粉丝以及对其感兴趣的朋友，大家好。本人计划以GBase 8a数据库集群软件的发展历史、产品架构演进、产品功能演进、产品适用场景以及与竞品的对比分析为主线，通过一系列“趣说”向大家详细介绍GBase 8a产品，欢迎各位围观，期望您能够通过阅读该系列“趣说”，进一步了解GBase 8a，能够从中汲取一些大家感兴趣的相关知识。首先声明一下，本系列“趣说”为本人原创，如果其中存在着描述不准确、缺失或者不正确的内容，欢迎大家批评指正。言归正传，“趣说”（一）作为开篇，我们
2022-04-06 16:45:54
240
原创 GBASE数据实现数据层面同城双活之应用
随着客户业务发展，客户原有系统不能满足业务发展的需要，需要进行同城第二机房建设。新建的同城第二机房兼具性能提升和安全提升，既需承载一部分业务，分担主机房压力，又需实现同城两个机房需数据互备，达到同城双活容灾能力。南大通用事务型数据库产品GBase 8s，部署在4台服务器上，通过HAC高可用集群方案解决了双机互备问题、通过ER企业级复制技术解决了不同业务对于部分数据的共享问题。此方案已在贵州移动、山西电信等实际项目应用，有效应对了客户第二机房建设所需处理的数据负载分担、同城双活需求。数据库解.
2022-04-06 16:39:01
105
原创 首款国产新型NewSQL数据库GBase 8a
GBase 8a是首款国产新型NewSQL数据库产品。凭借一系列特有的先进技术，GBase 8a与国际一线产品处于同一技术水平，在中国行业大数据管理分析类应用市场上取得战略性突破，在电信、金融、和政务等领域得到规模化应用。在不断的市场实践和用户反馈中，GBase 8a体现出4个方面的产品价值，具体是：成熟稳定、海量极速、节支降耗、国产可控。成熟稳定：千余个项目，上万个数据节点，保障7X24小时稳定运行；GBase 8a集群产品于2009年问世，历时多年研发，千余个项目验证，总共支撑超过200PB数
2022-04-01 20:35:43
5279
空空如也
空空如也
TA创建的收藏夹 TA关注的收藏夹
TA关注的人