小葵花001-CSDN博客

原创 GaussDB技术解读系列：高安全之密态等值

比如在使用的时候输入一个SQL语句，加密驱动会找到哪个字段需要加密，然后用一个密钥把它自动加密，这样加密完后整个流程都是密文的，整个数据库跑的数据、以及跑完之后的结果都是密文数据，不论什么时候把数据拿走，拿走的也都是密文的，因为在整个数据库里面没有任何解密的过程。而之前的传统方案，是强制在应用层加密，加密完成后存到数据库，用数据的时候，先把数据查询出来之后做解密再使用，数据库做不了任何事情，这种方案加密时间长，性能损耗大，密钥需要自管，所以上了全密态。在这种新形势下，数据库的安全也面临很大的威胁。

2024-09-29 11:53:22 437

原创 GaussDB SQL基础语法示例-循环语句

SQL是用于访问和处理数据库的标准计算机语言。GaussDB支持SQL标准（默认支持SQL2、SQL3和SQL4的主要特性）。本系列将以《云数据库GaussDB—SQL参考》为主线进行介绍。

2024-09-29 11:52:49 290

原创 GaussDB SQL基础语法示例-常见的条件表达式

SQL是用于访问和处理数据库的标准计算机语言。GaussDB支持SQL标准（默认支持SQL2、SQL3和SQL4的主要特性）。本系列将以《云数据库GaussDB—SQL参考》为主线进行介绍。

2024-09-29 11:52:14 542

原创 GaussDB SQL基础语法示例-BOOLEAN表达式

SQL是用于访问和处理数据库的标准计算机语言。GaussDB支持的SQL标准（默认支持SQL2、SQL3和SQL4的主要特性）。本系列将以《云数据库GaussDB—SQL参考》为主线进行介绍。1、概念在GaussDB数据库中，BOOLEAN表达式是一种很常见的表达式类型，它用于比较两个条件，来确定其是否为真或假。BOOLEAN表达式可以用于条件判断或在循环语句中作为终止条件。其语法非常简单，只需要使用逻辑运算符对两个条件进行比较。

2024-09-29 11:51:37 769

原创 GaussDB云数据库SQL应用系列-视图管理

GaussDB是一款基于云计算技术的高性能关系型数据库，支持多种数据模型和分布式架构。在GaussDB中，视图管理是非常重要的一项功能，它可以帮助用户更方便地管理和查询数据。数据库视图管理是指对数据库中的视图进行创建、修改、删除、查询等操作的过程。

2024-09-29 11:50:59 889

原创 GaussDB云数据库SQL应用系列-定时任务管理

GaussDB数据库定时任务主要可以用于实现定期的备份、统计信息采集、数据汇总、数据清理与优化等，它是指在指定的时间间隔内自动执行一次或多次SQL语句的程序。GaussDB数据库兼容Oracle定时任务功能主要通过DBE_TASK高级功能包提供的二次封装接口实现（另可参见GaussDB提供的基础接口PKG_SERVICE，此接口也可实现定时任务创建），主要包括创建定时任务、任务到期自动执行、任务删除、修改任务属性（任务id、任务的关闭开启、任务的触发时间、触发时间间隔、任务内容）等。

2024-09-29 11:50:24 639

原创 JDBC连接GaussDB云数据库操作示例

目录一、实验环境二、登录华为云创建测试库表1、登录GaussDB云数据库2、建库、建表,用于测试3、新增普通角色（用户）用于登录及访问测试（可选）4、获取对应的公网IP三、创建java工程1、创建java工程2、添加jar包3、编辑Java代码四、执行并查看测试结果。

2024-09-29 11:49:51 932

原创 GaussDB的行存表与列存表的选择

行、列存储模型各有优劣，在实际应用中，我们需要根据具体的需求选择合适的存储方式，以实现高效的数据管理和分析。因此，行存表和列存表在硬盘上的存储方式也不同。对于行存表，每个记录都占用一个连续的空间块，而对于列存表，每个属性都有一个单独的空间块，所有属性值都存储在一个连续的空间块中。在基于列式存储的数据库中，数据是按照列数据为基础逻辑存储单元进行存储的，一列中的数据在存储介质中以连续存储形式存在。在基于行存储的数据库中，数据是按照行数据为基础逻辑存储单元进行存储的，一行中的数据在存储介质中以连续存储形式存在。

2024-09-29 11:49:18 860

原创为什么MySQL单表不能超过2000万行？ (1)

它的叶子节点存储索引键以及对应的行指针（所在的页面编号及页内偏移），堆组织表叶子节点可以存更多的数据，分析可得在同样的数据量与业务并发量下，堆组织表会比索引组织表发生SMO概率低许多。在对叶子节点的修改操作中，InnoDB可以实现较好的1与1、1与2的并发，但是无法解决2的并发。如下图所示，在节点2分裂为节点2和4的过程中，只需要在最后一步将父节点1指向新节点4时，对父节点1加锁，其他操作均无需对父节点加锁，更无需对root节点加锁，因此，大大提升了SMO过程中写操作的并发度。

2024-09-29 11:48:39 685

原创 GaussDB火焰图分析

CPU利用率是衡量系统负载和健康度的重要指标之一，系统在运行过程中时常发生CPU利用率高的情况。在分析性能问题时，可通过火焰图查看CPU耗时，了解瓶颈在哪里。

2024-09-29 11:47:35 612

原创 GaussDB数据库SQL系列-层次递归查询

对于每个连接的行，它们的层级是父级的层级加1，并且它们的路径是父级的路径加上逗号和它们自己的行政区。在递归查询中，查询会反复地递归进入到一个子查询中，直到查询得到满足条件的结果或遍历完整个查询范围。参数：col为在路径中显示的列名，支持类型为CHAR/VARCHAR/NVARCHAR2/TEXT的列，参数separator为路径节点之间的分隔符。在一些复杂的查询场景中，递归查询能够更快地得到结果。同样的，在使用GaussDB等数据库时，只要正确合理的应用递归查询，就可以更好地提高查询效率和应用性能。

2024-09-29 11:46:38 824

原创 GaussDB数据库的元数据及其管理简介

元数据管理从技术角度，元数据管理着企业的数据源系统、数据平台、数据仓库、数据模型、数据库、表、字段以及字段间的数据关系等技术元数据。数据库的元数据指的是关于数据库对象(如表、列、索引、视图、存储过程等)的信息，这些信息描述了这些对象的结构和属性。GaussDB数据库元数据的获取/采集主要是以系统表、视图、函数等方式获取，其元数据不止包含TABLES、VIEWS、COLUMNS、SOURCE、JOB，还包括USERS、COMMENTS等。主要字段：表的所有者、表的名称、列名、列的数据类型、列的字节长度等。

2024-09-29 11:46:11 525

原创 GaussDB数据库SQL系列-数据去重

数据去重涉及到的面非常广，包括重复数据的发现、去重规则的定义、去重的方法与效率、去重的困难与挑战等等。但是，去重原则只有一个，那就是以业务为导向。例如优先将含有手机号的记录行进行补齐，需要补齐的字段有“是否有车、是否有房、婚姻状况”，其取值是来源为“车险”的对应记录。前置过滤：采用前置过滤的方式，先对数据集进行一些简单的筛选和处理，如去除空值、去除无效字符等，可以减少比较次数，从而提高去重效率。优化数据存储结构：采用合适的数据存储结构，如哈希表、B+树等，可以加快数据的查找和比较速度，从而提高去重效率。

2024-09-29 11:43:56 772

原创 GaussDB之SQL Audit，面向应用开发的SQL审核工具

为了解决从源代码中无法获取全部SQL的问题，我们开发了基于流量抓取的SQL审核能力，它能极大提升对SQL获取的完整度。SQL解析的过程就是将SQL语句按照语法规则解析成语法树的过程，一般的解析过程分为词法解析和语法解析，然后生成语法树，大部分对SQL语句分析的工具都是直接遍历语法树实现的，SQL Audit工具没有直接解析语法树，而是增加了一个处理过程，将语法树解析成Java描述类，后面所有的审核规则都是基于这个语法描述类进行，这样大大提高对审核规则的开发效率，同时降低了开发难度。这一系列的问题都会产生。

2024-09-29 11:43:06 885

原创 GaussDB技术解读系列：运维自动驾驶探索

数据库的可观测能力对于数据库的运维十分重要，GaussDB全链路监控具备从硬件、OS、DB等分层监控，构建从采集、发送、展示、分析到巡检等全链路能力，并且打通了硬件到操作系统，到数据库整个监控链的通道。所谓全局快慢车道，就是定义两个资源池，一个是正常资源池，我们称为快车道，快车道提供大量的资源，正常业务在快车道运行，如果出现交通事故，这里的交通事故就是指异常的SQL业务，我们可以通过页面一键将异常SQL放到慢车道中，慢车道限制了对资源的使用，这样交通事故处理完了，快车道可以继续保持高速运行。

2024-09-29 11:32:24 871

原创 GaussDB技术解读系列：数据库迁移创新实践

数据库的选型除了要看数据库本身的能力外，能否很平滑地从其他数据库迁移到GaussDB，也是很多企业考量的关键因素。SQL审核大家更为熟悉，很多大的企业都会进行探索和实践，但对于GaussDB来说，由于是纯自主创新的分布式数据库，很多企业的开发人员和DBA还不熟悉GaussDB的SQL语法，也没有制定较为完善的SQL编程规范，很多第三方SQL审核工具也没有针对GaussDB的审核能力，这种情况下，我们结合UGO成熟的SQL解析器，以及多个项目中的SQL调优实践，孵化出了GaussDB数据库的SQL审核能力。

2024-09-27 15:32:41 327

原创 GaussDB技术解读系列：高安全之密态等值

比如在使用的时候输入一个SQL语句，加密驱动会找到哪个字段需要加密，然后用一个密钥把它自动加密，这样加密完后整个流程都是密文的，整个数据库跑的数据、以及跑完之后的结果都是密文数据，不论什么时候把数据拿走，拿走的也都是密文的，因为在整个数据库里面没有任何解密的过程。而之前的传统方案，是强制在应用层加密，加密完成后存到数据库，用数据的时候，先把数据查询出来之后做解密再使用，数据库做不了任何事情，这种方案加密时间长，性能损耗大，密钥需要自管，所以上了全密态。在这种新形势下，数据库的安全也面临很大的威胁。

2024-09-27 15:31:32 291

原创 GaussDB数据库SQL系列-定义重载函数

在GaussDB数据库中，函数重载是一个重要特性，允许我们在同一个数据库中定义多个同名函数，根据参数的不同来调用不同的函数。需要注意的是，在数据库中实现自定义重载函数并不是一件必须的事情，因为数据库系统通常已经提供了丰富的内置函数和操作符，能够满足大部分数据处理需求。函数重载是一种允许在同一个数据库中定义多个同名函数的特性。这些同名函数在参数类型、数量或顺序上有所不同，因此可以根据传入的参数的不同来调用不同的函数。使用函数重载，我们可以根据具体情况选择不同的函数来实现不同的功能，使代码更加简洁和可读。

2024-09-27 15:26:41 741

原创 GaussDB技术解读系列：性能调优

数据库性能优化充满复杂性和挑战性，既有主观的成分，也有复杂的一面。对于数据库系统的性能影响是多方面的，不管是硬件规格、操作系统配置、数据库系统的设计、应用和客户端的连接方式，都会对业务最终的性能表现产生很大的影响，所以数据库的性能表现本质上是整体计算机系统软硬件协调的结果。第一个是应用升级后引起了性能剧烈波动，我们先观察一下实例整体执行的时间，看看在哪一步消耗的比重最高，通过归一化视图观察单个SQL，看每一步的执行消耗，发现是在网络发送部分引起的，我们把应用侧进行替换，应用程序更新后这个问题就解决了。

2024-09-27 15:23:30 546

原创 GaussDB技术解读系列：高安全之密态等值

比如在使用的时候输入一个SQL语句，加密驱动会找到哪个字段需要加密，然后用一个密钥把它自动加密，这样加密完后整个流程都是密文的，整个数据库跑的数据、以及跑完之后的结果都是密文数据，不论什么时候把数据拿走，拿走的也都是密文的，因为在整个数据库里面没有任何解密的过程。而之前的传统方案，是强制在应用层加密，加密完成后存到数据库，用数据的时候，先把数据查询出来之后做解密再使用，数据库做不了任何事情，这种方案加密时间长，性能损耗大，密钥需要自管，所以上了全密态。在这种新形势下，数据库的安全也面临很大的威胁。

2024-09-27 15:22:59 377

原创 GaussDB SQL基础语法示例-常见的条件表达式

SQL是用于访问和处理数据库的标准计算机语言。GaussDB支持SQL标准（默认支持SQL2、SQL3和SQL4的主要特性）。本系列将以《云数据库GaussDB—SQL参考》为主线进行介绍。

2024-09-27 15:22:24 840

原创 GaussDB SQL基础语法示例-常见的条件表达式

SQL是用于访问和处理数据库的标准计算机语言。GaussDB支持SQL标准（默认支持SQL2、SQL3和SQL4的主要特性）。本系列将以《云数据库GaussDB—SQL参考》为主线进行介绍。

2024-09-27 15:21:53 549

原创 GaussDB SQL基础语法示例-BOOLEAN表达式

SQL是用于访问和处理数据库的标准计算机语言。GaussDB支持的SQL标准（默认支持SQL2、SQL3和SQL4的主要特性）。本系列将以《云数据库GaussDB—SQL参考》为主线进行介绍。1、概念在GaussDB数据库中，BOOLEAN表达式是一种很常见的表达式类型，它用于比较两个条件，来确定其是否为真或假。BOOLEAN表达式可以用于条件判断或在循环语句中作为终止条件。其语法非常简单，只需要使用逻辑运算符对两个条件进行比较。

2024-09-27 15:21:22 641

原创 GaussDB云数据库SQL应用系列-基础使用

随着云计算技术的不断发展，云数据库已经成为了企业信息化建设中不可或缺的一部分。而在众多的云数据库产品中，华为GaussDB以其卓越的性能和稳定性备受用户青睐。GaussDB云数据库是一款具有高性能、高可用、高安全等特点。它采用了先进的存储技术和算法，可以快速处理大量的数据请求，并保证数据的一致性和可靠性。同时，GaussDB还具有丰富的应用场景。例如，在电商行业中，可以使用GaussDB来存储用户的购物记录和订单信息；在金融行业中，可以使用GaussDB来存储客户的账户信息和交易记录；

2024-09-27 14:50:28 599

原创 GaussDB整体性能慢分析

长时间性能下降通常的场景，通常是指某段时间(小时级)性能抖动，比如: 过去8:00-9:00性能正常，但10:00-11:11性能出现较大的性能抖动，这种场景，可以比较两段时间内WDR报告，排查报告内差异点，可排查Top SQL、Top Wait Events、Load Profile、Cache/IO Stats、Object Stats等。当前数据库内核默认是开启线程池的，由于某些或者某个不优SQL慢，导致业务整体性能差，或者占满整个内核线程池，从而可能会引发更加严重的业务阻塞。

2024-09-27 14:49:52 605

原创 GaussDB云数据库SQL应用系列-定时任务管理

GaussDB数据库定时任务主要可以用于实现定期的备份、统计信息采集、数据汇总、数据清理与优化等，它是指在指定的时间间隔内自动执行一次或多次SQL语句的程序。GaussDB数据库兼容Oracle定时任务功能主要通过DBE_TASK高级功能包提供的二次封装接口实现（另可参见GaussDB提供的基础接口PKG_SERVICE，此接口也可实现定时任务创建），主要包括创建定时任务、任务到期自动执行、任务删除、修改任务属性（任务id、任务的关闭开启、任务的触发时间、触发时间间隔、任务内容）等。

2024-09-27 14:49:01 761

原创 GaussDB分区表查询性能异常分析

使用分区表进行相关查询业务，SQL性能慢。

2024-09-27 14:48:29 714

原创 GaussDB分区表查询性能异常分析

使用分区表进行相关查询业务，SQL性能慢。

2024-09-27 14:47:52 987

原创 GaussDB SQL调优：建立合适的索引

所有调优手段都是围绕资源使用开展的。比如做典型点查询的时候，可以用seqscan+filter(即读取每一条元组和点查询条件进行匹配)实现，也可以通过indexscan实现，显然indexscan可以以更小的代价实现相同的效果。拥有云上高可用，高可靠，高安全，弹性伸缩，一键部署，快速备份恢复，监控告警等关键能力，能为企业提供功能全面，稳定可靠，扩展性强，性能优越的企业级数据库服务。很明显，执行计划中存在SubPlan，并且SubPlan中的运算相当重，即此SubPlan是一个明确的性能瓶颈点。

2024-09-27 14:47:18 337

原创 _什么是GaussDB

同时拥有云上高可用，高可靠，高安全，弹性伸缩，一键部署，快速备份恢复，监控告警等关键能力，能为企业提供功能全面，稳定可靠，扩展性强，性能优越的企业级数据库服务。云审计服务（Cloud Trace Service，CTS），是华为云安全解决方案中专业的日志审计服务，提供对各种云资源操作记录的收集、存储和查询功能，可用于支撑安全分析、合规审计、资源跟踪和问题定位等常见应用场景。权限控制：购买实例之后，您可以使用IAM为企业中的员工设置不同的访问权限，以达到不同员工之间的权限隔离，通过IAM进行精细的权限管理。

2024-09-27 14:46:45 333

空空如也

空空如也