让每个人用好数据和云

Cloud SQL Studio 现已 正式发布，支持GCP上的托管MySQL、PostgreSQL、SQL Server等数据库的简单查询管理：参考.([7] )([2] )，该公司以开源产品的形式提供完整的PostgreSQL生态产品托管服务，同时提供Tembo Cloud以云产品形式提供托管服务 ( [2] [3] )。数据库迁移服务引入新的API版本，支持了MySQL数据库更多高级参数支持 ([16])托管MongoDB服务支持了批量退订实例、批量续费实例等功能 ( [5] [6] )

二十年前，我们中的一员（Stonebraker）共同撰写了一篇论文(What Goes Around and Comes Around)，评论了过去40年的数据建模研究和开发[188]。该论文表明，尽管有人试图替换它们，但关系模型（RM,Relational-Model）和SQL仍然是数据库管理系统（DBMS）的主流选择。相反，SQL吸收了这些替代方法中的最佳思想。我们重新审视这个问题，并认为自2005年以来，这种演变一直在继续。再次有人反复尝试替换SQL或RM。

云数据库RDS MySQL 提供无感数据集成（Zero-ETL）功能，用于将RDS数据同步至数据仓库（AnalyticDB MySQL或ClickHouse），用户无需搭建或维护数据同步链路，且数据同步链路不收费，减少数据传输成本和运维成本 ([5])在瑶池数据库解决方案体验馆中，新增RDS PostgreSQL Serverless极致弹性体验，您无需购买任何资源，即可在线体验Serverless功能的智能弹性能力，并可实时观测Serverless实例的性能与资源使用情况 ([8])

7月12日~7月13日，2024年 PostgreSQL 中国技术大会将在杭州上城区君尚云郦酒店举办，共同探索 PostgreSQL 的创新应用与发展趋势！NineData 联合创始人周振兴受邀参会，并将带来《实时数据同步方案的挑战与实践》的主题分享。

分享个比较常见的案例。某天，企业运营团队接到用户反馈订单无法查询，部分页面显示错误，技术团队立马着手恢复数据，并展开调查，通过分析应用日志发现大量关于“订单数据不存在”的错误信息，然而应用程序未存在异常，转到 DBA 团队进行处理，DBA 通过查询订单数据表，发现大量订单数据缺失，分析 Binlog 日志，发现某个时间点存在大量的 DELETE 操作。目前互联网企业中，真正能够规范使用数据库的并不多，有很大一部分企业并未意识到这个问题，有些研发人员甚至直接进行生产环境的变更，这样会引发一系列的问题，例如。

阿里云MongoDB以其国内领先的版本更新速度和丰富灵活的云原生架构成为用户的优选，并服务于企业数据的安全传输、高效管理、多粒度备份恢复、智能诊断分析等全流程，进一步简化了开发者的操作流程。介绍了面向MongoDB的不停机迁移及同步原理，针对MongoDB迁移和同步过程中常见的挑战，如DDL同步、视图索引复制和数据一致性保障等，提出了切实有效的解决方案，●首先，MongoDB支持多种结构化和非结构化数据，包括标准化的业务数据、不规范的设备信息、结构多变的模型数据等，灵活支持各行各业复杂的数据需求。

如何避免删库跑路，这几乎是一个老生常谈的话题，也是大部分上了规模的企业都很关心的话题，京东到家、微盟、链家、思科... 在这些大企业上发生过的删库事件仍然历历在目，无论是否当事人有意为之还是系统 BUG 导致，造成的后果与损失都是深刻且无法挽回的，只有从物理层面上拦截删库操作，才能在真正意义上杜绝此类事件，毕竟谁都无法保证自己不会成为下一个受害者。推荐 NineData 的原因，不仅仅是因为它可以完美解决企业的问题，更重要的是，如果企业的数据源数量低于 10 个，它是完全免费的。

MySQL 9.0 悄悄上线，支持面向AI的向量数据库。MySQL狂热粉丝群已经发现MySQL官网上MySQL9.0这两天悄然上线，已经可以下载体验了，目前被定义为创新版本（Innovation）。NineData 作为新一代的云原生智能数据管理平台，NineData 支持MySQL、Oracle等数据源。

2024年7月4-5日，由 CSDN 和 Boolan 联合主办的「2024 全球软件研发技术大会（SDCon）」将在北京威斯汀酒店举行，将成为引领行业迈向 AI 2.0 时代的重要桥梁。NineData 创始人&CEO叶正盛受邀参会，并将带来《云原生实时数据复制技术原理与实践》的主题分享。

6月28日（周五），华为云数据库斯享会即将在上海举办，将与的开发者朋友们一起进行数据库技术交流！NineData 技术总监薛晓乐受邀参会，并将带来《企业级数据库 DevOps 最佳实践》的主题分享。本次活动议程，涵盖最新数据库行业资讯、前沿技术、大咖分享、DBA 最佳实践等多个方面。NineData 专注于多云数据管理平台的建设，借助华为在云计算、数据库、大数据等领域的强大实力，共同为用户提供更加稳定、高效的数据管理和数据服务。

6月28日（周五），PolarDB 开源社区将来到湖南长沙，与湖南的开发者朋友们一起进行数据库技术交流！NineData联合创始人周振兴受邀参加，并将带来《数据库 DevOps 最佳实践》的主题分享，包括 DevOps 基本概念、技术挑战与解决方案，以及安全性、效率和多数据库管理方面的创新探索等。

NineData 作为新一代的云原生智能数据管理平台，提供了数据复制、数据库 DevOps、数据备份、数据对比等多种功能，帮助用户轻松实现混合云、多云数据源的统一管理。以GuassDB数据库为底座，NineData和华为云一起为企业提供一站式智能数据库DevOps平台。帮助开发者高效、安全地完成数据库SQL审核、访问控制、敏感数据保护等日常数据库相关开发任务

NineData 2024年最新数据归档与清理功能全面升级！解决企业磁盘管理难题，自动化处理过期数据，避免误删有效信息和数据库访问缓慢。新增时区选择、多种时间字段支持和预览SQL等实用功能，满足不同企业需求。了解如何通过NineData优化数据管理，提升效率和安全性。

pgvector(0.7.0) ([6])RDS 最新的 MariaDB版本 10.11.8, 10.6.18, 10.5.25, 10.4.34([27])大会以"聚焦云端创新，汇聚智慧共享"为主题，共同探讨数据库领域的发展趋势、技术创新和实践经验。RDS SQL Server 新版售卖页面支持设置系统字符集排序规则 ([8])数据库迁移服务支持从Oracle迁移到AlloyDB ([11] )RDS 支持最新的MySQL版本 8.0.37([26])，主题演讲主要覆盖鸿蒙、AI ([3] [29] )

近期IDC公布了中国关系型数据库市场的数据，整体市场276亿人民币（38亿美元），其中公有云数据库市场175亿人民币（24.1亿美元），备注：汇率按7.26计算。关系型数据库是数据库整体市场最大的板块，根据IDC历史分析，占比大约62.4%，因此可以估算2023年中国数据库总体市场440亿人民币。2023H2（下半年）公有云关系型数据库厂商占比排名2023H2（下半年）本地部署关系型数据库厂商排名2021~2023年中国关系型数据库管理软件详细市场占有率数据。

达梦公开上市，首日收盘市值达182亿；Oracle云上将支持Oracle Database@Google Cloud；RDS MySQL Serverless 通用云盘实例支持按量付费和Serverless互转；Oracle云基础数据库新增规格：AMD E5 flex shape)；谷歌云托管PostgreSQL支持扩展temporal_tables 1.2.2

国内现在做数据库的有两三百家，包括互联网企业，通信巨头，纷纷介入这一领域，原因很简单，有大量的需求，风起云涌地成立了很多企业，但是这个行业大家看到一个规律，我们的同行IBM做了60年，现在国际上做得最好的同行甲骨文做了45年，将近50年，比我们多两年，实际上达梦已经做了43年、44年了。早年，我不知道这件事能不能成功，因为对成功的定义个人理解不一样，我不认为现在达梦上市就是成功，因为你做得不好你也可能下来，更重要的就是，不断地与时俱进，动态的、随时的、掌握这个行业的新技术、核心技术。

开发人员或研究人员通过 NineData 提供的 SQL 窗口来查询数据，这是一个高频操作，NineData 在这里做了相当多的优化，从智能补全、常用 SQL 保存、SQL 模板到快捷执行等一应俱全，可以极大的提升数据查询的效率，同时还支持完整的权限管理、审计日志以及数据库保护等功能。通过 NineData 数据复制功能，很好的提升了我们在数据链路上的稳定性，降低了我们在数据链路上的维护成本，配置新的数据链路非常方便，再也不用担心业务提出新的数据同步需求。满足企业多样化的场景。轻松应对各种对比的场景。

业务验证通过后，可进行业务停机切换。出于安全性方面考虑，云数据库通常是封闭的内网环境，在配套迁移产品无法提供迁出支持的前提下，想要迁移数据必须得开启公网访问地址，而这一举动无疑给不法分子提供了攻击数据库的绝佳良机，等待企业的可能会是数据库被攻陷，重要的数据遭到泄露，更有甚者数据直接被清空，多年的经营成果毁于一旦。我们要做的是跨云迁移，听上去好像很简单，但是实际操作起来还是挺复杂的，由于大部分云厂商提供的配套迁移产品只进不出，即只针对自建库上自身云提供了良好的支持，但对于从自身云迁出的需求，往往无法满足。

部分 MySQL/PostgreSQL版本社区生命周期结束 (EOL) ，将Cloud SQL for MySQL/PostgreSQL将从2025 年 2 月 1 日开始提供扩展支持([18] [19] [20] [21] )，Databricks将增强 Delta Lake 和 Iceberg 社区合作，以实现 Lakehouse 底层格式的开放与兼容([1] [2])。Amazon RDS不再支持db.m4, db.r4, and db.t2 类型的实例 ([28])

为明晰发展脉络，把握未来趋势，墨天轮于5月29日正式发布。该报告由墨天轮联合业界专家学者共同编写，共，旨在梳理和洞察中国数据库行业的发展趋势、技术创新、市场动态以及面临的挑战，为数据库行业的产学研用提供有价值的参考信息，推动行业的进步和发展落地。自2022年起，墨天轮数据社区持续发布数期《中国数据库行业分析报告》，累计点击超过18万次，下载近2万次，其中《2022年中国数据库年度行业分析报告》下载量高达2500余次。

为了回答上面的疑问，于是就开启了我的云数据库性能测试之旅。这是第二次测试（QPS详细数据：重现该测试包含了两个方面，一个是测试工具与主要参数，另一个是测试实例的选择。这里选择了模型简单、易于重现的Sysbench（oltp_read_write）进行测试。

但是公司一直颠沛流离，从2005年创建，2010年被EMC收购（估值3亿美金），2012年纳入到Pivotal Software品牌，2015年对外开源，2020年Pivotal被VMWare收购，2023年VMWare又被博通收购。Greenplum是基于PostgreSQL开发的MPP数据仓库，在业界有非常高的流行度，Greenplum当前最新版本是7.1，有许多公司使用，在全球数据库排行榜DB-Engines当前排名第48位。著名开源数据仓库Greenplum突然关闭github源码。

业务验证通过后，可进行业务停机切换。出于安全性方面考虑，云数据库通常是封闭的内网环境，在配套迁移产品无法提供迁出支持的前提下，想要迁移数据必须得开启公网访问地址，而这一举动无疑给不法分子提供了攻击数据库的绝佳良机，等待企业的可能会是数据库被攻陷，重要的数据遭到泄露，更有甚者数据直接被清空，多年的经营成果毁于一旦。我们要做的是跨云迁移，听上去好像很简单，但是实际操作起来还是挺复杂的，由于大部分云厂商提供的配套迁移产品只进不出，即只针对自建库上自身云提供了良好的支持，但对于从自身云迁出的需求，往往无法满足。

5月31日（周五），PolarDB 开源社区将联合娃哈哈集团共同举办开源数据库技术沙龙！NineData联合创始人周振兴受邀参加，并将分享《NineData，Any to Any 数据复制之路》的技术分享。

Copilot for Azure是微软云提供的基于大模型技术的助手工具，主要能力包括了：该大模型可以获得最新的文档，以及客户的Azure资源情况，可以作为最为有用的咨询助手、故障排查与诊断、产品架构咨询。Microsoft Copilot 现可在 Azure Database for MySQL 中提供支持(Public Preview)([8])Microsoft Copilot 支持了新的 Azure SQL 数据库知识(Public Preview)([14])

同时， NineData 针对远距离复制，进行了针对性优化，结合元数据解耦、动态攒批、数据合并等多种技术，进一步消除网络延迟对复制延迟的影响。NineData的了高效、稳定、可靠的数据复制解决方案为ECMS提供了强大的支持，为其未来的发展奠定了坚实的基础。易客满国际物流有限公司（ECMS Express）致力于全球化的国际物流解决方案和经济快递产品，服务网络覆盖美国、欧洲、日本、中国、韩国、香港、台湾、新加坡、马来西亚、墨西哥等地。由于数据复制涉及跨国际、跨区域的数据库之间的实时复制，

​通过上述步骤，您即可完整地将您的业务数据从其他云迁移到 AWS RDS MySQL，在增量复制延迟为 0 的前提下，您可以在任何您需要的时间进行业务割接，把业务流量切换到新的云上。如果您只是需要将 AWS RDS MySQL 作为一个您业务的多活节点，也可以保留该条迁移链路持续运行，NineData 会保证两端的数据实时保持一致，在其中一个云厂商出现故障后，可以迅速将业务切换到另一个云。至此，您已成功实现了跨云厂商的不停机数据库迁移，最大程度地减少了对线上业务的影响。

TPC-H主要模拟供应商和采购商之间的订单交易，模型总共8张表region：区域表，固定5条记录nation：国家表，固定25条记录supplier：供应商表，数据量因子*10000条记录customer：客户表，数据量因子*150000条记录part：商品表，数据量因子*200000条记录partsupp：供应商物件表：数据量因子*800000条记录orders：订单表，数据量因子*1500000条记录。

Amazon RDS宣布将对PostgreSQL 11.22版本提供最多三年的扩展支持（注：PostgreSQL 11最早与2018年发布，11.22是2023年11月发布的该系列最后一个小版本）([13])，通过额外的基于列式结构的二级索引（Clustered Columnar Index，CCI，覆盖行存所有列），使用一张表可以同时具备行存和列存，同时满足分布式的OLTP和部分OLAP场景。Oracle Data Safe 现在支持 Oracle Database@Azure ([11])

通过与NineData的合作，为尽微好物解决了数据库迁移和复制的难题，帮助客户实现了上云下云的自由切换，为业务的持续发展提供了有力支持。通过基于日志的增量迁移与复制方案以及多维度的数据分片方案，NineData能够在最小程度上影响业务的情况下完成数据迁移，并保障迁移前后的数据一致性。提供了完整的数据对比程序，可以在完成迁移后，立刻进行全量的数据对比，以保障迁移数据的绝对一致。不同的环境中的MySQL数据库，也有一定的区别，例如版本、日志格式等，给迁移带来的阻碍。

规则，用于管控数据追踪任务中可追踪的最大 Binlog 文件大小，Binlog 文件太大的情况下，读取该文件可能会对源库造成性能负担，因此 Binlog 大小如果超出所配置的阈值，则 NineData 会在预检查阶段自动进行拦截，不允许提交数据追踪任务。NineData SQL 审核用于应用代码发布之前的 SQL 语句安全性、效率审核，确保发布的 SQL 语句符合规范，同时为无索引的 SQL 语句推荐合适的索引，提升代码发布的效率和准确性。保证在误操作或数据错误之后，业务数据的完整性。

NineData作为新一代的云原生智能数据管理平台，提供了数据复制、数据库 DevOps、数据备份以及数据对比等多种功能，帮助用户轻松实现混合云、多云数据源的统一管理。通过这些功能，可以轻松完成日常数据库开发、数据安全访问、生产数据库变更与发布、数据库备份恢复、数据迁移、容灾多活、数据仓库及数据湖构建等核心应用场景。本次活动，NineData 高级架构师周金义受邀参会，并将分享《ClickHouse 数据管理与同步的关键技术》的技术分享，有兴趣的数据库开发者可以关注下。

近期发生在Google私有云的重大故障，导致UniSuper客户配置数据被误删除的事件，并指出了跨云迁移的重要性。解读在多云架构下进行无停机数据库迁移的关键挑战，并提出了跨云迁移可能面临的问题，如业务可用性、表结构初始化和变更、数据质量以及迁移失败的处理方法。介绍NineData的数据复制功能，针对跨云迁移中的痛点进行了解决方案的阐述，并提供了操作步骤。最后总结了通过NineData实现跨云厂商的不停机数据库迁移的方法和优势。

在这种情况下，云服务提供商是通过 Internet 提供可扩展计算资源的公司。这些资源包括服务器、数据存储和应用程序。云服务提供商非常普遍，因为它允许企业利用高质量、可扩展的 IT 服务，而无需建立自己的数据中心。常见的云提供商包括Microsoft Azure，Google Cloud和Amazon Web Services。最后更新：2024年5月6日。

例如，NineData专注于数据库DevOps和数据复制，而DBPaaS则提供云上数据库托管运维服务，包括备份、高可用性等，最常见的产品形态是RDS，BI领域主要是报表等数据分析产品，如PowerBI、帆软等。在过去，为每位开发者在数据库中创建单独账户的做法可能在规模较小的团队中可行，但在现代企业环境中，面对数百乃至上千的开发者，这样的做法显然不再适用。据统计，他们每天有数百次的变更和发布任务，都在NineData上自动化执行，这使得仅有的几位DBA能更专注于高价值的工作，显著提高了开发团队的生产力。

在数字化转型的新时代，MongoDB凭借灵活的文档模型、高效的数据处理能力和出色的扩展性，成为广受企业和开发者喜爱的数据库。本次活动将聚焦如何利用MongoDB简化开发工作，并分享阿里云和NineData的解决方案，更有重磅嘉宾分享实践经验，让您直观感受到MongoDB的强大效能。，我们期待您的报名，共同探索企业开发提效的更多可能。

央国企除了信创需求，还有很多本地化服务的需求，更多原因是IT系统只能部署在客户现场，无法远程访问，当系统出现问题时，需要供应商能快速修复，所以有驻场服务需求。左上角的大型互联网公司由于数据量和并发请求增加，增加了分布式数据库和NoSQL需求，对软件License成本更在意，加上技术能力更突出，所以喜欢选择开源产品构建，另外，互联网企业很多是服务全国和全球的客户，因此对IDC建设有更大的挑战，互联网业务有更多的突发性需求或者产品营销发布，希望有更好的弹性扩展能力，因此云数据库也是很好的满足需求。

时至今日，情况已经发生了翻天覆地的变化，替代方案层出不穷，PostgreSQL 作为其中的一员，除了兼具多样功能和强大性能之外，还具备非常优秀的可扩展性，可以较好地兼容 Oracle，企业也可以从长期活跃的开源社区中得到丰富的资源和技术支持，最重要的是，PostgreSQL 是开源软件，无需支付高昂的授权费用，这可以为企业省下不小的支出。Oracle 功能强大，运行稳定的背后，是其高额的授权费用。：在不影响源端业务的情况下，进行全量和增量数据的迁移，保证源和目标的一致性，并在迁移完成后实施无缝切换。

Oracle23c改名为Oracle23ai，也意味着Oracle数据库正式从Cloud进入AI时代。Oracle23ai版本是一个超级巨兽，简单总结下：AI能力：内置向量数据库，内置ONNX模型数据处理，内置Text2SQL，内置的机器学习算法持续增强；JSON能力增强，要干掉MongoDB，并且还是JSON与关系型双模型一体化方案；图数据处理能力增强，要干掉Neo4j，模型也是一体化设计；