db2查询表结构_社区投稿 | DBLE和Mycat跨分片查询结果不一致案例分析

b14dd08b9d46c68ef501111401226c61.png

文章来源:爱可生开源社区

作者:杨严豪
1.背景

某一零售业后端使用了分布式中间件+MySQL数据库作为后端存储。但是因为历史问题存在两种分布式中间件,分别是Mycat和DBLE,共用一组后端MySQL实例。分片规则以及后端数据完全一致。最近碰到了一个比较有意思的场景,财务结算单来往明细和业务来往单据的关联查询。一条跨节点join查询在DBLE、Mycat的查询得到的结果不一致。究竟谁对谁错?

2.DBLE 项目介绍

DBLE 是企业级开源分布式中间件,江湖人送外号 “MyCat Plus”;以其简单稳定,持续维护,良好的社区环境和广大的群众基础得到了社区的大力支持;

DBLE官方网站: https:// opensource.actionsky.com
可以详细了解DBLE的背景和应用场景,本文不涉及到的细节都可在官方文档获得更细节都信息;对于刚了解到同学,可以以本文为快速入门基础 DBLE 官方项目: https:// github.com/actiontech/d ble
如对源码有兴趣或者需要定制的功能的可以通过源码编译安装 DBLE 下载地址: https:// github.com/actiontech/d ble/releases DBLE 官方社区交流群:669663113

3.环境准备

在虚拟机搭建类似架构,模拟场景,比较Mycat-DBLE在跨节点join上的异同点。

3.1测试架构

测试环境架构比较简单,DBLE与Mycat共用数据库。

3100306357d985b2f40b5c2744fb9779.png

3.2 测试软件版本

5a54d9f77745a50e993e0c2f238c20cc.png

3.3 表结构

结算单来往明细表

CREATE 

业务来往单据表

CREATE 

3.4 分片规则配置

配置表t_bl_detail、t_bl_super_detail,使用取模算法,数据分布在db1-db4四个database中。

3.41 schema配置

  • DBLE配置
<schema 
  • Mycat配置
<schema 

3.42 rule配置

  • DBLE配置
<tableRule 
  • Mycat配置
<tableRule 

4.比对开始

4.1 准备测试数据

随便登录哪一台中间件写入测试数据

insert 

44221f047c779e3ff3c2d4c844b2b6bf.png


4.2 执行跨节点join查询

select
 

在通过中间件之前,现在MySQL中执行一遍看下结果,作为预期结果供后续案例使用。

4975ceea1c4608ffc02f383a65ad3e0d.png

分别通过DBLE、mycat执行跨节点join语句

▽ DBLE 执行跨节点 join 语句

f5a39bc92cf302801e64ad656055ab58.png

▽ Mycat 执行跨节点 join 语句

fb77e4ba4405bffbb89406020bbc5223.png

可看到相同的查询语句,DBLE执行结果符合预期,Mycat执行结果缺失。数据差异在于DBLE查询结果相较于Mycat多了跨节点的结果。虽然Mycat执行跨节点join不报错,但是查询结果却和预期不一致。

4.3 执行计划

只从结果上判断并没有办法知道是什么原因导致了Mycat结果缺失,查看查询计划,比较两者差异。

DBLE

通过dble的执行计划可看出,DBLE内部分别对结算明细表、业务单据表做了各自的数据查询,将查询结果在中间层做了merge。最后获得跨节点join的结果

  • DBLE的执行计划

8f50e5da94d65a7e5bc635e6f52e3a58.png

Mycat

mycat对于跨节点join的处理则相对暴力,直接将查询语句下发到各个节点,最后将结果进行汇总,如果表连接涉及到跨节点。则跨节点的数据无法进行join。

  • Mycat的执行计划

2f564e8f6ca7db4a6fd9aae1bf31e2ab.png

5.总结

Mycat是一款非常优秀的分布式中间件,但是在某些细节方面处理的不尽人意。在跨节点关联查询场景下,Mycat采取的策略是直接将语句透传到各个节点上,将获取到的结果整合后返回,得到的结果集和预期结果有出入,缺失了跨节点关联的数据。

DBLE处理跨节点的关联查询是先获取到关联需要的数据,提取到中间件进行融合,得到关联查询的结果并返回。得到的结果集符合预期,与MySQL执行结果一致。可见DBLE在跨节点关联查询方面做了优化,能够提供准确的查询结果。

46179134b8e3eea476b83a3b4befa672.png
  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
资源包主要包含以下内容: ASP项目源码:每个资源包中都包含完整的ASP项目源码,这些源码采用了经典的ASP技术开发,结构清晰、注释详细,帮助用户轻松理解整个项目的逻辑和实现方式。通过这些源码,用户可以学习到ASP的基本语法、服务器端脚本编写方法、数据库操作、用户权限管理等关键技术。 数据库设计文件:为了方便用户更好地理解系统的后台逻辑,每个项目中都附带了完整的数据库设计文件。这些文件通常包括数据库结构图、数据设计文档,以及示例数据SQL脚本。用户可以通过这些文件快速搭建项目所需的数据库环境,并了解各个数据之间的关系和作用。 详细的开发文档:每个资源包都附有详细的开发文档,文档内容包括项目背景介绍、功能模块说明、系统流程图、用户界面设计以及关键代码解析等。这些文档为用户提供了深入的学习材料,使得即便是从零开始的开发者也能逐步掌握项目开发的全过程。 项目演示与使用指南:为帮助用户更好地理解和使用这些ASP项目,每个资源包中都包含项目的演示文件和使用指南。演示文件通常以视频或图文形式展示项目的主要功能和操作流程,使用指南则详细说明了如何配置开发环境、部署项目以及常见问题的解决方法。 毕业设计参考:对于正在准备毕业设计的学生来说,这些资源包是绝佳的参考材料。每个项目不仅功能完善、结构清晰,还符合常见的毕业设计要求和标准。通过这些项目,学生可以学习到如何从零开始构建一个完整的Web系统,并积累丰富的项目经验。
资源包主要包含以下内容: ASP项目源码:每个资源包中都包含完整的ASP项目源码,这些源码采用了经典的ASP技术开发,结构清晰、注释详细,帮助用户轻松理解整个项目的逻辑和实现方式。通过这些源码,用户可以学习到ASP的基本语法、服务器端脚本编写方法、数据库操作、用户权限管理等关键技术。 数据库设计文件:为了方便用户更好地理解系统的后台逻辑,每个项目中都附带了完整的数据库设计文件。这些文件通常包括数据库结构图、数据设计文档,以及示例数据SQL脚本。用户可以通过这些文件快速搭建项目所需的数据库环境,并了解各个数据之间的关系和作用。 详细的开发文档:每个资源包都附有详细的开发文档,文档内容包括项目背景介绍、功能模块说明、系统流程图、用户界面设计以及关键代码解析等。这些文档为用户提供了深入的学习材料,使得即便是从零开始的开发者也能逐步掌握项目开发的全过程。 项目演示与使用指南:为帮助用户更好地理解和使用这些ASP项目,每个资源包中都包含项目的演示文件和使用指南。演示文件通常以视频或图文形式展示项目的主要功能和操作流程,使用指南则详细说明了如何配置开发环境、部署项目以及常见问题的解决方法。 毕业设计参考:对于正在准备毕业设计的学生来说,这些资源包是绝佳的参考材料。每个项目不仅功能完善、结构清晰,还符合常见的毕业设计要求和标准。通过这些项目,学生可以学习到如何从零开始构建一个完整的Web系统,并积累丰富的项目经验。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值