分布式数据库TDDL - 待补

最新推荐文章于 2022-04-27 16:49:33 发布
最新推荐文章于 2022-04-27 16:49:33 发布
阅读量326 收藏
点赞数
分类专栏： 分布式 数据库 TDDL 文章标签： 分布式 数据库 TDDL
分布式 同时被 3 个专栏收录
5 篇文章 0 订阅
订阅专栏
数据库
1 篇文章 0 订阅
订阅专栏
TDDL
1 篇文章 0 订阅
订阅专栏
桑紫
关注
专栏目录
数据库中间件TDDL调研笔记
shenjian58的博客
11-16 503
前篇：《数据库中间件cobar调研笔记》13年底负责数据库中间件设计时的调研笔记，拿出来和大家分享，轻拍。一，TDDL是什么TDDL是Taobao Distribute ...
十年磨一剑，云原生分布式数据库PolarDB-X的核心技术演化
java_beautiful的博客
07-22 823
前言 PolarDB-X前身是淘宝内部使用的分库分表中间件TDDL（2007年，Java库的形态），早期以DRDS（2012年开始研发，2014年上线，分库分表中间件+MySQL Proxy的形态）的品牌在阿里云上提供服务，后来（2019年）正式转型为分布式数据库PolarDB-X（正式成为了PolarDB品牌的一员）。从中间件到分布式数据库，我们在以MySQL为存储构建分布式数据库这条路上走了10余年，这中间积累了大量的技术，也走了一些弯路，未来我们也会坚定的走下去。......
分布式数据层TDDL.zip
07-16
淘宝根据自己的业务特点开发了TDDL（Taobao Distributed Data Layer 外号:头都大了 ©_Ob）框架，主要解决了分库分表对应用的透明化以及异构数据库之间的数据复制，它是一个基于集中式配置的 jdbc datasource实现，具有主备，读写分离，动态数据库配置等功能。 TDDL所处的位置（tddl通用数据访问层，部署在客户端的jar包，用于将用户的SQL路由到指定的数据库中）： 淘宝很早就对数据进行过分库的处理， 上层系统连接多个数据库，中间有一个叫做DBRoute的路由来对数据进行统一访问。DBRoute对数据进行多库的操作、数据的整合，让上层系统像操作 一个数据库一样操作多个库。但是随着数据量的增长，对于库表的分法有了更高的要求，例如，你的商品数据到了百亿级别的时候，任何一个库都无法存放了，于是 分成2个、4个、8个、16个、32个……直到1024个、2048个。好，分成这么多，数据能够存放了，那怎么查询它？这时候，数据查询的中间件就要能 够承担这个重任了，它对上层来说，必须像查询一个数据库一样来查询数据，还要像查询一个数据库一样快（每条查询在几毫秒内完成），TDDL就承担了这样一 个工作。在外面有些系统也用DAL（数据访问层） 这个概念来命名这个中间件。下图展示了一个简单的分库分表数据查询策略： 主要优点：1.数据库主备和动态切换2.带权重的读写分离3.单线程读重试4.集中式数据源信息管理和动态变更5.剥离的稳定jboss数据源6.支持mysql和oracle数据库7.基于jdbc规范，很容易扩展支持实现jdbc规范的数据源8.无server,client-jar形式存在，应用直连数据库9.读写次数,并发度流程控制，动态变更10.可分析的日志打印,日志流控，动态变更TDDL必须要依赖diamond配置中心（diamond是淘宝内部使用的一个管理持久配置的系统，目前淘宝内部绝大多数系统的配置，由diamond来进行统一管理，同时diamond也已开源）。TDDL动态数据源使用示例说明：http://rdc.taobao.com/team/jm/archives/1645diamond简介和快速使用：http://jm.taobao.org/tag/diamond专题/TDDL源码：https://github.com/alibaba/tb_tddl TDDL复杂度相对较高。当前公布的文档较少，只开源动态数据源，分表分库部分还未开源，还需要依赖diamond，不推荐使用。 标签：TDDL
tddl淘宝mysql集群
04-06
tddl淘宝mysql集群
tddl使用与配置(详细)
09-04
tddl使用与配置. TDDL除了拿到分库分表条件外,还需要拿到order by, group by, limit m,n , join信息, SUM,MAX,MIN等聚合函数信息,DISTINCT信息. 具有这些关键字的SQL在单库和多库情况下进行,语义是不同的.TDDL必须对使用这些关键字的SQL返回的结果做出合适的处理.
笔者带你剖析淘宝TDDL（TAOBAO DISTRIBUTE DATA LAYER）
weixin_33755649的博客
10-19 501
注：本文部分内容引用本人博客http://gao-xianglong.iteye.com/blog/1973591   前言 在开始讲解淘宝的TDDL(Taobao Distribute Data Layer)技术之前，请允许笔者先吐槽一番。首先要开喷的是淘宝的社区支持做的无比的烂，TaoCode开源社区上面，几乎从来都是有人提问，无人响应。再者版本迭代速度也同样差强人意，就目前而言...
银行分布式数据库改造方案实践与探索 -王辉1
08-03
【银行分布式数据库改造方案实践与探索】 随着互联网技术的发展，银行业务量的快速增长对数据库系统的性能和稳定性提出了更高的要求。银行分布式数据库改造是应对这一挑战的重要手段，旨在提高数据库的可扩展性、高...
基于Java的分布式数据层TDDL框架源码
最新发布
03-25
项目名称：基于Java的分布式数据层TDDL框架 项目简介： 本项目是一款外号“头都大了”的分布式...TDDL框架为Java分布式数据解决方案提供了高效、稳定、灵活的支持，极大简化了分布式数据库环境下的开发与维护工作。
为什么需要分布式数据库
KunLunDB_Linda的博客
08-30 373
​这些年，由于数据规模和业务访问负载越来越大，越来越多的公司无法依赖单台数据库服务器支撑其业务，越来越多的公司不得不做数据分区存储，也就是所谓的分库分表，但大量的烦恼与困惑也随之而来。 令人“头都大了”的分库分表中间件 10多年前阿里因此原因不得不把淘宝后台系统从Oracle RAC切换到数百个 MySQL集群构成的分库分表集群，不过那时的淘宝仅仅使用一个分库分表中间件，名为tddl（又名：头都大了，江湖上现在还有tddl的传说），而不是分布式数据库，这两者之间的区别，也可能正是tddl让
阿里云DRDS分布式数据库 - 调优经验分享
Java Punk
12-20 4943
DRDS 是一个分布式关系数据库服务，处理的是分布式关系运算。分布式无疑会带来额外的跨库网络开销，而大家都知道，网络通信的延迟比单机内通信的延迟大得多。
tddl原理讲解
12-14
该文档介绍tddl server的原理，讲述了tddl如何工作，特别是想了解tddl原理服务的同学
Java常用异常包_关于taobao中tddl-common包中异常工具类TExceptionUtils对常见SQLException自定义或异常的拼接等处理源码说明...
weixin_29368571的博客
02-25 468
一、前言关于taobao的tddl-common包(5.1.0)的com.taobao.tddl.common.jdbc.TExceptionUtils异常工具类，对SQLException集合异常日志标准化打印、合并拼接处理及自定义打印输出等，详见源码说明。二、源码说明packagecom.taobao.tddl.common.jdbc;@b@@b@importjava.sql.SQLExc...
maven的dependencyManagement与dependencies区别
weixin_43991475的博客
04-27 467
dependencyManagement与dependencies区别 　　dependencyManagement里只是声明依赖，并不实现引入，因此子项目需要显式的声明需要用的依赖。如果不在子项目中声明依赖，是不会从父项目中继承下来的；只有在子项目中写了该依赖项，并且没有指定具体版本，才会从父项目中继承该项，并且version和scope都读取自父pom;另外如果子项目中指定了版本号，那么会使用子项目中指定的jar版本。 　　dependencies即使在子模块中不写该依赖项，那么子模块仍然会从父项目中
mysql分库分表 tddl,阿里巴巴中间件TDDL用于连接数据库，分表分库查询
weixin_32199769的博客
03-17 745
1.创建数据源由DBA来做。一般数据源有3层：(1)Matrix分库分表，数据路由，对应一个应用，下面有若干个group(2)Group主备切换，读写分离，对应一组主备数据库，下面有若干atom(3)Atom对应一个数据库实例2.创建分库分表规则(1)编写规则文件实际上就是spring配置文件的一部分beansPUBLIC"-//SPRING//DTDBEAN//EN""http://www...
TDDL使用
cpf2016的专栏
05-18 5969
1.创建数据源           由DBA来做。            一般数据源有3层：           （1）Matrix                      分库分表，数据路由，对应一个应用，下面有若干个group           （2）Group                      主备切换，读写分离，对应一组主备数据库，下面有若干atom    
TDDL分布式数据库
南有南无
08-04 1750
TDDL 是基于 Java 语言的分布式数据库系统。 大型互联网架构中，数据存储会面临读写容量瓶颈问题，比如在“双十一网购狂欢节”活动中，核心数据存储集群读写日访问量可以达到100亿以上。这种场景下，单机数据库方式必定面临极大挑战。类似的场景也在一些传统使用 IOE 的企业中成为一种制约业务发展的致命要素，而 TDDL 就是解决此类场景的利器。 TDDL 体系核心作用在于两个方面： 直接...
阿里巴巴中间件TDDL用于连接数据库，分表分库查询
热门推荐
渣渣
07-25 1万+
1.创建数据源           由DBA来做。            一般数据源有3层：           （1）Matrix                      分库分表，数据路由，对应一个应用，下面有若干个group           （2）Group                      主备切换，读写分离，对应一组主备数据库，下面有若干atom    
TDDL最佳实践
唐僧打怪兽
11-13 889
尽一切可能利用单机资源 单机事务 单机join 好的存储模型，就是尽可能多的做到以下几点: 尽可能走内存 尽可能将一次要查询到的数据物理的放在一起 通过合理的数据冗余，减少走网络的次数 合理并行提升响应时间 读取数据瓶颈，可以通过加slave节点解决 写入瓶颈，用规则sharding和扩容来解决
TDDL实践
weixin_30950237的博客
10-12 519
使用入门-数据源配置 数据源配置，tddl的入口，从datasource切入 <bean id="tddlDataSource" class="com.taobao.tddl.client.jdbc.TDataSource" init-method="init"> <property name="appName" value="tddl_sample" ...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值