sharding-sphere 安装使用

最新推荐文章于 2024-08-05 15:04:43 发布
最新推荐文章于 2024-08-05 15:04:43 发布
阅读量5k 收藏 1
点赞数
分类专栏： 数据库 跟我一起学架构 文章标签： sharding-sphere 分库分表
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/z785495295/article/details/86621636
版权
本文介绍了如何安装和使用Sharding-Sphere的Sharding-Proxy，以及Atlas数据中间层项目。Sharding-Proxy作为数据库代理，提供透明化的数据库访问，而Atlas在MySQL Proxy基础上增强，广泛应用于360公司及其他企业。文中详细阐述了Sharding-Proxy的部署步骤，包括下载、解压、配置、启动和验证过程。
摘要由CSDN通过智能技术生成

分布式主键

传统数据库软件开发中，主键自动生成技术是基本需求。而各个数据库对于该需求也提供了相应的支持，比如MySQL的自增键，Oracle的自增序列等。 数据分片后，不同数据节点生成全局唯一主键是非常棘手的问题。同一个逻辑表内的不同实际表之间的自增键由于无法互相感知而产生重复主键。 虽然可通过约束自增主键初始值和步长的方式避免碰撞，但需引入额外的运维规则，使解决方案缺乏完整性和可扩展性。

io.shardingsphere.core.keygen.DefaultKeyGenerator

Sharding-proxy介绍

Sharding-Proxy是ShardingSphere的第二个产品。 它定位为透明化的数据库代理端，提供封装了数据库二进制协议的服务端版本，用于完成对异构语言的支持。 目前先提供MySQL版本，它可以使用任何兼容MySQL协议的访问客户端(如：MySQL Command Client, MySQL Workbench等)操作数据，对DBA更加友好。

 

Atlas介绍：

Atlas是由 Qihoo 360公司Web平台部基础架构团队开发维护的一个基于MySQL协议的数据中间层项目。它在MySQL官方推出的MySQL-Proxy 0.8.2版本的基础上，修改了大量bug，添加了很多功能特性。目前该项目在360公司内部得到了广泛应用，很多MySQL业务已经接入了Atlas平台，每天承载的读写请求数达几十亿条。同时，有超过50家公司在生产环境中部署了Atlas，超过800人已加入了我们的开发者交流群，并且这些数字还在不断增加。

主要功能：

https://github.com/Qihoo360/Atlas/blob/master/README_ZH.md

Proxy部署流程：

最低0.47元/天 解锁文章
_单眼皮男生_
关注
专栏目录
《童虎学习笔记》16分钟ShardingSphere搭建MySQL分库分表
tonghu_note的博客
05-04 2020
1
Mysql之分库分表ShardingSphere搭建
qch7qch的博客
04-19 668
提示：文章写完后，目录可以自动生成，如何生成可参考右边的帮助文档 文章目录前言一、ShardingSphere二、搭建步骤步骤1.主pom.xml2.创建module：sharding-jdbc-example1)分库2)广播表3)分库分表总结 前言 提示：这里可以添加本文要记录的大概内容： 例如：随着人工智能的不断发展，机器学习这门技术也越来越重要，很多人都开启了学习机器学习，本文就介绍了机器学习的基础内容。 提示：以下是本篇文章正文内容，下面案例可供参考 一、ShardingSphere 示例：p
ShardingSphere之ShardingProxy集群部署
最新发布
qq_44027353的博客
08-05 1237
开发者手册在conf/server.yaml配置文件中有下面这一段配置，就是关于集群部署的mode:props:ShardingSphere支持两种运行模式，Standalone独立模式和Cluster集群模式。在Standalone独立模式下，ShardingSphere不需要考虑其他实例的影响，直接在内存中管理核心配置规则就可以了。如果把整个mode都注释掉，他就是ShardingSphere默认的运行模式。
ShardingSphere-Proxy5.1.0搭建及自定义算法编写
weixin_45892228的博客
11-01 1451
官方的文档实现接口定义的算法实现类。在项目resources目录下创建目录。在目录下新建文件将实现类的绝对路径写入至文件将上述 Java 文件打包成 jar 包。将上述 jar 包拷贝至 ShardingSphere-Proxy 解压后的ext-lib/目录。将上述自定义算法实现类的 Java 文件引用配置在 YAML 文件中，具体可参考配置规则。按照官方文档写一个按用户ID取模指定数据库例子新建Maven工程pom.xml添加以下依赖实现接口定义的算法实现类。
ShardingSphere(三) 水平分库配置搭建，实现写入读取
liuhenghui5201的专栏
02-01 724
概述：本章将介绍如何通过Sharding jdbc来实现数据库的水平分库操作，并从零搭建一个SpringBoot工程实现分库的读写操作。本文章在上一章节基础上改造，其中内容包含了表的水平拆分内容 环境：SpringBoot 2.2 + mybatis plus3.0 + Sharding jdbc4.0 需求：我们将客户号为单数的用户数据存储于 course_db_2 数据库中，将客户号为单号的课程数据存储于course_db_1 库中。 项目完整目录结构如下： 步骤一、数据库环境准备 数据库.
ShardingSphere分库分表实战之MySQL主从集群搭建
Coder_ljw的博客
07-23 1177
本篇文章主要讲解了ShardingSphere分库分表实战之MySQL主从集群搭建，实操过程非常重要，大家一定要动手亲自实践一下，必须掌握。下节预告，ShardingSphere分库分表实战之Sharding-JDBC实现读写分离，敬请期待。
sharding-sphere4.1.1
01-28
标题"sharding-sphere4.1.1"指的是ShardingSphere的4.1.1版本，这是一个流行的开源项目，专注于数据库分片、分布式事务和数据库治理。ShardingSphere由Apache Software Foundation（ASF）管理，提供了一个全面的...
sharding-sphere 分库分表 （springboot + mybat-sharding-sphere.zip
01-29
由于给出的文件名称是"sharding-sphere-master"，这可能是Sharding-Sphere项目的源码仓库主分支。这个文件可能包含了Sharding-Sphere的完整源代码，包括核心组件、示例应用、配置文档等。开发者可以从中学习Sharding...
Sharding-Sphere是一套开源的分布式数据库中间件解决方案组成的生态圈-python
06-18
Sharding-Sphere是一套开源的分布式数据库中间件解决方案组成的生态圈，它由Sharding-JDBC、Sharding-Proxy和Sharding-Sidecar这3款相互独立的产品组成。他们均提供标准化的数据分片、读写分离、柔性事务和数据治理...
sharding-sphere-demo 分表分库
04-28
在提供的`sharding-sphere-demo`压缩包中，可能包含了一个示例项目，演示了如何使用Sharding-Sphere进行分库分表的配置和实践。这个示例可能会涵盖以下几个方面： 1. **初始化配置**：数据库连接信息、分片规则、...
基于 ShardingSphere 的分布式数据库负载均衡架构搭建实战
wu_weijie的博客
02-02 1103
本文将介绍基于 ShardingSphere 的分布式数据库负载均衡架构搭建要点，并结合用户问题案例介绍引入负载均衡的影响。最后，将介绍并展示 Apache ShardingSphere 分布式数据库在云上的一站式解决方案。
ShardingSphere5入门实战(一)之docker容器搭建mysql一主二从；主从复制
royal1235的博客
10-15 993
ShardingSphere入门(一)之docker容器上安装mysql一主二从服务器，实现主从复制
ShardingSphere
jiqiren1994的博客
02-17 129
介绍 Apache ShardingSphere是一款开源的分布式数据库中间件组成的生态圈。它由Sharding-JDBC、Sharding-Proxy和Sharding-Sidecar（规划中）这3款相互独立的产品组成。 他们均提供标准化的数据分片、分布式事务和数据库治理功能，可适用于如Java同构、异构语言、容器、云原生等各种多样化的应用场景。 ShardingSphere项目发展如下： ShardingSphere定位为关系型数据库中间件，旨在充分合理地在分布式的场景下利用关系型数据库的计算和存储能
ShardingSphere实践（2）——ShardingSphere-Proxy集群式安装
HD243608836的博客
02-16 1441
从上一篇介绍的产品路线已知，当前对数据库接入端主要提供了JDBC和Proxy两款产品。ShardingSphere-JDBC面向开发人员，以jar包形式提供服务，因此不需要安装，只要部署好相关jar包和数据库系统提供的JDBC驱动程序，再做适当配置即可使用。ShardingSphere-Proxy面向DBA和运维人员，以代理方式提供服务，有中心静态入口，需要安装部署过程。本篇即详细讲解ShardingSphere-Proxy的安装、配置、验证过程。
Shardingsphere-Proxy 5.5.0部署
m0_63164811的博客
06-19 1141
Shardingsphere-Proxy 5.5.0部署
ShardingSphere入门到精通
weixin_56018532的博客
09-18 4744
ShardingSphere入门到精通
【Mysql调优】7、Sharding Sphere 实战
qq_45473962的博客
09-18 743
【Mysql调优】7、Sharding Sphere 分库分表、读写分离、MySQL主从数据同步
ShardingSphere项目实战集群环境准备
Coder_ljw的博客
07-17 699
ShardingSphere项目实战集群环境准备，本篇文章主要讲解了ShardingSphere项目实战集群环境准备，基础环境搭建，集群准备，数据库表创建，项目创建，基本准备的操作等等，后续内容更加精彩，敬请期待。
thinkphp安装配置sharding-sphere
05-18
安装ShardingSphere-PHP 1. 下载ShardingSphere-PHP 从ShardingSphere官网下载ShardingSphere-PHP的源代码，解压到Web服务器的根目录下，例如/var/www/html/sharding-sphere-php。 2. 安装Composer Composer是PHP中最流行的依赖管理工具，需要先安装Composer。 可以使用以下命令在Linux环境中安装： ``` curl -sS https://getcomposer.org/installer | php mv composer.phar /usr/local/bin/composer ``` 3. 安装ShardingSphere-PHP依赖 在sharding-sphere-php目录下执行以下命令安装依赖： ``` composer install ``` 配置ShardingSphere-PHP 在ShardingSphere-PHP中，需要配置ShardingSphere-JDBC的数据源和分片规则，然后配置ShardingSphere-PHP的数据源和分片规则。 1. 配置ShardingSphere-JDBC的数据源和分片规则 在ShardingSphere-JDBC的配置文件中，配置数据源和分片规则，例如： ``` # 数据源配置 spring.shardingsphere.datasource.names=ds0,ds1 spring.shardingsphere.datasource.ds0.type=com.zaxxer.hikari.HikariDataSource spring.shardingsphere.datasource.ds0.driver-class-name=com.mysql.jdbc.Driver spring.shardingsphere.datasource.ds0.jdbc-url=jdbc:mysql://localhost:3306/db0?serverTimezone=UTC&useSSL=false spring.shardingsphere.datasource.ds0.username=root spring.shardingsphere.datasource.ds0.password=123456 spring.shardingsphere.datasource.ds1.type=com.zaxxer.hikari.HikariDataSource spring.shardingsphere.datasource.ds1.driver-class-name=com.mysql.jdbc.Driver spring.shardingsphere.datasource.ds1.jdbc-url=jdbc:mysql://localhost:3306/db1?serverTimezone=UTC&useSSL=false spring.shardingsphere.datasource.ds1.username=root spring.shardingsphere.datasource.ds1.password=123456 # 分片规则配置 spring.shardingsphere.sharding.default-database-strategy.inline.sharding-column=id spring.shardingsphere.sharding.default-database-strategy.inline.algorithm-expression=ds${id % 2} spring.shardingsphere.sharding.tables.user.actual-data-nodes=ds${0..1}.user spring.shardingsphere.sharding.tables.user.table-strategy.inline.sharding-column=id spring.shardingsphere.sharding.tables.user.table-strategy.inline.algorithm-expression=user${id % 2} ``` 2. 配置ShardingSphere-PHP的数据源和分片规则 在ShardingSphere-PHP的配置文件中，配置数据源和分片规则，例如： ```php // 数据源配置 $shardingDataSourceConfig = new ShardingDataSourceConfiguration(); $shardingDataSourceConfig->getShardingRuleConfiguration()->getTableRuleConfigs()['user'] = new ShardingTableRuleConfiguration('user', 'ds${0..1}.user', 'id', new InlineShardingAlgorithm('id', 'user${id % 2}')); $shardingDataSourceConfig->getShardingRuleConfiguration()->getDefaultDatabaseShardingStrategyConfig() = new InlineShardingStrategyConfiguration('id', 'ds${id % 2}'); $shardingDataSourceConfig->getDataSourceConfiguration()->getDataSourceConfigs()['ds0'] = new DataSourceConfiguration('mysql:host=localhost;port=3306;dbname=db0', 'root', '123456'); $shardingDataSourceConfig->getDataSourceConfiguration()->getDataSourceConfigs()['ds1'] = new DataSourceConfiguration('mysql:host=localhost;port=3306;dbname=db1', 'root', '123456'); // 创建数据源 $shardingDataSource = new ShardingDataSource($shardingDataSourceConfig); ``` 这里的ShardingDataSourceConfiguration和ShardingDataSource是ShardingSphere-PHP提供的类，用于配置和创建ShardingSphere数据源。 使用ShardingSphere-PHP 配置好ShardingSphere-PHP后，就可以使用ShardingSphere-PHP操作分片数据库了。例如： ```php // 插入数据 $statement = $shardingDataSource->getConnection()->prepare('INSERT INTO user (id, name) VALUES (?, ?)'); $statement->bindValue(1, 1); $statement->bindValue(2, 'Alice'); $statement->execute(); // 查询数据 $statement = $shardingDataSource->getConnection()->prepare('SELECT * FROM user WHERE id = ?'); $statement->bindValue(1, 1); $statement->execute(); $row = $statement->fetch(PDO::FETCH_ASSOC); ``` 这里的$shardingDataSource是ShardingSphere-PHP创建的数据源，可以使用PDO API进行操作。注意，在ShardingSphere-PHP中，对于分片的表，需要使用分片键进行操作，否则会出现数据不一致的情况。
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值