MysqlCluster集群部署

最新推荐文章于 2024-07-08 23:44:29 发布
最新推荐文章于 2024-07-08 23:44:29 发布
阅读量1.3k 收藏 26
点赞数 26
文章标签： 数据库 mysql
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/hanyuce/article/details/134684116
版权

1.引言

1.1目的

部署MysqlCluster集群环境

1.2 MySQL集群Cluster原理

1. 数据分片

MySQL集群Cluster将数据分成多个片段，每个片段存储在不同的服务器上。这样可以将数据负载分散到多个服务器上，提高系统的性能和可扩展性。

2. 数据同步

MySQL集群Cluster使用多个服务器来存储数据，因此需要确保数据在不同的服务器之间同步。MySQL集群Cluster使用多种同步机制，如异步复制、半同步复制和全同步复制等，来确保数据的一致性和可靠性。

3. 负载均衡

MySQL集群Cluster使用负载均衡算法来分配客户端请求到不同的服务器上。这样可以避免单个服务器过载，提高系统的性能和可用性。

4. 自动故障转移

MySQL集群Cluster可以自动检测服务器的故障，并将故障服务器上的数据转移到其他服务器上。这样可以确保系统的高可用性和可靠性。

1.3 NDB引擎介绍

在MySQL实现集群Cluster架构中，存储节点使用的存储引擎为NDB引擎。NDB引擎是一种分布式的基于内存的引擎，因此作为MySQL集群Cluster架构中的存储节点，内存一定要足够大。

使用NDB引擎有以下优点：

1、基于内存存储，没有磁盘I/O瓶颈，速度快。
2、扩展性好，增加节点即可实现数据库集群Cluster的扩展。
3、冗余性好，单个节点故障，集群还可以提供服务。

同时，NDB引擎也有以下缺点：

1、由于存储基于内存，因此在设备断电后数据即丢失。
2、存储空间大小受内存大小限制。
3、多个节点分布式架构整体速度受会网络速度影响。

1.4 InnoDB存储引擎

InnoDB是一种支持事务和行级锁的崇尚ACID特性的储存引擎。它是MySQL5.5版本后的默认引擎。InnoDB非常适合那些需要频繁进行更新操作的应用，比如在线事务处理系统（OLTP）。

使用InnoDB引擎有以下优点：

1、支持事务：InnoDB储存引擎具有事务处理的能力，能够保证数据的完整性和一致性。
2、行级锁：InnoDB通过行级锁来控制并发读写操作，提高了多用户环境下的并发性能。
3、外键约束：InnoDB支持外键约束，保证数据的完整性。
4、适合OLTP：InnoDB引擎特别适合处理大量的并发读写操作，如OLTP系统。
5、Crash Recovery：InnoDB具备崩溃恢复的功能，能够在异常退出后将数据恢复到一致的状态。

同时，InnoDB引擎也有以下缺点：

1、 读写效率较差。
2、 占用的数据空间相对较大。

1.5 MyISAM存储引擎

MyISAM是MySQL早期的默认储存引擎，它采用表级锁，适合处理大量的读操作。然而，它不支持事务和外键约束。

使用MyISAM引擎有以下优点：

1、表级锁：MyISAM采用表级锁，对于大量更新操作的并发性能较差。
2、不支持事务：MyISAM不支持事务处理，因此可能存在数据不一致的风险。
3、全文索引：MyISAM支持全文索引，适合处理搜索引擎和全文搜索等应用。
4、插入性能：MyISAM在插入性能方面较好，对于大量的插入操作，性能较高。

同时，MyISAM引擎也有以下缺点：

1、不支持事务的完整性和并发性。

1.6 引擎对比选择

InnoDB适用于大量的并发读写操作、需要事务处理和外键约束的应用；MyISAM适用于大量的读操作、不需要事务处理和外键约束的应用；NDB适用于高并发、实时性要求高的应用。

2. 部署程序

2.1 部署环境

服务器作用服务器名服务器IP系统版本
管理节点master192.168.5.137Centos7
数据节点slave1192.168.5.150Centos7
SQL节点slave2192.168.5.144Centos7
SQL节点slave3192.168.5.152Centos7

2.2 服务器环境准备

2.2.1 修改四台主机名
192.168.5.137上操作
hostnamectl set-hostname master

192.168.5.150上操作
hostnamectl set-hostname slave1

192.168.5.144上操作
hostnamectl set-hostname slave2

192.168.5.152上操作
hostnamectl set-hostname slave3
2.2.2 添加host文件
四台服务器同时添加内容

vim /etc/hosts
192.168.5.137 master
192.168.5.150 slave1
192.168.5.144 slave2
192.168.5.152 slave3
2.2.3 配置四台服务器免密登陆
192.168.5.137上操作

ssh-keygen -t rsa
ssh-copy-id -i /root/.ssh/id_rsa.pub 192.168.5.150
ssh-copy-id -i /root/.ssh/id_rsa.pub 192.168.5.144
ssh-copy-id -i /root/.ssh/id_rsa.pub 192.168.5.152

192.168.5.150上操作

ssh-keygen -t rsa
ssh-copy-id -i /root/.ssh/id_rsa.pub 192.168.5.137
ssh-copy-id -i /root/.ssh/id_rsa.pub 192.168.5.144
ssh-copy-id -i /root/.ssh/id_rsa.pub 192.168.5.152


192.168.5.144上操作

ssh-keygen -t rsa
ssh-copy-id -i /root/.ssh/id_rsa.pub 192.168.5.137
ssh-copy-id -i /root/.ssh/id_rsa.pub 192.168.5.150
ssh-copy-id -i /root/.ssh/id_rsa.pub 192.168.5.152

192.168.5.152上操作

ssh-keygen -t rsa
ssh-copy-id -i /root/.ssh/id_rsa.pub 192.168.5.137
ssh-copy-id -i /root/.ssh/id_rsa.pub 192.168.5.150
ssh-copy-id -i /root/.ssh/id_rsa.pub 192.168.5.144

至此四台服务器完成免密登陆，准备工作完成。

2.3 管理节点部署

2.3.1 管理节点原理

顾名思义，管理节点用来对其它节点进行管理。实际操作中，是通过对一个叫做config.ini的配置文件进行维护而起到管理的作用。该文件可以用来配置有多少需要维护的副本、需要在每个数据节点上为数据和索引分配多少内存、数据节点的位置、在每个数据节点上保存数据的磁盘位置、SQL节点的位置等信息。管理节点只能有一个，配置要求不高。

2.3.2 创建工作目录
mkdir -p /usr/local/mysql
2.3.3 上传并解压文件
cd /usr/local/mysql
rz -y
tar -zxvf mysql-cluster-8.0.25-linux-glibc2.12-x86_64.tar.gz
mv mysql-cluster-8.0.25-linux-glibc2.12-x86_64 mysql-cluster
2.3.4 创建管理目录
mkdir -p /var/log/mysql-cluster
mkdir -p /etc/mysql-cluster
2.3.5 配置目录
vim /etc/mysql-cluster/config.ini
[ndbd default]
#数据写入数量。1表示一份,1个数据节点
NoOfReplicas=1

[ndb_mgmd]
nodeid=1
#管理结点的日志
datadir=/var/log/mysql-cluster
#管理结点的IP地址。本机IP
HostName=192.168.5.137

###### data node options:           #存储结点
[ndbd]
HostName=192.168.5.150
DataDir=/data/mysql
#mysql数据存储路径
nodeid=2

# SQL node options:                 #关于SQL结点
[mysqld]
HostName=192.168.5.144
nodeid=3

[mysqld]
HostName=192.168.5.152
nodeid=4
2.3.6 初始化管理节点
/usr/local/mysql/mysql-cluster/bin/ndb_mgmd -f /etc/mysql-cluster/config.ini

在这里插入图片描述

2.3.7 查看集群状态
/usr/local/mysql/mysql-cluster/bin/ndb_mgm
ndb_mgm> show
 
发现管理节点已经启动，当数据节点以及SQL节点未启动时显示的是not connected。

在这里插入图片描述

2.4 数据节点部署

2.4.1 数据节点原理

用来存放Cluster里面的数据，可以有多个数据节点。每个数据节点可以有多个镜像节点。任何一个数据节点发生故障，只要它的镜像节点正常，Cluster就可以正常运行。
这3种逻辑上不同的节点物理上可以存放在不同的服务器上，也可以在同一台 服务器上。通过架构中各个节点的介绍，可以总结一下MySQL Cluter的访问过程：前台应用利用一定的负载均衡算法将对数据库的访问分散到不同的SQL节点上，然后SQL节点对数据节点进行数据访问并从数据节点返回结果，最后SQL节点将收到的结果返给前台应用。而管理节点并不参与访问过长，它只用来对SQL节点和数据节点进行配置管理。

2.4.2 创建工作目录
mkdir -p /usr/local/mysql
2.4.3 上传并解压文件
cd /usr/local/mysql
rz -y
tar -zxvf mysql-cluster-8.0.25-linux-glibc2.12-x86_64.tar.gz
mv mysql-cluster-8.0.25-linux-glibc2.12-x86_64 mysql-cluster
2.4.4 创建mysql用户
useradd -M -s /sbin/nologin mysql
2.4.5 创建mysql目录并授权
mkdir -p /etc/mysql
mkdir -p /data/mysql
chown -R mysql:mysql /data/mysql/
2.4.6 配置数据节点
vim /etc/my.cnf

[mysqld]
#mysql数据存储路径
datadir=/data/mysql
#启动ndb引擎       
ndbcluster
#管理节点IP地址
ndb-connectstring=192.168.5.137

[mysql_cluster]
#管理节点IP地址
ndb-connectstring=192.168.5.137
2.4.7 启动数据节点
/usr/local/mysql/mysql-cluster/bin/ndbd –initial

在这里插入图片描述

2.4.8 检查数据节点是否启动
/usr/local/mysql/mysql-cluster/bin/ndb_mgm
ndb_mgm> show

在这里插入图片描述

2.5 SQL节点部署

2.5.1 SQL节点原理

SQL节点可以理解为应用和数据节点之间的一个桥梁。应用不能直接访问数据节点，只能先访问SQL节点，然后SQL节点再去访问数据节点来返回数据。Cluster中可以有多个SQL节点，通过每个SQL节点查询到的数据都是一直的，通常来说，SQL节点越多，分配到每个SQL节点的负载就越少，系统的整体性能就越好。

2.5.1 创建工作目录
mkdir -p /usr/local/mysql
2.5.2 上传并解压文件
cd /usr/local/mysql
rz -y
tar -zxvf mysql-cluster-8.0.25-linux-glibc2.12-x86_64.tar.gz
mv mysql-cluster-8.0.25-linux-glibc2.12-x86_64 mysql-cluster
2.5.3 创建mysql用户
useradd -M -s /sbin/nologin mysql
2.5.4 创建mysql目录并授权
mkdir -p /etc/mysql
mkdir -p /data/mysql
chown -R mysql:mysql /data/mysql/
2.5.5 创建SQL节点配置文件
vim /etc/my.cnf

[mysqld]
user=mysql
#启动ndb引擎
ndbcluster
#管理节点IP地址
ndb-connectstring=192.168.5.137

[mysql_cluster]
#管理节点IP地址
ndb-connectstring=192.168.5.137
2.5.6 配置mysql服务
cp /usr/local/mysql/mysql-cluster/support-files/mysql.server /etc/init.d/mysqld
chmod +x /etc/init.d/mysqld
2.5.7 编辑mysqld服务
vim /etc/init.d/mysqld

在这里插入图片描述

2.5.8 初始化mysql数据库
cd /usr/local/mysql/mysql-cluster/bin
./mysqld --initialize --user=mysql --basedir=/usr/local/mysql/mysql-cluster --datadir=/data/mysql/

在这里插入图片描述

2.5.9 启动mysql
systemctl daemon-reload
systemctl start mysqld

两台SQL节点操作相同。
2.5.10 检查SQL节点是否启动
/usr/local/mysql/mysql-cluster/bin/ndb_mgm
ndb_mgm> show

在这里插入图片描述

3. 验证集群

192.168.5.144上创建ccxe库

在这里插入图片描述

192.168.5.152上验证

在这里插入图片描述

192.168.5.144上创建表

在这里插入图片描述

192.168.5.152上验证

在这里插入图片描述

可以看到数据完成同步。
至此MysqlCluster集群部署完成。

4. 集群命令操作

4.1 管理节点操作

管理节点关闭（关闭管理节点后会一起关闭数据节点）

/usr/local/mysql/mysql-cluster/bin/ndb_mgm -e shutdown

如果集群配置有更新了

rm /usr/local/mysql/mysql-cluster/ndb_1_config.bin.1

4.2 数据节点操作

数据节点（NDB）关闭

cd /usr/local/mysql/mysql-cluster/bin
./ndbd stop

4.3 SQL节点操作

SQL节点关闭

systemctl stop mysqld
小熊故事集
关注
  • 26
    点赞
  • 踩
  • 26
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
MySQL Cluster集群部署与配置
郑明经的专栏
03-13 2445
简介 MySQL集群是一种在无共享架构（SNA，ShareNothing Architecture）系统里应用内存数据库集群的技术。这种无共享的架构可以使得系统使用低廉的硬件获取高的可扩展性。 MySQL集群是一种分布式设计，目标是要达到没有任何单点故障点。因此，任何组成部分都应该拥有自己的内存和磁盘。任何共享存储方案如网络共享，网络文件系统和SAN设备是不推荐或不支持的。通过这种冗余设计，M
MySQL Cluster初步学习资料整理--安装部署新特性性能测试等
caobihole
08-30 309
1.1 mysql-cluster简介 简单的说，MySQLCluster实际上是在无共享存储设备的情况下实现的一种完全分布式数据库系统，其主要通过NDBCluster（简称NDB）存储引擎来实现。 MySQLCluster刚刚诞生的时候可以说是一个可以对数据进行持久化的内存数据库，所有数据和索引都必须装载在内存中才能够正常运行，但是最新的MySQLCluster版本...
Mysql读写分离以及负载均衡
最新发布
weixin_53231767的博客
07-08 1177
本文演示了通过mybatis-plus拦截器插件实现mysql主从的读写分离以及通过nginx代理实现mysql从机集群的负载均衡
MySQL cluster 7.x 集群部署配置
chuyanwen8507的博客
11-28 104
本文主要介绍在CentOS6.3系统上搭建MySQL cluster7.2.10集群的方法。 1.MySQL cluster简介 MySQL cluster主要有三种类型节点： Data node，数据节点将保存数据库，它会自动复制所有的数据节点； Daemon node，守护...
mysql cluster部署_mysql cluster部署
weixin_29083475的博客
01-27 286
一、mysql cluster的基本概念1.mysql cluster的组成管理(MGM)节点：这类节点的作用是管理MySQL Cluster内的其他节点，如提供配置数据、启动并停止节点、运行备份等。由于这类节点负责管理其他节点的配置，应在启动其他节点前启动管理节点。数据节点：这类节点用于保存 Cluster的数据。数据节点的数目与副本的数目相关，是片段的倍数。SQL节点：这是用来访问 Clust...
mysql cluster部署_Mysql_cluster 部署(精华版)
weixin_35517006的博客
01-27 243
Mysql_cluster 部署(精华版)目录一、安装包及说明1.1、下载地址http://www.mysql.com/downloads/cluster/7.1.html#downloadsmysql-cluster-gpl-7.1.15-linux-x86_64-glibc23.tar.gz(200M)1.2、环境说明MGM:--192.168.8.20SQL :--192.168.8.20N...
MySQL Cluster集群的初级部署教程
09-10
MySQL Cluster的部署过程包括安装MySQL Cluster软件包，创建必要的目录结构，设置权限，配置节点，启动各个服务。例如，在安装7.2.6版本时，需要解压二进制包，创建符号链接，初始化数据库，设置所有权，然后编辑...
MySQL-Cluster 集群安装部署
07-26
MySQL-Cluster 集群安装部署 MySQL-Cluster 是一种高可用、高性能的数据库集群解决方案，能够提供高可用性、实时性能和高扩展性的数据库服务。下面我们将详细介绍 MySQL-Cluster 的安装部署过程。 MySQL-Cluster ...
mysql_cluster集群
08-19
MySQL Cluster 是一种高性能、高可用性且可扩展的集群解决方案，主要用于在无共享架构中部署内存中的数据库集群。这种架构允许使用低成本的硬件设备，同时不依赖特定的软件或硬件配置。 #### 二、MySQL Cluster 的...
mysql+pxc集群部署
02-15
MySQL+PXC集群部署 PXC（Percona XtraDB Cluster）是一套高可用集群解决方案，旨在解决传统基于主从复制模式的集群架构中的数据复制延迟问题。PXC 的最大优势在于其强的一致性和无同步延迟的特点。 PXC 的主要特性...
MySQL Cluster(MySQL 集群)
02-10
MySQL Cluster(MySQL 集群) 测试环境: CentOS4.6 数据库版本: mysql-cluster-gpl-6.3.20
Mysql-Cluster 集群部署
zbdaowohao的博客
09-21 1057
Mysql-Cluster 集群部署1.环境介绍（centos7，mysql-cluster-gpl-7.6.6）2.安装准备2.集群安装2.1管理节点2.2数据节点2.3SQL节点 1.环境介绍（centos7，mysql-cluster-gpl-7.6.6） 名称 ip 端口 管理节点 192.168.198.235 1186 数据节点 192.168.198.186 2202 SQL节点 192.168.198.241 3306 【1.管理节点】 管理节点主要是用来对
MySQL Cluster 集群部署
E_I_D_的博客
04-24 439
一、MySQL Cluster介绍 1. 基本概念   MySQL Cluster简单地讲是一种MySQL集群的技术，是由一组计算机构成，每台计算机可以存放一个或者多个节点，其中包括MySQL服务器，DNB Cluster的数据节点，管理其他节点，以及专门的数据访问程序，这些节点组合在一起，就可以为应用提高可高性能、高可用性和可缩放性的Cluster数据管理 2. 访问过程   应用通常使用一定的...
MySQL-Cluster
weixin_34162228的博客
09-20 69
MySQL-Cluster MySQL集群是一种在无共享架构（SNA，Share Nothing Architecture）系统里应用内存数据库集群的技术。这种无共享的架构可以使得系统使用低廉的硬件获取高的可扩展性。 MySQL集群是一种分布式设计，目标是要达到没有任何单点故障点。因此，任何组成部分都应该拥有自己的内存和磁盘。任何共享存储方案如网络共享，网络文件系统和SAN...
mysql-cluster(2)——部署
Let it go
06-05 2660
1 准备工作 2 部署 2.1 新建linux用户 2.2 解压安装包 2.3 NDB节点和API节点配置my.cnf 2.4 指定用户权限和数据位置 2.5 NDB节点配置mysqld 2.6 MGM节点配置config.ini 2.7 mysql命令快捷方式生效 3 卸载 4 启动示例 4.1 启动management-node 4.2 启动data-node 4.3 启动sql-no...
Mysql分布式集群部署---MySQL集群Cluster将数据分成多个片段，每个片段存储在不同的服务器上
qq_759035366的博客
12-04 2057
在MySQL实现集群Cluster架构中，存储节点使用的存储引擎为NDB引擎。NDB引擎是一种分布式的基于内存的引擎，因此作为MySQL集群Cluster架构中的存储节点，内存一定要足够大。使用NDB引擎有以下优点：1、基于内存存储，没有磁盘I/O瓶颈，速度快。2、扩展性好，增加节点即可实现数据库集群Cluster的扩展。3、冗余性好，单个节点故障，集群还可以提供服务。同时，NDB引擎也有以下缺点：1、由于存储基于内存，因此在设备断电后数据即丢失。2、存储空间大小受内存大小限制。
MySQL-Cluster集群部署实战
一个认真学习的女孩子的博客
10-31 546
可在这个网址下载：http://releases.galeracluster.com/mysql-wsrep-5.7/centos/7/x86_64/ http://releases.galeracluster.com/galera-3.37/centos/7/x86_64/galera-3-25.3.37-1.el7.x86_64.rpm。这样每个表将有自己的数据文件，提供更好的性能和管理灵活性。wsrep_local_state_uuid: 当前节点的Galera集群状态UUID。
MySQL集群（mysql-cluster）
qq_27953479的博客
08-26 737
滚动重启所有的数据查询节点服务：可以将mysqld_safe的启动、关闭写成shell脚本，通过脚本重启mysql服务。管理节点 创建/var/lib/mysql/mysql-cluster 目录，且mysql账户有读写权限。滚动重启旧的数据存储节点服务(滚动重启，不能所有节点同时重启，如果同时停止，数据库前端查询就会出现错误)其中mysql_cluster节点为数据节点的配置，其他的为mysql节点的配置。管理节点>数据节点>sql节点（必须等上级所有节点启动后才能启动下级节点）
MySQL-Cluster集群安装部署与特性详解
"MySQL-Cluster集群安装部署" MySQL-Cluster是MySQL数据库的一种高可用性和高性能的分布式存储模式，它设计用于处理大规模的数据集，尤其适用于需要高可用性、低延迟和写扩展性的应用场景。MySQL-Cluster的主要特点...
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值