MySQL Cluster集群搭建

最新推荐文章于 2024-06-28 23:04:57 发布
最新推荐文章于 2024-06-28 23:04:57 发布
阅读量2.1k 收藏 16
点赞数 5
文章标签： mysql
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/yorao4565/article/details/112346252
版权

目录

前言

Mysql Cluster是两项技术的结合：NDB数据库，以及作为SQL前端的MySQL存储引擎。NDB是一个分布式，具备兼容性、非共享的数据库，提供同步复制以及节点间的数据自动分片。（《高性能MySQL》）
在这里插入图的撒大大片描述

MySQL Cluster基本架构

  • 管理节点(ndb_mgmd)
    负责管理其他各节点IP地址、内存分配以及保存数据路径；
  • 数据节点(ndbd)
    负责存储数据；
  • SQL节点(mysqld)
    提供SQL 的API调用功能，简单地讲就是mysqld服务器
    其中管理节点最好单独部署，数据节点和SQL节点可以部署在一起；

准备工作

安装包下载

链接: https://dev.mysql.com/downloads/cluster/7.5.html#downloads.
如下图所示：
在这里插入图片描述

集群规划

节点IP
管理节点192.168.10.8
数据节点192.168.10.9
数据节点192.168.10.19
SQL节点192.168.10.9
SQL节点192.168.10.19

建议采用内网IP，使用外网IP需要考虑host以及网卡设置等情况，需要提前完成配置

彻底卸载mysql

需要将以上各IP中msyql服务彻底卸载，包括关闭mysql相关服务、卸载软件以及删除与mysql相关的文件；

端口开放

集群中个节点需要开放相应端口，MySQL Cluster所用端口为1186、2202，mysql端口为3306

集群搭建

管理节点

MySQL Cluster 软件安装

解压缩安装包后，复制到指定位置

[root@10 ~]# cd /home
[root@10 home]# gunzip mysql-cluster-gpl-7.5.20-linux-glibc2.12-x86_64.tar.gz
[root@10 home]# tar -xvf mysql-cluster-gpl-7.5.20-linux-glibc2.12-x86_64.tar
[root@10 home]# mkdir /usr/local/mysql-cluster
[root@10 home]# mv mysql-cluster-gpl-7.5.20-linux-glibc2.12-x86_64/* /usr/local/mysql-cluster

添加用户权限

添加安装需要相关用户权限

[root@10 home]# groupadd mysql
[root@10 home]# useradd mysql -g mysql
[root@10 home]# cd /usr/local/mysql-cluster/
[root@10 mysql-cluster]# chown -R root .

管理程序拷贝

[root@10 mysql-cluster]# cp bin/ndb_mgm* /usr/local/bin
[root@10 mysql-cluster]# cd /usr/local/bin
[root@10 mysql-cluster]# chmod +x ndb_mgm*

配置文件

新建管理节点的配置文件config.ini

[root@10 mysql-cluster]# cd /var/lib/mysql-cluster/
[root@10 mysql-cluster]# touch config.ini
[root@10 mysql-cluster]# vim config.ini

config.ini配置内容为：

[NDBD DEFAULT]
NoOfReplicas =2
DataMemory = 512M
IndexMemory = 64M
[NDB_MGMD]
NodeId=1
hostname =192.168.10.8
datadir =/var/lib/mysql-cluster
[NDBD]
NodeId =2
hostname =192.168.10.9
datadir =/usr/local/mysql-cluster/data
[NDBD]
NodeId =3
hostname =192.168.10.19
datadir =/usr/local/mysql-cluster/data
[mysqld]
NodeId =4
hostname =192.168.10.9
[mysqld]
NodeId =5
hostname =192.168.10.19

其中：
[NDBD DEFAULT]
代表每个ndbd节点的默认设置，包括：

  • NoOfReplicas ：每份数据在不同节点上的存储份数，根据实际情况确定
  • DataMemory ：数据存储占用内存
  • IndexMemory ： 索引存储占用内存

[NDB_MGMD]
代表管理节点的设置，包括：

  • NodeId：节点ID
  • hostname：管理节点IP地址，推荐采用内网IP
  • datadir：管理节点数据存储位置

[NDBD]
代表ndb数据节点的配置，包括：

  • NodeId：节点ID
  • hostname：数据节点IP地址，推荐采用内网IP
  • datadir：数据节点数据存储位置

[msyqld]
代表SQL节点的设置，包括：

  • NodeId：节点ID
  • hostname：SQL节点IP地址，推荐采用内网IP

管理节点启动

[root@10 mysql-cluster]# /usr/local/bin/ndb_mgmd -f /var/lib/mysql-cluster/config.ini --initial --ndb-nodeid=1
MySQL Cluster Management Server mysql-5.7.32 ndb-7.5.20

显示MySQL Cluster Management Server mysql-5.7.32 ndb-7.5.20则代表安装正确
查看管理节点运行情况：

[root@10 ~]# /usr/local/bin/ndb_mgm -e show
Connected to Management Server at: localhost:1186
Cluster Configuration
---------------------
[ndbd(NDB)] 2 node(s)
id=2 (not connected, accepting connect from 192.168.10.9)
id=3 (not connected, accepting connect from 192.168.10.19)
[ndb_mgmd(MGM)] 1 node(s)
id=1 @192.168.10.8  (mysql-5.7.32 ndb-7.5.20)
[mysqld(API)] 2 node(s)
id=4 (not connected, accepting connect from 192.168.10.9)
id=5 (not connected, accepting connect from 192.168.10.19)

由于数据节点和sql节点尚未启动，所以看不到节点信息
管理节点初始化之后，再启动就不需要–initial后缀，管理节点的关闭命令为：

/usr/local/bin/ndb_mgm -e shutdown

常见问题

  1. 找不到相关目录：新建相关目录
  2. hostname无法连接：请确认IP地址是否可用，并且能够网卡配置与host配置支持使用该IP地址

数据节点

MySQL Cluster 软件安装

解压缩安装包后，复制到指定位置，与管理节点一致

[root@10 ~]# cd /home
[root@10 home]# gunzip mysql-cluster-gpl-7.5.20-linux-glibc2.12-x86_64.tar.gz
[root@10 home]# tar -xvf mysql-cluster-gpl-7.5.20-linux-glibc2.12-x86_64.tar
[root@10 home]# mkdir /usr/local/mysql-cluster
[root@10 home]# mv mysql-cluster-gpl-7.5.20-linux-glibc2.12-x86_64/* /usr/local/mysql-cluster

添加用户权限

[root@10 home]# groupadd mysql
[root@10 home]# useradd mysql -g mysql

配置文件

由于本文中数据节点与SQL节点共用一台机器，所以配置文件my.cnf中既有数据节点配置也有SQL节点配置

[root@10 home]# vim /etc/my.cnf

my.cnf

[mysqld]
basedir=/usr/local/mysql-cluster
datadir=/usr/local/mysql-cluster/data
socket=/usr/local/mysql-cluster/sock/mysql.sock
user=mysql
symbolic-links=0
ndbcluster
ndb-connectstring=192.168.10.8
port=3306

[mysql_cluster]
ndb-connectstring=192.168.10.8

[ndbd]
ndb-connectstring=192.168.10.8

[mysqld_safe]
log-error=/usr/local/mysql-cluster/logs/mysql.pid
pid-file=/usr/local/mysql-cluster/logs/error.log

[mysql]
socket=/usr/local/mysql-cluster/sock/mysql.sock
#
# include all files from the config directory
#
!includedir /etc/my.cnf.d

其中，需要注意的配置为：
datadir：需要与管理节点config.ini中的数据节点datadir保持一致
ndb-connectstring：配置文件中都设置为管理节点IP地址

数据节点启动

[root@10 mysql-cluster]# ./bin/ndbd --initial
2021-01-08 15:38:44 [ndbd] INFO     -- Angel connected to '192.168.10.8:1186'
2021-01-08 15:38:44 [ndbd] INFO     -- Angel allocated nodeid: 3

数据节点初始化后，之后再次启动就不需要–initial后缀

回到管理节点，查看集群状态，发现数据节点已经连接

[root@10 ~]# /usr/local/bin/ndb_mgm -e show
Connected to Management Server at: localhost:1186
Cluster Configuration
---------------------
[ndbd(NDB)] 2 node(s)
id=2 (not connected, accepting connect from 192.168.10.9)
id=3    @192.168.10.19  (mysql-5.7.32 ndb-7.5.20, starting, Nodegroup: 0)
[ndb_mgmd(MGM)] 1 node(s)
id=1 @192.168.10.8  (mysql-5.7.32 ndb-7.5.20)
[mysqld(API)] 2 node(s)
id=4 (not connected, accepting connect from 192.168.10.9)
id=5 (not connected, accepting connect from 192.168.10.19)

常见问题

  1. 找不到相关文件和文件夹：新建相关文件和文件夹
  2. IP地址无法连接：查看管理节点和数据节点本身网卡设置与端口开放情况

SQL节点

由于本文中数据节点与SQL节点部署在同一台机器上，所以不需要再进行软件安装，配置文件也已经配置完成

添加用户权限

[root@10 home]# cd /usr/local/mysql-cluster/
[root@10 mysql-cluster]# mkdir logs
[root@10 mysql-cluster]# mkdir data
[root@10 mysql-cluster]# chown -R mysql:mysql ./

根据配置文件创建相关文件夹，本文为了方便直接将log和data文件都建立在安装目录下，建议实际使用时修改位置，但是各文件夹都需要增加mysql用户权限

msyqld服务初始化

需要对mysqld服务进行初始化操作

[root@10 mysql-cluster]# ./bin/mysqld --initialize --user=mysql

初始化操作需要一定时间执行，执行完成后末尾会有初始密码，改密码为需要记录
初始化完成后，将mysql程序复制到启动目录下，方便mysqld服务启动

[root@10 mysql-cluster]# cp support-files/mysql.server /etc/init.d/mysqld
[root@10 mysql-cluster]# chmod +x /etc/init.d/mysqld
[root@10 mysql-cluster]# service mysqld start
Starting MySQL.... SUCCESS!

回到管理节点，查看集群状态，发现数据节点已经连接

在这里插入代码片
[root@10 ~]# /usr/local/bin/ndb_mgm -e show
Connected to Management Server at: localhost:1186
Cluster Configuration
---------------------
[ndbd(NDB)] 2 node(s)
id=2    @192.168.10.9  (mysql-5.7.32 ndb-7.5.20, starting, Nodegroup: 0)
id=3    @192.168.10.19  (mysql-5.7.32 ndb-7.5.20, starting, Nodegroup: 0)
[ndb_mgmd(MGM)] 1 node(s)
id=1 @192.168.10.8  (mysql-5.7.32 ndb-7.5.20)
[mysqld(API)] 2 node(s)
id=4 (not connected, accepting connect from 192.168.10.9)
id=5	 @192.168.10.19  (mysql-5.7.32 ndb-7.5.20)

常见问题

  1. 必须启动全部数据节点才能启动SQL节点，否则连接不上
  2. mysqld初始化时需要data目录为空
  3. 出现缺少文件、目录错误时建议新建相关文件、文件夹

集群启停

启动顺序为：1.管理节点；2.数据节点（全部）；3.SQL节点

测试

在SQL节点通过mysqld服务修改密码并开启远程访问权限，通过navicat工具测试集群是否正常工作
在这里插入图片描述

参考

链接: https://blog.csdn.net/csolo/article/details/87086086.
链接: https://blog.csdn.net/qq_36807862/article/details/81289143.

我会大跳
关注
  • 5
    点赞
  • 踩
  • 16
    收藏
    觉得还不错? 一键收藏
  • 1
    评论
Linux下 MySQL-cluster集群搭建
lijiachang8的博客
08-18 642
一：基本概念 “NDB” 是一种“内存中”的存储引擎，也是事务型存储引擎，具备ACID属性。 管理(MGM)节点：负责管理MySQL Cluster内的其他节点，如提供配置数据、启动并停止节点、运行备份等。由于这类节点负责管理其他节点的配置，应在启动其他节点之前首先启动这类节点。MGM节点是用命令“ndb_mgmd”启动的。 数据节点：用于保存 Cluster的数据。数据节点的数目与副本的数
MySQL集群Cluster
热门推荐
yan_0916的博客
12-05 2万+
实际操作 1.环境配置 master服务器： 192.168.133.75 mysql5.7 slave1服务器： 192.168.133.50 mysql5.7 slave2服务器： 192.168.133.100 mysql5.7 Amoeba服务器： 192.168.133.136 jdk1.6、Amoeba 客户端 服务器： 192.168.133.99 mysql 2.初始环境准备 systemctl stop firewalld setenforce 0 3.搭建时间同步： 3.
mysql cluster搭建
weixin_33889245的博客
02-24 550
安装要求 安装环境：CentOS-6.4 安装方式：源码编译安装 软件名称：mysql-cluster-gpl-7.2.6-linux2.6-x86_64.tar.gz 软件安装位置：/usr/local/mysql 数据存放位置：/var/mysql/data 日志存放位置：/var/mysql/logs 集群设计 首先设计集群的安装分配方式，我...
Redis主从复制
Dear_xq 的博客
04-11 992
Redis主从复制
Mysql常见的集群方案
MrLee的博客
07-10 8324
1、是官方提供的主从同步方案，用于将一个 MySQL 的实例同步到另一个实例中，在主从复制中，从库利用主库上的 binlog 进行重播，实现主从同步，默认是异步同步，针对其在不同场景下的一些缺陷，衍生出了半同步复制，强同步复制等数据高可用的方案；2、组复制又称为 MGR,引入复制组主要是为了解决传统异步复制和半同步复制可能产生数据不一致的问题, MGR 由若干个节点共同组成一个复制组，一个事务的提交，必须经过组内大多数节点 (N / 2 + 1) 决议并通过，才能得以提交;3、
strom 运维中遇到的问题分享
h952520296的博客
07-22 207
问题一 获取不到kafka ERROR Node /broker/ids/270 does not exist 排查思路 zookeeper-client 进入zookeeper 查看路径下的情况 ls /broker/ids 查看kafka注册进来没有 如果是 [] 说明没注册进来 cdh查看ZooKeeper Root 看下路径 改成空的 即注册到默认地址 应该是注册到/“自己设置的路径”/broker/ids去了 问题二 [Thread-10-kafka-spo...
mysql容器集群搭建步骤_mysql-cluster集群搭建步骤
weixin_39653717的博客
02-27 120
2.解压安装包#上传到服务器目录/usr/softwares并解压tar -xzvf mysql-cluster-gpl-7.5.15-linux-glibc2.12-x86_64.tar.gz#新建/usr/local/mysql目录mkdir /usr/local/mysql#将解压的文件重命名为mysql，并放到/usr/local/mysql目录下 mv mysql-cluster-gpl...
MySQL Cluster集群搭建详解
05-29
用于新手搭建学习，高手飘过。搭建过程中，注意各系统的环境不一致，可能会出现其他错误
搭建mysql-cluster集群.docx
07-14
搭建MySQL Cluster集群 MySQL Cluster是适用于分布式计算环境的高可用、高冗余版本的MySQL，其技术在分布式系统中为MySQL数据提供了冗余特性，增强了安全性，使得单个MySQL服务器故障不会对系统产生巨大的负面效应...
【亲测】MySQL-cluster集群搭建 v1.0
01-17
MySQL 集群搭建详解 MySQL 集群是一种高可用、高性能的数据库解决方案，它可以提供高可用性、可扩展性和高性能的数据库服务。在这篇文章中，我们将详细介绍如何搭建一个 MySQL 集群，包括虚拟机创建、 MySQL ...
MySQL-Cluster集群搭建
06-13
操作步骤，说明文档
MySQL Cluster同步集群搭建
08-03
MYSQL Cluster同步集群的搭建！实现的功能就是节点间的数据同步
go语言基础 利用递归遍历文件夹
超级系博客
05-03 1406
我们可以利用递归和ioutil.ReadDir(遍历当前所有文件)，IsDir(判断是否是目录)方法，来遍历整个文件夹package main import ( "io/ioutil" "fmt" ) func main() { dirname:="C:\\liu\\pro" //1层：mmm，3个子内容 //fileInfos,_:=ioutil.ReadDi...
【Go】Go语言实现递归
ReganYue's Blog
02-16 2921
package main import "fmt" func main() { fmt.Println(dg01(5)) fmt.Println(dg02(5)) } func dg01(n int) (sum int) { if n<1{ return 0 } sum = dg01(n-1)+n return }
python networkx进行最短路径分析_如何利用networkx在加权图中寻找最短路径？
weixin_39612057的博客
12-04 725
我正在使用Python 2.7 Enthought distribution中的networkx包计算海港网络之间的最短路径。使用dijkstra_path_length计算距离是可行的，但是我还需要知道它使用dijkstra_path找到了什么路径(另外，我认为如果我先计算路径，然后计算路径的长度，而不是在同一数据上运行Dijkstra的算法两次，运行起来应该更快)。然而，path函数失败了，说...
Go语言用递归实现 求数组的总和以及最大值
小雨的博客
10-11 502
【代码】Go语言用递归实现 求数组的总和以及最大值。
Go语言之函数使用(4)函数-递归调用
Science Explorer
08-11 267
一、基本介绍 一个函数在函数体内又调用了本身，我们称为递归调用 二、快速入门案例 package main import ( &amp;amp;quot;fmt&amp;amp;quot; ) func test(n int) { if n &amp;amp;amp;gt; 2 { n-- test(n) } else { fmt.Println(&amp;amp;quot;n=&amp;
dataX同步SQLserver到MySQL数据
最新发布
goodlook0123的专栏
06-28 1042
DataX本身作为数据同步框架，将不同数据源的同步抽象为从源头数据源读取数据的Reader插件，以及向目标端写入数据的Writer插件，理论上DataX框架可以支持任意数据源类型的数据同步工作。同时DataX插件体系作为一套生态系统, 每接入一套新数据源该新加入的数据源即可实现和现有的数据源互通。
mysql分布式集群搭建
05-17
MySQL 分布式集群一般采用主从复制或者多主复制的方式进行。下面我来介绍一下具体的步骤： 1. 安装 MySQL 软件 在每个节点上安装 MySQL 软件，可以选择官网下载二进制安装包或者使用 yum/apt-get/aptitude 等软件包管理器进行安装。 2. 配置 MySQL 主从复制或多主复制 - 主从复制：将一个 MySQL 节点作为主节点，其他节点作为从节点。主节点上的数据修改会被同步到从节点上。 - 多主复制：每个节点都是主节点和从节点。当一个节点上的数据修改时，会同步到其他节点上。 具体配置步骤可以参考 MySQL 官方文档。 3. 同步数据 在主从复制中，需要将主节点上的数据同步到从节点上。可以使用 mysqldump 工具备份主节点上的数据，然后在从节点上使用 mysql 命令进行导入。 在多主复制中，每个节点都需要同步其他节点上的数据。可以使用 Galera Cluster、Percona XtraDB Cluster 等工具进行同步。 4. 配置负载均衡 当有多个 MySQL 节点时，可以使用负载均衡器进行流量分发，以提高集群的性能和可靠性。常用的负载均衡器有 HAProxy、Nginx 等。 5. 测试集群 在集群搭建完成后，需要进行测试以确保集群的正常运行。可以通过在不同节点上进行数据操作、故障模拟等方式进行测试。 以上是 MySQL 分布式集群的大致步骤，具体操作还需要根据实际情况进行调整。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论 1
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值