mysql 做集群_Mysql 集群

最新推荐文章于 2024-03-30 07:10:16 发布
最新推荐文章于 2024-03-30 07:10:16 发布
阅读量1k 收藏 1
点赞数
文章标签： mysql 做集群
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_42445886/article/details/113301873
版权

Mysqld分三层，一个MGM用于管理配置，多个mysqld给应用程序提供访问，多个ndbd提供集群存储。mysqld的作用和一般的mysqld相同，不过加入的对NDB 数据存储的支持。数据是分散存储在每组ndb节点的，每组中ndb节点的数据相同，每组至少有一个ndbd保持运行状态才能访问数据。(组的分配参看NoOfReplicas参数)。ndb节点间保证数据的同步。

下面简单介绍下各个节点功能：

管理节点(MGM)

用于管理mysql集群里面的其他节点，比如配置数据、开启、停止和重启节点。由于该节点起到管理作用，所以需要最先启动该节点。

数据节点

用于保存mysql集群中的数据。

SQL节点

这是用来访问mysql集群数据的节点。对于MySQL集群，客户端节点是使用NDB存储引擎的传统MySQL服务器。

【实验环境】

Rhel6.3_x64

【实验架构】

e4f945cbf8522f3a95423f0b3ca4b3b9.png

【IP分配】

数据库管理节点: 192.168.30.113

数据库数据节点: 192.168.30.114 192.168.30.115

数据库sql节点:  192.168.30.114 192.168.30.115

注：实际生产环境中搭建mysql集群至少需要5台机器，由于是实验环境，这里我将数据节点和sql节点搭建在相同的两台服务器上。

【实验步骤】

一、管理节点的配置与安装

1、管理节点安装

[root@node1 src]# groupadd mysql

[root@node1 src]# useradd mysql -g mysql

[root@node1 src]# tar xf mysql-cluster-gpl-7.1.26-linux-x86_64-glibc23.tar.gz -C /usr/local/

[root@node1 src]# cd /usr/local/

[root@node1 local]# mv mysql-cluster-gpl-7.1.26-linux-x86_64-glibc23/ mysql

[root@node1 mysql]# scripts/mysql_install_db --user=mysql

2、管理节点配置

[root@node1 mysql]# mkdir /var/lib/mysql-cluster

[root@node1 mysql]# cd /var/lib/mysql-cluster/

[root@node1 mysql-cluster]# vim config.ini    #手动创建并添加以下内容

[NDBD DEFAULT]

NoOfReplicas = 2

DataMemory = 80M

IndexMemory = 18M

[NDB_MGMD]

#Id = 1                                            // Id 可以不设置，系统会自动分配

Hostname = 192.168.30.113         // 管理节点IP

datadir = /usr/local/mysql/logs

[NDBD]

#Id = 2

Hostname = 192.168.30.114

datadir = /usr/local/mysql/data/            // 这里设置的路径应与my.cnf中的设置一样

[NDBD]

#Id = 3

Hostname = 192.168.30.115

datadir = /usr/local/mysql/data/

[MYSQLD]

[MYSQLD]

[root@node1 ~]# mkdir -p /usr/local/mysql/logs

二、安装配置数据节点

1、数据节点安装

[root@node2 ~]# groupadd mysql

[root@node2 ~]# useradd mysql -g mysql

[root@node2 ~]# cd /usr/src/

[root@node2 src]# tar xf mysql-cluster-gpl-7.1.26-linux-x86_64-glibc23.tar.gz -C /usr/local/

[root@node2 src]# cd /usr/local/

[root@node2 local]# mv mysql-cluster-gpl-7.1.26-linux-x86_64-glibc23/ mysql

[root@node2 local]# chown -R mysql.mysql mysql

[root@node2 local]# cd mysql/

[root@node2 mysql]# scripts/mysql_install_db --user=mysql

[root@node2 mysql]# cp support-files/my-medium.cnf /etc/my.cnf

[root@node2 mysql]# cp support-files/mysql.server /etc/init.d/mysqld

[root@node2 mysql]# vim /etc/my.cnf   # 手动添加以下内容

datadir = /usr/local/mysql/data/

ndbcluster

ndb-connectstring = 192.168.30.113

[ndbd]

connect-string = 192.168.30.113

[mysql_cluster]

ndb-connectstring = 192.168.30.113

[ndb_mgm]

connect-string = 192.168.30.113

[ndb_mgmd]

config-file = /var/lib/mysql-cluster/config.ini    //指定管理节点配置文件路径

三、启动服务

1、在管理节点上启动相关服务

[root@node1 ~]# /usr/local/mysql/bin/ndb_mgmd  -f /var/lib/mysql-cluster/config.ini

[root@node1 ~]# netstat -nultp

Active Internet connections (only servers)

Proto Recv-Q Send-Q Local Address               Foreign Address             State       PID/Program name

tcp              0             0 0.0.0.0:1186                         0.0.0.0:*                   LISTEN      1372/ndb_mgmd

2、在数据节点启动相关服务

[root@node2 ~]# /usr/local/mysql/bin/ndbd --initial

2013-09-02 18:54:39 [ndbd] INFO     -- Angel connected to '192.168.30.113:1186'

2013-09-02 18:54:39 [ndbd] INFO     -- Angel allocated nodeid: 2

[root@node2 ~]# netstat -nultp

Proto Recv-Q Send-Q Local Address               Foreign Address             State       PID/Program name

tcp               0           0 192.168.30.114:42629        0.0.0.0:*                      LISTEN      1440/ndbd

tcp               0           0 192.168.30.114:53542        0.0.0.0:*                      LISTEN      1440/ndbd

tcp               0           0 192.168.30.114:55500        0.0.0.0:*                      LISTEN      1440/ndbd

[root@node2 mysql]# service mysqld start

Starting MySQL.. ERROR! Manager of pid-file quit without updating file.

解决办法：

[root@node2 mysql]#  scripts/mysql_install_db --user=mysql--datadir=/usr/local/mysql/data

[root@node2 mysql]# service mysqld start

Starting MySQL.. SUCCESS!

[root@node2 mysql]# netstat -nutlp

Active Internet connections (only servers)

Proto Recv-Q Send-Q Local Address               Foreign Address             State       PID/Program name

tcp             0             0     0.0.0.0:3306                0.0.0.0:*                         LISTEN      2336/mysqld

四、测试

1、到管理节点查看下相关服务状态

[root@node1 ~]# cd /usr/local/mysql/bin

[root@node1 bin]# ./ndb_mgm

-- NDB Cluster -- Management Client --

ndb_mgm> show

Connected to Management Server at: localhost:1186

Cluster Configuration

---------------------

[ndbd(NDB)]2 node(s)

id=2@192.168.30.114  (mysql-5.1.67 ndb-7.1.26, Nodegroup: 0, Master)

id=3@192.168.30.115  (mysql-5.1.67 ndb-7.1.26, Nodegroup: 0)

[ndb_mgmd(MGM)]1 node(s)

id=1@192.168.30.113  (mysql-5.1.67 ndb-7.1.26)

[mysqld(API)]2 node(s)

id=4@192.168.30.114  (mysql-5.1.67 ndb-7.1.26)

id=5@192.168.30.115  (mysql-5.1.67 ndb-7.1.26)

可以看到这里的数据节点、管理节点、sql节点都是正常的.

2、现在我们在其中一个数据节点上进行相关数据库的创建,然后到另外一个数据节点上看看数据是否同步

[root@node2 mysql]# /usr/local/mysql/bin/mysql -uroot -p

mysql> show databases;

+--------------------+

| Database           |

+--------------------+

| information_schema |

| mysql              |

| ndb_2_fs           |

| ndbinfo            |

| test               |

+--------------------+

5 rows in set (0.09 sec)

mysql> use test;

Database changed

mysql> CREATE TABLE cluster(id INT) ENGINE=NDB;      //这里必须指定数据库表的引擎为NDB,否则同步失败

Query OK, 0 rows affected (0.48 sec)

mysql> INSERT INTO cluster values(1);

Query OK, 1 row affected (0.07 sec)

mysql> SELECT * FROM cluster;

+------+

| id   |

+------+

|    1 |

+------+

1 row in set (0.00 sec)

现在到另外一个数据节点查看下是否同步过来

[root@node3 mysql]# /usr/local/mysql/bin/mysql -uroot -p

mysql> use test;

Database changed

mysql> SHOW TABLES;

+----------------+

| Tables_in_test |

+----------------+

| cluster        |

+----------------+

1 row in set (0.14 sec)

mysql> SELECT * FROM cluster;

+------+

| id   |

+------+

|    1 |

+------+

1 row in set (0.04 sec)

可以看到数据已经同步过来了，至此mysql集群搭建完毕

3、下面再做一下宕机测试，即停掉192.168.30.114这台机器的数据节点，看看mysql工作是否正常

[root@node2 bin]# ./ndb_mgm

-- NDB Cluster -- Management Client --

ndb_mgm> show

Connected to Management Server at: 192.168.30.113:1186

Cluster Configuration

---------------------

[ndbd(NDB)]2 node(s)

id=2@192.168.30.114  (mysql-5.1.67 ndb-7.1.26, Nodegroup: 0, Master)

id=3@192.168.30.115  (mysql-5.1.67 ndb-7.1.26, Nodegroup: 0)

[ndb_mgmd(MGM)]1 node(s)

id=1@192.168.30.113  (mysql-5.1.67 ndb-7.1.26)

[mysqld(API)]2 node(s)

id=4@192.168.30.114  (mysql-5.1.67 ndb-7.1.26)

id=5@192.168.30.115  (mysql-5.1.67 ndb-7.1.26)

从上面可以看到192.168.30.114这个节点是作为主节点的，现在停下这个节点

[root@node2 bin]# netstat -nutlp

Active Internet connections (only servers)

Proto Recv-Q Send-Q Local Address               Foreign Address             State       PID/Program name

tcp              0            0   192.168.30.114:42629        0.0.0.0:*                    LISTEN      1440/ndbd

[root@node2 bin]# kill 1440

[root@node3 bin]# ./ndb_mgm

-- NDB Cluster -- Management Client --

ndb_mgm> show

Connected to Management Server at: 192.168.30.113:1186

Cluster Configuration

---------------------

[ndbd(NDB)]2 node(s)

id=2 (not connected, accepting connect from 192.168.30.114)

id=3@192.168.30.115  (mysql-5.1.67 ndb-7.1.26, Nodegroup: 0, Master)

[ndb_mgmd(MGM)]1 node(s)

id=1@192.168.30.113  (mysql-5.1.67 ndb-7.1.26)

[mysqld(API)]2 node(s)

id=4@192.168.30.114  (mysql-5.1.67 ndb-7.1.26)

id=5@192.168.30.115  (mysql-5.1.67 ndb-7.1.26)

可以看到192.168.30.114这个节点已经连接不上，而192.168.30.115这个节点成了主节点

现在在192.168.30.115这个节点上插入数据，接着恢复192.168.30.114这个节点，看数据能否同步过来

在192.168.30.115是上操作

[root@node3 bin]# /usr/local/mysql/bin/mysql -uroot -p

mysql> USE test;

Database changed

mysql> CREATE TABLE cluster1(id int)ENGINE=NDB;

Query OK, 0 rows affected (0.43 sec)

mysql> SHOW TABLES;

+----------------+

| Tables_in_test |

+----------------+

| cluster        |

| cluster1       |

+----------------+

2 rows in set (0.06 sec)

mysql> INSERT INTO cluster1 values(1);

Query OK, 1 row affected (0.00 sec)

mysql> SELECT * FROM cluster1;

+------+

| id   |

+------+

|    1 |

+------+

1 row in set (0.00 sec)

恢复节点192.168.30.115，看数据是否会同步过来

开启服务：

[root@node2 bin]#  /usr/local/mysql/bin/ndbd --initial

[root@node2 bin]# /usr/local/mysql/bin/mysql -uroot -p

mysql> USE test;

Database changed

mysql> SHOW TABLES;

+----------------+

| Tables_in_test |

+----------------+

| cluster        |

| cluster1       |

+----------------+

2 rows in set (0.32 sec)

mysql> SELECT * FROM cluster1;

+------+

| id   |

+------+

|    1 |

+------+

1 row in set (0.12 sec)

可以看到数据同步过来了，至此实验完成！

注意：

从上面的实验可以看到，实际上mysql集群并不像其他集群系统那样能提供一个唯一的虚拟IP供外部程序调用。我们知道数据节点上的数据都是实时同步的，有人可能会说让外部程序调用任一数据节点不就可以了吗？反正数据是一致调用哪一个节点都一样。但这样是会有问题的万一这个节点断开，程序将访问不到数据，这时候也无法自动恢复过来。那么这种情况应该如何是好呢？

解决办法就是：在前端加多一个调度器，提供一个虚拟IP供外部程序调用，这个时候即使哪天某一台机器宕机，也不会造成过大影响。但是此时，这台调度器也将成为整个系统的瓶颈。解决的办法就是对调度器做双机热备！当主的调度器宕机，则启用备用调度器继续工作。

冯国添
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
MYSQL集群搭建
12-19
讲述了如何搭建MySQL数据库服务器的同步集群环境搭建。如有疑问可留言（反正也不回复）
MySQL 集群
DBA@Robin
12-22 5544
上一篇文章我们提到MySQL 读写分离，这篇文章我们讲解MySQL集群。我们提到的集群……
MySQL有哪些集群架构 mysql常用的集群方案
最新发布
很多时候犯错都是在不知情的情况下发生的
03-30 490
MySQL的集群方案有多种，按照实现途径可以分为MySQL官方和第三方。1）官方实现方式包括：主从方式、一主多从方式、cluster集群方式等。2）第三方实现方式包括：MMM（双主多从）方式、MHA（多主多从）方式、Galera Cluster（多主结构）方式等。
mysql学习之mysql集群
热门推荐
liushangzaibeijing的博客
04-12 3万+
本片博文是笔者学习《高性能mysql》一书的第一篇学习笔记，对应书籍章节为第10章。主要介绍了mysql集群部署方案主从集群部署。集群方案、主从同步原理、复制类型、docker安装mysql集群示例。
[原]项目进阶 之 集群环境搭建（二）MySQL集群
weixin_30556161的博客
04-25 112
上次的博文中我们介绍了一下集群的相关概念，今天的博文我们介绍一下MySQL集群的相关内容。 1、MySQL集群简介 MySQL群集技术在分布式系统中为MySQL数据提供了冗余特性，增强了安全性，使得单个MySQL服务器故障不会对系统产生巨大的负面效应，系统的稳定性得到保障。 MySQL群集需要有一组计算机，每台计算机的角色可能是不...
MySQL集群的可行方案
大鹏
05-21 2622
如果单MySQL的优化始终还是顶不住压力时，这个时候我们就必须考虑MySQL的高可用架构(很多同学也爱说成是MySQL集群)了，目前可行的方案有： 一、MySQL Cluster 优势：可用性非常高，性能非常好。每份数据至少可在不同主机存一份拷贝，且冗余数据拷贝实时同步。但它的维护非常复杂，存在部分Bug，目前还不适合比较核心的线上系统，所以这个我不推荐。 二、DRBD磁盘网络镜像方
mysql.rar_mysql集群
09-24
一步一步的讲述了mysql的集群的安装与配置 并贴上了报错情况处理
Mysql.rar_mysql集群
09-20
MYSQL解决方法 设计文档 主要有复制，集群方面的方案
MySQL集群配置.txt
09-18
这篇文档旨在介绍如何安装配置基于2台服务器的MySQL集群。并且实现任意一台服务器出现问题或宕机时MySQL依然能够继续运行。 注意！ 虽然这是基于2台服务器的MySQL集群，但也必须有额外的第三台服务器作为管理节点...
MySQL Cluster集群的初级部署教程
09-10
主要介绍了MySQL Cluster集群的初级部署教程, MySql Cluster可以利用充分利用节点服务器的多进程做到高可用,需要的朋友可以参考下
mysql集群方案对比
10-28
mysql集群对比,8中方案对比,附原理图
mysql搭建集群_Mysql搭建集群Mysql Cluster
weixin_30273813的博客
01-18 94
MySQL集群技术在分布式系统中为MySQL数据提供了冗余特性，增强了安全性，使得单个MySQL服务器故障不会对系统产生巨大的负面效应，系统的稳定性得到保障。mysql集群和主从复制的区别: 集群:nothing-sharing 同步 主从:data-sharing 异步mysql集群节点: 管理节点 数据节点 sql节点管理节点： 负责管理数据节点和SQL节点，管理集...
mysql集群
jiachanghui007的博客
03-27 1514
1.MySQL高可用集群原理 （1）数据库的主从架构与分库分表 数据量大，使用MQ削峰。 但是数据库本身的性能得不到提升。 数据库提升，基于分布式解决方案。最为常见的MySql以及ShardingSphere框架，来分库分表。 单机---->集群 （2）MySql主从同步 在MySQL运行的过程中，打开BinLog日志，在从库上起一个线程，与主库链接。监听主库日志，拉取数据。 对MySQL来说，性能是最高的。 BinLog默认不开。 2.MySQL主从集群 注意时间同步。启用ntp服务。 主从同
MySQL集群搭建
qq_41296669的博客
04-27 1万+
MySQL集群搭建1、主从复制原理1.1 原理剖析1.2 三个步骤1.3复制原则和问题2、搭建普通集群版(一主一从)2.1修改主机配置文件binlog格式设置：2.2从机配置文件2.3主机：建立账户并授权从机：配置需要复制的主机3、docker搭建MySQL集群3.1新建新的MySQL容器3.2配置主机3.3配置从机 1、主从复制原理 从机会从主机 读取binlog 来进行数据同步。 1.1 原理剖析 实际上主从同步的原理就是基于 binlog 进行数据同步的。在主从复制过程中，会基于 3 个线程来操作，一
mysql集群方案参考
XiaoGong1688的博客
02-06 436
集群的好处 高可用性：故障检测及迁移，多节点备份。 可伸缩性：新增数据库节点便利，方便扩容。 负载均衡：切换某服务访问某节点，分摊单个节点的数据库压力。 集群要考虑的风险 网络分裂：群集还可能由于网络故障而拆分为多个部分，每部分内的节点相互连接，但各部分之间的节点失去连接。 脑裂：导致数据库节点彼此独立运行的集群故障称为“脑裂”。这种情况可能导致数据不一致，并且无法修复，例如当两个数据库节点独立更新同一表上的同一行时。 @[toc] 一，mysql原厂出品 1，MySQL Replicatio
MySQL高可用集群搭建
郭靖宇的个人博客
12-20 507
1.环境软件版本 环境&软件 版本 Oracle VM VirtualBox 服务器&CentOS 7.8 数据库&Mysql 5.7.28 远程连接&Xshell 6 2.环境架构介绍 架构如图所示，4台机器ip和角色如下表： 机器名称 ip 角色 权限 Mysql_Master 192.168.124.136 Master 读写 Mysql_Slave 192.168.124.137 Slave1 只读 Mysql
MySQL集群
倾听雨落
11-10 1366
组建MySQL集群的几种方案 LVS+Keepalived+MySQL（有脑裂问题？但似乎很多人推荐这个） DRBD+Heartbeat+MySQL（有一台机器空余？Heartbeat切换时间较长？有脑裂问题？） MySQL Proxy（不够成熟与稳定？使用了Lua？是不是用了他做分表则可以不用更改客户端逻辑？） MySQL Cluster （社区版不支持INNODB引擎？商用案例不足？）
mysql cluster连接_mysql-cluster集群（亲测）
05-20
以下是连接 MySQL Cluster 集群的步骤： ### 使用 MySQL Shell 连接 1. 打开 MySQL Shell，输入以下命令连接到 MySQL Cluster： ``` mysqlsh root@<ndb_mgmd_ip>:<ndb_mgmd_port> ``` 其中，`root` 是 MySQL...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值