MySQL NDB Cluster 部署示例

最新推荐文章于 2024-03-02 07:26:45 发布
最新推荐文章于 2024-03-02 07:26:45 发布
阅读量1.6k 收藏 1
点赞数
分类专栏： MYSQL MYSQL 高可用性
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/kk185800961/article/details/103295604
版权

MySQL NDB Cluster 是内存集群数据库，可将数据分组分片冗余，由参数NoOfReplicas控制。

 

MySQL NDB Cluster 有三种类型的群集节点：

管理节点：管理NDB群集中的其他节点，如配置、启动和停止节点、监控、备份等功能。

数据节点：存储集群数据，NDB虽是内存数据库，也可定义表空间存储[# of node groups] = [# of data nodes] / NoOfReplicas

SQL节点：访问群集数据的节点。对于NDB群集，SQL节点是使用NDBCLUSTER存储引擎的传统MySQL服务器。

以上工具，只需要到官网下载一个软件包： mysql-cluster-gpl-7.6.12-linux-glibc2.12-x86_64.tar.gz

管理节点，需要服务端和客户的命令ndb_mgmd 和 ndb_mgm，已经设置配置文件 config.ini

数据节点，需要配置my.cnf，需要管理命令 ndbd 和 ndbmtd

SQL节点，需要配置my.cnf，只存储定义不存储数据，只需 mysqld 初始化即可，不需要下载MySQL。

 

更多参考：MySQL NDB Cluster 8.0

下载配置：

su - mysql
tar -zxvf mysql-cluster-gpl-7.6.12-linux-glibc2.12-x86_64.tar.gz
mv mysql-cluster-gpl-7.6.12-linux-glibc2.12-x86_64 /data/mysql-cluster
echo 'export PATH=$PATH:/data/mysql-cluster/bin' >> ~/.bashrc
source ~/.bashrc

管理节点配置：需要服务端和客户的命令ndb_mgmd 和 ndb_mgm，此处配置(1个ndb_mgmd;4个ndbd;2个mysqld)

mkdir -p /data/mysql-cluster/ndb_data
mkdir -p /data/mysql_ndb_data{21,22,23,24}

cat << EOF > /data/mysql-cluster/config.ini
[ndb_mgmd default]
DataDir=/data/mysql-cluster/ndb_data #MGM节点日志文件的目录
[ndb_mgmd]
NodeId=1
PortNumber=2200
HostName=192.168.1.82
[ndbd default]
NoOfReplicas=2
DataMemory=128M
[ndbd]
NodeId=21
ServerPort=2221
HostName=192.168.1.82
DataDir=/data/mysql_ndb_data21
[ndbd]
NodeId=22
ServerPort=2222
HostName=192.168.1.82
DataDir=/data/mysql_ndb_data22
[ndbd]
NodeId=23
ServerPort=2223
HostName=192.168.1.82
DataDir=/data/mysql_ndb_data23
[ndbd]
NodeId=24
ServerPort=2224
HostName=192.168.1.82
DataDir=/data/mysql_ndb_data24
[mysqld]
NodeId=11
HostName=192.168.1.82
[mysqld]
NodeId=12
HostName=192.168.1.82
EOF

#启动管理节点(默认端口1186)，初始化以后若重启不需要initial了
/data/mysql-cluster/bin/ndb_mgmd -f /data/mysql-cluster/config.ini --initial

#查看或关闭
netstat -tuplna | grep ndb_mgmd
/data/mysql-cluster/bin/ndb_mgm -c 192.168.1.82:2200 -e 'show'
/data/mysql-cluster/bin/ndb_mgm -c 192.168.1.82:2200 -e 'all status'
/data/mysql-cluster/bin/ndb_mgm -c 192.168.1.82:2200 -e shutdown

每个数据节点或SQL节点都需要一个my.cnf文件，该文件需要配置 管理节点的连接字符串和启用NDBCLUSTER存储引擎参数

数据节点 & SQL节点 my.cnf 配置：

for port in {3306..3307}
do
cat << EOF > /data/mysql${port}/my.cnf
[client]
port = ${port}
socket = /data/mysql${port}/tmp/mysql.sock
[mysqld]
port = ${port}
server_id = 82${port}
basedir =/data/mysql${port}
datadir =/data/mysql${port}/data
log-bin=/data/mysql${port}/binlog/mysql-bin
log-error =/data/mysql${port}/mysqld.log
pid-file =/data/mysql${port}/mysqld.pid
socket =/data/mysql${port}/tmp/mysql.sock
plugin-dir=/data/mysql/5.7/lib/plugin
innodb_buffer_pool_size = 512M
autocommit = 1
character_set_server=utf8
transaction_isolation = READ-COMMITTED
lower_case_table_names=1
explicit_defaults_for_timestamp = 1
binlog_format = row
symbolic-links=0
skip-external-locking
ndbcluster
#default-storage-engine=ndbcluster
#default-tmp-storage-engine=ndb
#ndb-connectstring=192.168.1.82:2200
[mysqld_safe]
log-error=/data/mysql${port}/mysqld.log
pid-file=/data/mysql${port}/mysqld.pid
[mysql_cluster]
ndb-connectstring=192.168.1.82:2200
EOF
done

MySQL NDB Cluster 启动顺序：首先是管理节点，然后是数据节点，最后是SQL节点

数据节点启动：默认端口为2202。现在直接启动 (本测试4个节点都在本地，所以要执行4次初始化)

/data/mysql-cluster/bin/ndbd -c 192.168.1.82:2200 --initial
netstat -tuplna | grep ndbd

初始化SQL节点 并切动服务 (此初始化2个SQL节点)

#初始化SQL节点
/data/mysql-cluster/bin/mysqld --defaults-file=/data/mysql3306/my.cnf --initialize --user=mysql
/data/mysql-cluster/bin/mysqld --defaults-file=/data/mysql3307/my.cnf --initialize --user=mysql

#启动SQL节点服务
/data/mysql-cluster/bin/mysqld_safe --defaults-file=/data/mysql3306/my.cnf 2>&1 > /dev/null &
/data/mysql-cluster/bin/mysqld_safe --defaults-file=/data/mysql3307/my.cnf 2>&1 > /dev/null &

#查看节点情况
ps -aef | grep mysqld
/data/mysql-cluster/bin/ndb_mgm -c 192.168.1.82:2200 -e 'show'
/data/mysql-cluster/bin/ndb_mgm -c 192.168.1.82:2200 -e 'all status'

连接2个SQL几点更改root密码：

#连接实例更改root密码
/data/mysql-cluster/bin/mysql -P 3306 -u root -p -S /data/mysql3306/tmp/mysql.sock
/data/mysql-cluster/bin/mysql -P 3307 -u root -p -S /data/mysql3307/tmp/mysql.sock

ALTER USER 'root'@'localhost' IDENTIFIED BY 'mysql';
flush privileges;
create user root@'192.168.1.%' IDENTIFIED by 'mysql';
grant all privileges on *.* to root@'192.168.1.%';
flush privileges;
select Host,User from mysql.user;

创建测试表，默认创建内存表，创建磁盘表需要指定表空间存储。创建表如不创建主键，则会自动创建隐藏主键。登录任意一个SQL 节点创建表，其他SQL实例也可以访问(创建表需指定 ENGINE = NDBCLUSTER或ENGINE = NDB)

#创建内存表
create database test;
use test;
create table tab(id int,name varchar(10)) engine=NDB;
insert into tab values(1,'ndbd21');
insert into tab values(2,'ndbd21');
select * from tab;

#创建磁盘表，创建UNDO表空间和数据表空间
create logfile group lg_1
add undofile 'undofile_1.log'
initial_size 16m
undo_buffer_size 2m
engine ndbcluster;

create tablespace ts_1 
add datafile 'datafile_1.dat'
use logfile group lg_1
initial_size 32m
engine ndbcluster;

create table tab2(id int,name varchar(10)) engine=NDB tablespace ts_1 storage disk;
insert into tab2 values(1,'ndbd21');
insert into tab2 values(2,'ndbd21');
select * from tab2;

 

【新增2个节点】

参考：Adding NDB Cluster Data Nodes Online: Detailed Example

#1.更改管理配置文件，增加2个ndbd节点选项
mkdir -p /data/mysql_ndb_data{25,26}

cat << EOF > /data/mysql-cluster/config.ini
[ndb_mgmd default]
DataDir=/data/mysql-cluster/ndb_data
[ndb_mgmd]
NodeId=1
PortNumber=2200
HostName=192.168.1.82
[ndbd default]
NoOfReplicas=2
DataMemory=128M
[ndbd]
NodeId=21
ServerPort=2221
HostName=192.168.1.82
DataDir=/data/mysql_ndb_data21
[ndbd]
NodeId=22
ServerPort=2222
HostName=192.168.1.82
DataDir=/data/mysql_ndb_data22
[ndbd]
NodeId=23
ServerPort=2223
HostName=192.168.1.82
DataDir=/data/mysql_ndb_data23
[ndbd]
NodeId=24
ServerPort=2224
HostName=192.168.1.82
DataDir=/data/mysql_ndb_data24
[ndbd]
NodeId=25
ServerPort=2225
HostName=192.168.1.82
DataDir=/data/mysql_ndb_data25
[ndbd]
NodeId=26
ServerPort=2226
HostName=192.168.1.82
DataDir=/data/mysql_ndb_data26
[mysqld]
NodeId=11
HostName=192.168.1.82
[mysqld]
NodeId=12
HostName=192.168.1.82
EOF

#2.停止管理服务(ndb_mgmd: NodeId=1)
/data/mysql-cluster/bin/ndb_mgm -c 192.168.1.82:2200 -e '1 STOP'

#3.启动管理服务
/data/mysql-cluster/bin/ndb_mgmd -f /data/mysql-cluster/config.ini --reload

#4.对现有数据节点执行滚动重启(starting 完成再执行下一个)
/data/mysql-cluster/bin/ndb_mgm -c 192.168.1.82:2200 -e '21 restart'
/data/mysql-cluster/bin/ndb_mgm -c 192.168.1.82:2200 -e '22 restart'
/data/mysql-cluster/bin/ndb_mgm -c 192.168.1.82:2200 -e '23 restart'
/data/mysql-cluster/bin/ndb_mgm -c 192.168.1.82:2200 -e '24 restart'

#5.重启sql节点服务
/data/mysql-cluster/bin/mysqladmin -uroot -pmysql shutdown -S /data/mysql3306/tmp/mysql.sock
/data/mysql-cluster/bin/mysqladmin -uroot -pmysql shutdown -S /data/mysql3307/tmp/mysql.sock

/data/mysql-cluster/bin/mysqld_safe --defaults-file=/data/mysql3306/my.cnf 2>&1 > /dev/null &
/data/mysql-cluster/bin/mysqld_safe --defaults-file=/data/mysql3307/my.cnf 2>&1 > /dev/null &

#6.初始化数据节点(新增2节点,此处执行2次)
/data/mysql-cluster/bin/ndbd -c 192.168.1.82:2200 --initial

#7.创建新的节点组
/data/mysql-cluster/bin/ndb_mgm -c 192.168.1.82:2200 -e 'create nodegroup 25,26'

#8.重新分布集群数据
/data/mysql-cluster/bin/ndb_mgm -c 192.168.1.82:2200 -e 'all report memory'
/data/mysql-cluster/bin/ndb_desc -c 192.168.1.82:2200 -d test -t tab -p

/data/mysql-cluster/bin/ndb_mgm -c 192.168.1.82:2200 -e 'show'
/data/mysql-cluster/bin/ndb_mgm -c 192.168.1.82:2200 -e 'all status'

 

 

 

 

 

 

 

薛定谔的DBA
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
mysql NDBcluster数据库集群介绍、部署及配置
唯有热爱 可抵万难
05-07 1197
MySQL集群是一个无共享的、分布式节点架构的存储方案，旨在提供容错性和高性能。它由三个主要节点组成：管理节点（MGM）、数据节点和SQL节点。这三个节点之间通过网络进行通信和交互。管理节点负责监控整个集群的状态，并根据需要调整配置或执行恢复操作。数据节点存储实际的数据，并处理与数据相关的操作。SQL节点作为客户端与集群之间的接口，负责接收请求、转发请求和处理响应。当客户端向SQL节点发送请求时，SQL节点会根据请求的类型和内容将其转发给适当的数据节点。
mysql ndbcluster 缺点_MySQL集群 -- NDB Cluster
weixin_30350163的博客
02-07 731
MySQL集群 --NDB ClusterMySQL集群的表使用的引擎是ndbcluster，简称ndb。它的意思是: "网络数据库".NDB(也叫NDB Cluster或者NDBCLUSTER),使用它才能让MySQL支持集群。要想获得MySQL Cluster 的功能，必须安装 mysql-server 和 mysql-max RPM内存数据库由多个节点组成，每个节点有对应的内存和磁盘，没有单...
mysql 分布式数据库 NDB集群概述
nmmbwan的博客
11-26 2212
mysql 分布式数据库介绍 NDB Cluster 介绍 管理节点、数据节点、sql节点
高级DBA带你从0到1搭建Mysql NDB Cluster 分布式集群搭建实战全网最详细
nasen512的博客
03-28 2669
NDB集群是一种在无共享系统中实现内存数据库集群的技术。无共享体系结构使系统能够使用非常便宜的硬件，并且对硬件或软件的特定要求最低。NDB集群设计为没有任何单点故障。在无共享系统中，每个组件都应该有自己的内存和磁盘，不建议或不支持使用共享存储机制，如网络共享、网络文件系统和SAN。NDB Cluster将MySQL服务器与NDB的内存集群存储引擎集成在一起。NDB集群由一组主机组成，每个主机运行一个或多个进程。
NDB Cluster 基本介绍
雪辉博客
07-18 3847
文章目录一、NDB集群概述二、NDB核心概念三、NDB Cluster节点，节点组，副本和分区 一、NDB集群概述   NDB集群是一种在无共享系统中实现内存数据库集群的技术。无共享体系结构使系统能够使用非常便宜的硬件，并且对硬件或软件的特定要求最低。   NDB集群设计为没有任何单点故障。在无共享系统中，每个组件都应该有自己的内存和磁盘，不建议或不支持使用共享存储机制，如网络共享、网络文件系统和SAN。   NDB Cluster将MySQL服务器与NDB的内存集群存储引擎集成在一起。NDB集群由一组主机
mysql cluster部署_mysql cluster部署
weixin_29083475的博客
01-27 278
一、mysql cluster的基本概念1.mysql cluster的组成管理(MGM)节点：这类节点的作用是管理MySQL Cluster内的其他节点，如提供配置数据、启动并停止节点、运行备份等。由于这类节点负责管理其他节点的配置，应在启动其他节点前启动管理节点。数据节点：这类节点用于保存 Cluster的数据。数据节点的数目与副本的数目相关，是片段的倍数。SQL节点：这是用来访问 Clust...
Mysql cluster开发环境快速部署
02-28
ndbcluster datadir=/home/user1/my_cluster/mysqld_data datadir=/home/user1/mysqlc [ndb_mgmd] hostname=localhost datadir=/home/user1/my_cluster/ndb_data NodeId=1 [ndbd default] noofreplicas=2 datadir=...
MySQL Cluster如何创建磁盘表方法解读
09-11
ENGINE NDBCLUSTER; ``` 如果遇到字符集问题导致错误，可以先设置字符集，再执行创建语句。 - 接着，向已存在的log file group添加新的undo log file。 ```sql ALTER LOGFILE GROUP lg_cloudstor ADD UNDOFILE '...
Windows Server 2003 下配置 MySQL 集群(Cluster)教程
09-10
MySQL Cluster采用了NDB Cluster存储引擎，允许在群集中运行多个MySQL服务器，提供无共享的系统架构，确保即使在硬件故障情况下也能保持服务的连续性。 NDB Cluster的核心特性包括： 1. **无共享架构**：每个节点...
mysql8中文参考手册.pdf
11-17
NDB Cluster MySQL 8支持NDB ClusterArchitecture，提供了高可用性和高性能的集群解决方案。 Oracle模式 MySQL 8提供了Oracle模式，允许用户使用Oracle风格的SQL语句和数据类型。 兼容性 MySQL 8与MySQL 5.7、...
mysql-cluster-ndb-bindings:MySQL 集群的 NDB 绑定。 源代码来自https
07-13
mysql-cluster-ndb-bindings MySQL 集群的 NDB 绑定。 源代码来自 。 进行了更改以使其与 mysql cluster 7.3 一起使用。描述（取自原始项目）： NDB/Bindings 是一个为 C++ NDBAPI 提供包装器的项目。 这些连接器...
CentOS8部署Mysql NDB Cluster8+Mysql Router8方案及应用.pdf
11-26
CentOS8部署Mysql NDB Cluster8+Mysql Router8方案及应用~~~~
Pro MySQL NDB Cluster 原版PDF by Krogh & Okuno
04-27
MySQL NDB Cluster is part of the MySQL family of products. There are few databases matching as many buzzwords as MySQL NDB Cluster: high availability, SQL, NoSQL, in-memory database, automatic failure handling, sharding, etc. This book discusses how these properties are integrated into MySQL NDB Cluster and how they are not just buzzwords, but real features.
MySQL NDB Cluster 分布式架构搭建 自定义启动、重启和关闭集群Shell脚本
最新发布
AdamShyly的博客
03-02 721
以下是自定义的集群重启Shell脚本（前提是hadoop102的root用户已经将ssh密钥分配给hadoop103和hadoop104的root用户，否则还需要输入密码；为了测试集群是否能够正常存储数据，需要在SQL节点中设置MySQL远程连接配置。在第三台服务器完成数据节点初始化之后，便可以启动两个SQL节点。再初始化初始化数据节点，注意此时初始化完毕会自动连接到管理节点。注意SQL节点需要在数据节点全部启动后，才能开始启动。在管理节点中执行以下命令，初始化管理节点。在初始化mysqld之前，需要将。
mysql ndbd_MySQL中双NDBD节点Cluster快速配置
weixin_29066781的博客
01-27 288
1.配置环境； MGM:192.168.0.31 NDBD1：192.168.0.32 NDBD2：192168.0.33 SQL1：192.168.0.34 SQL2：192.168.0.30 2.软件安装 (1.配置环境；MGM:192.168.0.31NDBD1：192.168.0.32NDBD2：192168.0.33SQL1：192.168.0.34SQL2：192.168.0.302....
mysql cluster部署_Mysql_cluster 部署(精华版)
weixin_35517006的博客
01-27 238
Mysql_cluster 部署(精华版)目录一、安装包及说明1.1、下载地址http://www.mysql.com/downloads/cluster/7.1.html#downloadsmysql-cluster-gpl-7.1.15-linux-x86_64-glibc23.tar.gz(200M)1.2、环境说明MGM:--192.168.8.20SQL :--192.168.8.20N...
NDB语法
weixin_30872337的博客
11-18 411
1，不支持创建临时表(temporary tables); 2,创建索引和键的限制： (1),在列上创建索引长度超过3072bytes会成功，但是只能使用索引的前3072bytes。并且会显示警告信息"specified key was too long,max key lenght is 3072 keys" 不支持的特征 1，在NDB创建create table时，一定要指...
mysql ndb存储引擎_ndb 存储引擎
weixin_34742806的博客
02-17 1144
MySql 官方存储引擎存储引擎是为不同的表类型处理 SQL 操作的 MySql 组件。InnoDB 是默认的、最通用的存储引擎，也是官方推荐使用的存储引擎，除非一些特定案例。MySql 5.6 中的 CREATE TABLE 语句创建的表的存储引擎默认就是 InnoDB。MySql 服务器使用的是一个可插拔存储引擎架...文章技术小美2017-11-121019浏览量《MySQL技术内幕：Inn...
MySQL分布式集群搭建
热门推荐
benzyh的专栏
04-04 6万+
1 准备集群搭建环境     使用6台虚拟机来搭建MYSQL集群，相应的实验环境与对应的MYSQL节点之间的对应关系如下图所示： 节点名称 节点IP 节点内存 节点硬盘大小 节点CPU MYSQL节点角色 Ubuntu-1 192.168.1.26 768M 20G 30
MySQL NDB Cluster安装
03-21
综上所述，本文将详细介绍MySQL NDB Cluster的安装过程，包括部署SQL节点、环境信息和下载MySQL NDB Cluster软件等内容。通过本文的阐述，读者将能够全面了解MySQL NDB Cluster的安装流程，并能够顺利完成相关的操作...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值