mysql cluster 7.4 白皮书_mysql集群7.4.1

一：mysql集群原理：

1 mysql集群分为三个节点：

1.1 控制节点：本身不提供服务只是控制整个集群的开启与关闭

1.2 数据节点：真正提供数据库的存储，并和其他数据节点关联用

1.3 sql节点：和平常数据库一样提供正常服务

二：mysql集群要点与思路：

2.1 最好将现有的mysql或MariaDB卸载干净，

rpm －qa ｜ grep mysql 找出含有mysql的软件包

rpm －e  --nodeps mysql   删除后再查一下是否删除干净

2.2 关闭防火墙／selinux哦，不然后期同步数据节点同步会有问题

2.3 删除或移动掉/etc/my.cnf

3.1 几个重要的配置文件及文件作用

3.1.1  /var/lib/mysql-cluster/config.ini   此文件是控制节点的主配置文件，

主要是定义数据节点的数据目录的的路径

3.1.2  /etc/my.conf 主配置文件，主要指定集群是谁，以及存放数据目录及启动时生成的mysql.sock文件

4.错误排查思路

4.1 如果要迁移数据目录一定务必先将mysql关闭，否则mysql.sock文件会报错重复

4.2 查看my.cnf 文件中数据目录位置，并将其下的所有文件都复制到你想存放的位置，

并且要严格按照my.cnf 配置文件里面的位置进行更改，否则会报错类似如下

Starting MySQL...The server quit without updating PID file (/datas/mysqld//hadoop02.pid).

4.3 登录mysql集群报错，没有生成sock文件，mysql.sock 已经更换位置，所以找不到咯

4.4  ./ndb_mgmd初始化集群控制节点时报错如下：

-- Could not determine which nodeid to use for this node. Specify it with --ndb-nodeid=

./ndb_mgmd -f /var/lib/mysql-cluster/config.ini  #重新加载一下就好

mysql -uroot -p

ERROR 2002 (HY000): Can't connect to local MySQL server through socket '/var/lib/mysql/mysql.sock' (2)

如果确认mysql服务正常运行，还提示文章标题的此错误，那就是“/etc/my.cnf”配置文件的问题了。

解决办法是修改“/etc/my.cnf”配置文件，在配置文件中添加“[client]”选项和“[mysql]”选项，

并使用这两个选项下的“socket”参数值，与“[mysqld]”选项下的“socket”参数值，指向的socket文件路径完全一致。如下：

[mysqld]

datadir=/storage/db/mysql

socket=/storage/db/mysql/mysql.sock

[client]

default-character-set=utf8

socket=/storage/db/mysql/mysql.sock

[mysql]

default-character-set=utf8

socket=/storage/db/mysql/mysql.sock

其中socket等于的路径就是socket文件的位置，我们只要修改my.cnf文件,告诉mysql，mysqldump

mysqladmin等命令，mysql服务的socket文件位置在哪里，然后重启mysqld服务即可。

5. mysql集群常用的命令及问题

5.1  控制节点：cd /usr/local/mysql/bin/

./ndb_mgmd  -f /var/lib/mysql-cluster/config.ini --initial

#仅第一次启动或重启过服务器时又或config.ini 改过用，其它时候只需./ndb_mgmd即可

./ndb_mgm                #进入集群客户端

show                         #查看集群有哪些节点及状态

shutdown                   #关闭集群

5.2  数据节点：

cd /usr/local/mysql/bin/

./ndbd  　　　　　　　 #加载连接控制节点，一般在控制节点show看不到时执行此脚本

三：mysql搭建细节：

1、数据节点和SQL节点

第一步 添加mysql用户和组，这是必需的。

groupadd mysql

useradd -g mysql mysql

第二步 开始安装，下载的版本是免编译的，复制过来就可以用了。

cd /var/tmp

tar -C /usr/local-zxvf mysql-cluster-gpl-7.1.9a-linux-i686-glibc23.tar.gz

cd /usr/localmv mysql-cluster-gpl-7.1.9a-linux-i686-glibc23.tar.gz mysql

第三步 在mysql修改目录权限，这也是必需的，不然第四步会报错的。

cd mysql

chown -R root .chown -R mysql data

chgrp -R mysql .

第四步 安装初始的数据库表

scripts/mysql_install_db --user=mysql

安装完成后，初始化数据库报错如下：

[root@localhost mysql]# ./scripts/mysql_install_db  --user=mysql

-bash: ./scripts/mysql_install_db: /usr/bin/perl: bad interpreter: No such file or

directory

貌似提示注释器错误，没有/usr/bin/perl文件或者档案，解决办法(安装perl跟perl-devel即可)：

执行  yum -y install perl perl-devel

第五步 设置mysql服务为开机自启动

cp support-files/mysql.server /etc/rc.d/init.d/mysqld

chmod +x /etc/rc.d/init.d/mysqld

chkconfig --add mysqld

第六步 启动mysql服务，如果报错请参考

service mysqld start

这七步，其它的服务器添加按照如上步骤即可添加数据节点和SQL节点了

2 管理节点：

cd mysql

cp bin/ndb_mgm*/usr/local/bin

cd /usr/local/bin

chmod +x ndb_mgm*

管理节点只要ndb_mgm和ndb_mgmd两个文件和一个配置文件即可，因此把这三个文件复制到那里，那里就是管理节点了。

ndb_mgmd是mysql cluster管理服务器，ndb_mgm是客户端管理工具，等一下会用到它们的。

到目前为止两个SQL节点两个数据节点和一个管理节点都安装完成了，但是还不能工作，得进行配置，把这几个节点联系在一起协同工作。

3、配置

1、数据节点和SQL节点

mysql服务启动时会默认加载/etc/my.cnf作为其配置文件，要将一个mysql服务器配置成一个数据节点和SQL节点也非常的简单，这是配置前的my.cnf的内容：

[mysqld]

datadir=/home/mysql

socket=/home/mysql/mysql.sock

symbolic-links=0

[client]

default-character-set=utf8

socket=/home/mysql/mysql.sock

[mysql]

default-character-set=utf8

socket=/home/mysql/mysql.sock

[mysqld]

ndbcluster

ndb-connectstring=192.168.1.201

[mysql_cluster]

ndb-connectstring=192.168.1.201

只要在内容结尾加上4行就将这个mysql服务器变成了一个数据节点和SQL节点。

ndbcluster   #运行NDB存储引擎#指定管理节点  以上两行声明其为SQL节点ndb-connectstring=192.168.1.252[mysql_cluster]#指定管理节点  以上两行声明其为数据节点ndb-connectstring=192.168.1.252

注意两台服务器都得这样配置。

4、管理节点

管理节点的配置复杂一点，在管理服务器/var/lib/mysql-cluster/目录中创建config.ini文件。

cd /var/lib

mkdir mysql-cluster

cd mysql-cluster

vim config.ini

在config.ini文件中添加以下内容：

[NDBD DEFAULT]NoOfReplicas=1#每个数据节点的镜像数量DataMemory=500M#每个数据节点中给数据分配的内存IndexMemory=300M#每个数据节点中给索引分配的内存[TCP DEFAULT]portnumber=2202#数据节点的默认连接端口[NDB_MGMD]#配置管理节点hostname=10.10.10.164datadir=/var/lib/mysql-cluster/#管理节点数据(日志)目录[NDBD]#数据节点配置hostname=10.10.10.164datadir=/usr/local/mysql/data/#数据节点目录[NDBD]hostname=10.10.10.165datadir=/usr/local/mysql/data/[MYSQLD]#SQL节点目录hostname=10.10.10.165[MYSQLD]hostname=10.10.10.166

[NDBD DEFAULT]：表示每个数据节点的默认配置在每个节点的[NDBD]中不用再写这些选项，只能有一个。

[NDB_MGMD]：表示管理节点的配置，只有一个。

[NDBD]：表示每个数据节点的配置，可以有多个。

[MYSQLD]：表示SQL节点的配置，可以有多个，分别写上不同SQL节点的IP地址，也可以什么都不写，

只保留一个空节点，表示任意一个IP地址都可以进行访问，此节点的个数表明了可以用来连接数据节点的SQL节点总数。

四、启动

1、管理节点

mysql cluster 需要各个节点都 进行启动后才可以工作，节点的启动顺序为管理节点->数据节点->SQL节点。首先启动管理节点

cd /usr/local/bin

./ndb_mgmd -f /var/lib/mysql-cluster/config.ini

命令行中的ndb_mgmd是mysql cluster的管理服务器，后面的-f表示后面的参数是启动的参数配置文件。如果在启动后过了几天又添加了一个数据节点，这时修改了配置文件启动时就必须加上--initial参数，不然添加的节点不会作用在mysql cluster中。

./ndb_mgmd -f /var/lib/mysql-cluster/config.ini --initial

启动时可能会报个WARNING,如WARNING  -- at line 7: [TCP] portnumber is deprecated，这个不用管。可以正常工作的。

2、数据节点

安装后第一次启动数据节点时要加上--initial参数，其它时候不要加，除非是在备份、恢复或配置变化后重启时。

/usr/local/mysql/bin/ndbd --initial

如果显示以下信息说明启动完成：

2010-12-31 12:48:03 [ndbd] INFO     -- Angel connected to '192.168.1.252:1186'

2010-12-31 12:48:03 [ndbd] INFO     -- Angel allocated nodeid: 3

3、SQL节点

service mysqld start

4、客户端管理

cd /usr/local/bin

./ndb_mgm

这时就进入到客户端，可以对mysql cluster进行各项操作，进入后会有ndb_mgm > 提示符出现，首先来查看各节点的连接情况，在ndb_mgm> 提示符下输入show：

ndb_mgm>show

ClusterConfiguration---------------------[ndbd(NDB)]2node(s)id=2@192.168.1.252(mysql-5.1.51ndb-7.1.9,Nodegroup:0,Master)id=3@192.168.1.52(mysql-5.1.51ndb-7.1.9,Nodegroup:1)[ndb_mgmd(MGM)]1node(s)id=1@192.168.1.252(mysql-5.1.51ndb-7.1.9)[mysqld(API)]2node(s)id=4@192.168.1.252(mysql-5.1.51ndb-7.1.9)id=5@192.168.1.52(mysql-5.1.51ndb-7.1.9)

可以看到各个节点已经连接上了，至此，mysql cluster配置完成。

五、关闭

mysql cluster的关闭也很简单，只需在ndb_mgm> 提示符下输入 shutdown即可，这时会显示各节点的关闭信息，再输入exit即可退出ndb_mgm管理，回到shell中。虽然mysql cluster 关闭了，但是SQL节点的mysql服务并不会停止的。接下来就可以做各种试验了。

六、在数据节点创建库和表能够同步到另一台数据节点服务器上，且一台挂掉另一台可以正常提供服务

6.1 在一台数据节点上测试

[root@localhost mysql]#  /etc/rc.d/init.d/mysqld status                //检验mysql是否运行

[root@localhost mysql]# /etc/rc.d/init.d/mysqld start                   //启动mysql

[root@localhost mysql]# /usr/local/mysql/bin/mysql -u root -p

Enter password:

mysql> show databases;

mysql> create database testdb2;

mysql> use testdb2;

mysql> CREATE TABLE td_test2 (i INT) ENGINE=NDB;

//这里必须指定数据库表的引擎为NDBCLUSTER，与配置文件中的名称相同

mysql> INSERT INTO td_test2() VALUES (1);

mysql> INSERT INTO td_test2() VALUES (152);

mysql> SELECT * FROM td_test2;

6.2 在登录另一台数据节点查看，是否有创建的库和表，完成后再逆向测试(再这台上创建库再另一台数据节点查看是否有)

6.3 停掉一台数据节点，在没停 的数据节点上创建数据，然后在开启停掉的数据节点，应该能同步过来才算perfect