Mysql双机热备（master-slave、master-master）

最新推荐文章于 2024-08-11 16:01:20 发布

weixin_34144450

最新推荐文章于 2024-08-11 16:01:20 发布

阅读量150

点赞数

文章标签：数据库运维数据结构与算法

原文链接：http://blog.51cto.com/511fly/590459

版权

Mysql主从热备（master-slave）
u 设备环境
Master:192.168.15.233
Slave:192.168.15.235

u mysql主服务器（master）配置

编辑配置文件/etc/my.cnf
server-id = 1
log-bin=mysql-bin
binlog-do-db=mobi
#需要备份的数据库名，如果备份多个数据库，重复设置这个选项即可
binlog-ignore-db=mysql
#不需要备份的数据库名，如果备份多个数据库，重复设置这个选项即可
binlog-ignore-db=test
log-slave-updates
#这个参数一定要加上，否则不会给更新的记录些到二进制文件里
slave-skip-errors
#是跳过错误，继续执行复制操作
（注：其他的一些参数需自行根据现实条件优化）

授权用户
mysql> grant replication slave,file on *.* to 'repl'@'192.168.15.235' identified by 'repl';
可在Slave上做连接测试: mysql -h 192.168.0.1 -u repl –prepl
（注：可连接，但仅有备份权限）

备份钱锁住master库表：
mysql> FLUSH TABLES WITH READ LOCK;

u Mysql 从服务器（slave）配置
注：双机备份要保持两台数据结构一致，最好全部一致，可以打包主的数据库传到从的机器上保持数据库的一致性
tar -zcvf mobi.tar.gz mobi (master上的操作)
scp -r -p 192.168.15.233:/usr/local/mysql/var/mobi.tar.gz /usr/local/mysql/var/
注意权限问题（chown -R mysql:mysql var）
编辑/etc/my.cnf
binlog-do-db=mobi
binlog-ignore-db=mysql
binlog-ignore-db=test
log-slave-updates
slave-skip-errors
master-connect-retry=60 #如果从服务器发现主服务器断掉，重新连接的时间差(秒)
设置连接MASTER MASTER_LOG_FILE为主库的File，MASTER_LOG_POS为主库的Position
============================
mysql> slave stop;
mysql> change master to
    -> master_host='192.168.15.233',
    -> master_user='repl,
    -> master_password='repl',
    -> master_log_file=' mysql-bin.000003',
-> master_log_pos=180;
mysql> slave start;

解锁主数据库表
mysql> UNLOCK TABLES;

操作完毕
u 测试双机热备
Slave数据库
mysql> show slave status\G
Slave_IO_Running: Yes
Slave_SQL_Running: Yes
此两项线程显示为yes则正常！

u 常见问题汇总
在从服务器上使用show slave status\G
Slave_IO_Running,为No,
tail -f /var/log/mysqld.log显示
110426 10:36:27 [ERROR] Error reading packet from server: Could not find first log file name in binary log index file ( server_errno=1236)
110426 10:36:27 [ERROR] Got fatal error 1236: 'Could not find first log file name in binary log index file' from master when reading data from binary log
………………………………………………………………….
master数据上执行：mysql> show master status;
可以看出slave数据库读取了错误的log文件
最有效的办法就是重启master数据库，查看最新二进制log文件，然后锁定库表，在slave上执行change master to……

网上搜取的经典错误汇总，感觉很全（个人比较懒，所以就cp上了）
附：一些错误信息的处理，主从服务器上的命令，及状态信息。
在从服务器上使用show slave status\G
Slave_IO_Running,为No,
则说明IO_THREAD没有启动，请执行start slave io_thread
Slave_SQL_Running为No
则复制出错,查看Last_error字段排除错误后执行start slave sql_thread
查看Slave_IO_State字段空 //复制没有启动
Connecting to master//没有连接上master
Waiting for master to send event//已经连上
主服务器上的相关命令：
show master status
show slave hosts
show logs
show binlog events
purge logs to 'log_name'
purge logs before 'date'
reset master(老版本flush master)
set sql_log_bin=
从服务器上的相关命令:
slave start
slave stop
SLAVE STOP IO_THREAD //此线程把master段的日志写到本地
SLAVE start IO_THREAD
SLAVE STOP SQL_THREAD //此线程把写到本地的日志应用于数据库
SLAVE start SQL_THREAD
reset slave
SET GLOBAL SQL_SLAVE_SKIP_COUNTER
load data from master
show slave status(SUPER,REPLICATION CLIENT)
CHANGE MASTER TO MASTER_HOST=, MASTER_PORT=,MASTER_USER=, MASTER_PASSWORD= //动态改变master信息
PURGE MASTER [before 'date'] 删除master端已同步过的日志
6.3.1 Master 同步线程状态
以下列出了master的 Binlog Dump 线程 State 字段中最常见的几种状态。如果在master上没有 Binlog Dump 线程，那么同步就没有在运行。
也就是说，没有slave连接上来。
Sending binlog event to slave
事件是由二进制日志构成，一个事件通常由更新语句加上其他信息。线程读取到一个事件并正发送到slave上。
Finished reading one binlog; switching to next binlog
读取完了一个二进制日志，正切换到下一个。
Has sent all binlog to slave; waiting for binlog to be updated
已经读取完全部未完成更新日志，并且全部都发送到slave了。它处于空闲状态，正等待在master上执行新的更新操作以在二进制日志中产生新
的事件，然后读取它们。
Waiting to finalize termination
当前线程停止了，这个时间很短。
6.3.2 Slave的I/O线程状态
以下列出了slave的I/O线程 State 字段中最常见的几种状态。从MySQL 4.1.1开始，这个状态在执行 SHOW SLAVE STATUS 语句结果的
Slave_IO_State 字段也会出现。这意味着可以只执行 SHOW SLAVE STATUS 语句就能了解到更多的信息。
Connecting to master
该线程证尝试连接到master上。
Checking master version
确定连接到master后出现的一个短暂的状态。
Registering slave on master
确定连接到master后出现的一个短暂的状态。
Requesting binlog dump
确定连接到master后出现的一个短暂的状态。该线程向master发送一个请求，告诉它要请求的二进制文件以及开始位置。
Waiting to reconnect after a failed binlog dump request
如果二进制日志转储(binary log dump)请求失败了(由于连接断开)，该线程在休眠时进入这个状态，并定期重连。重连的时间间隔由 --
master-connect-retry 选项来指定。
Reconnecting after a failed binlog dump request
该线程正尝试重连到master。
Waiting for master to send event
已经连接到master，正等待它发送二进制日志。如果master闲置时，这个状态可能会持续较长时间，如果它等待超过 slave_read_timeout 秒
，就会发生超时。这时，它就会考虑断开连接，然后尝试重连。
Queueing master event to the relay log
已经读取到一个事件，正把它拷贝到中继日志中以备SQL线程处理。
Waiting to reconnect after a failed master event read
读日志时发生错误(由于连接断开)。该线程在重连之前休眠 master-connect-retry 秒。
Reconnecting after a failed master event read
正尝试重连到master。当连接确定后，状态就变成 Waiting for master to send event。
Waiting for the slave SQL thread to free enough relay log space
relay_log_space_limit 的值非零，中继日志的大小总和超过这个值了。I/O线程等待SQL线程先处理中继日志然后删除它们以释放足够的空间
。
Waiting for slave mutex on exit
当前线程停止了，这个时间很短。
6.3.3 Slave的SQL线程状态
以下列出了slave的SQL线程 State 字段中最常见的几种状态：
Reading event from the relay log
从中继日志里读到一个事件以备执行。
Has read all relay log; waiting for the slave I/O thread to update it
已经处理完中继日志中的全部事件了，正等待I/O线程写入更新的日志。
Waiting for slave mutex on exit
当前线程停止了，这个时间很短。
--------------
常见的一些问题：
一.从库SLAVE启动问题
由于一些错误操作导致 CHANGE MASTER 和 SLAVE 服务无法启动，系统报错如下：
*****************************************************************
Could not initialize master info structure; more error messages can be found in the MySQL error log.
*****************************************************************
无法初始化master info结构，MySQL错误日志记录了更详细的错误信息。
解决方法：
1、查看MySQL错误日志，如：同步的上一个Position是多少，很多情况下无法启动服务是由于mysql识别的同步始终停留在上一个Position上。
2、查看master.info和relay-log.info，master.info 记录MASTER相关信息，relay-log.info 记录当前同步日志信息。
3、停止myslq服务，删除master.info和relay-log.info。
4、启动mysql服务。
5、重新CHANGE MASTER，重新启动SLAVE服务。
二.主从不能同步
show slave status;报错:Error xxx dosn't exist
且show slave status\G:
Slave_SQL_Running: NO
Seconds_Behind_Master: NULL
解决方法:
stop slave;
set global sql_slave_skip_counter =1 ;
start slave;
之后Slave会和Master去同步主要看:
Slave_IO_Running: Yes
Slave_SQL_Running: Yes
Seconds_Behind_Master是否为0，0就是已经同步了
2,还需要做的一些优化与监视:
show full processlist; //查看mysql当前同步线程号
skip-name-resolve       //跳过dns名称查询，有助于加快连接及同步的速度
max_connections=1000    //增大Mysql的连接数目，(默认100)
max_connect_errors=100 //增大Mysql的错误连接数目,(默认10)
查看日志一些命令
1, show master status\G;
在这里主要是看log-bin的文件是否相同。
show slave status\G;
在这里主要是看:
Slave_IO_Running=Yes
Slave_SQL_Running=Yes
如果都是Yes,则说明配置成功.
2,在master上输入show processlist\G;
mysql> SHOW PROCESSLIST\G
*************************** 1. row ***************************
Id: 2
User: root
Host: localhost:32931
db: NULL
Command: Binlog Dump
Time: 94
State: Has sent all binlog to slave; waiting for binlog to
be updated
Info: NULL
如果出现Command: Binlog Dump,则说明配置成功.
stop slave    #停止同步
start slave    #开始同步，从日志终止的位置开始更新。
SET SQL_LOG_BIN=0|1 #主机端运行，需要super权限，用来开停日志，随意开停，会造成主机从机数据不一致，造成错误
SET GLOBAL SQL_SLAVE_SKIP_COUNTER=n # 客户端运行，用来跳过几个事件，只有当同步进程出现错误而停止的时候才可以执行。
RESET MASTER #主机端运行,清除所有的日志，这条命令就是原来的FLUSH MASTER
RESET SLAVE   #从机运行，清除日志同步位置标志，并重新生成master.info
虽然重新生成了master.info,但是并不起用，最好，将从机的mysql进程重启一下，
LOAD TABLE tblname FROM MASTER #从机运行，从主机端重读指定的表的数据，每次只能读取一个，受timeout时间限制，需要调整timeout时间。执行这个命令需要同步账号有 reload和super权限。以及对相应的库有select权限。如果表比较大，要增加net_read_timeout 和 net_write_timeout的值
LOAD DATA FROM MASTER #从机执行，从主机端重新读入所有的数据。执行这个命令需要同步账号有reload和super权限。以及对相应的库有select权限。如果表比较大，要增加net_read_timeout 和 net_write_timeout的值
CHANGE MASTER TO master_def_list #在线改变一些主机设置，多个用逗号间隔,比如
CHANGE MASTER TO
MASTER_HOST='master2.mycompany.com',
MASTER_USER='replication',
MASTER_PASSWORD='bigs3cret'
MASTER_POS_WAIT() #从机运行
SHOW MASTER STATUS #主机运行，看日志导出信息
SHOW SLAVE HOSTS #主机运行，看连入的从机的情况。
SHOW SLAVE STATUS (slave)
SHOW MASTER LOGS (master)
SHOW BINLOG EVENTS [ IN 'logname' ] [ FROM pos ] [ LIMIT [offset,] rows ]
PURGE [MASTER] LOGS TO 'logname' ; PURGE [MASTER] LOGS BEFORE 'date'
show binlog events; #查看主库二进制日志文件内容：
注意：
1.主辅库同步主要是通过二进制日志来实现同步的。
2.在启动辅库的时候必须先把数据同步，并删除日志目录下的：master.info文件。因为master.info记录了上次要连接主库的信息，如果不删除，即使my.cnf里进行了修改，也不起作用。因为读取的还是master.info文件里的信息。

Mysql主主备份（master-master）
设备环境
Master-A:192.168.15.233
Master-B:192.168.15.235

u master服务器上授权用户
Master-A
mysql> grant replication slave,file on *.* to 'repl'@'192.168.15.235' identified by 'repl';
Master-B
mysql> grant replication slave,file on *.* to 'repl'@'192.168.15.233' identified by 'repl';

u 配置master的my.cf文件
配置master-A的my.cf文件
server-id = 1
log-bin=mysql-bin
binlog-do-db=mobi
binlog-ignore-db=mysql
binlog-ignore-db=test
log-slave-updates
slave-skip-errors
sync_binlog=1
auto_increment_increment=2
auto_increment_offset=1
配置master-B的my.cf文件
server-id = 2
log-bin=mysql-bin
binlog-do-db=mobi
binlog-ignore-db=mysql
binlog-ignore-db=test
log-slave-updates
slave-skip-errors
sync_binlog=1
auto_increment_increment=2
auto_increment_offset=2
参数说明：
多主互备和主从复制有一些区别，因为多主中都可以对服务器有写权限，所以设计到自增长重复问题
出现的问题（多主自增长ID重复）
1:首先我们通过A,B的test表结构
2:掉A，在B上对数据表test(存在自增长ID)执行插入操作，返回插入ID为1
3:后停掉B，在A上对数据表test(存在自增长ID)执行插入操作，返回的插入ID也是1
4:然后我们同时启动A,B，就会出现主键ID重复
解决方法：
我们只要保证两台服务器上插入的自增长数据不同就可以了
如：A查奇数ID，B插偶数ID，当然如果服务器多的话，你可以定义算法，只要不同就可以了
在这里我们在A,B上加入参数，以实现奇偶插入
A：my.ini上加入参数
auto_increment_offset = 1
auto_increment_increment = 2
这样A的auto_increment字段产生的数值是：1, 3, 5, 7, …等奇数ID了
B：my.ini上加入参数
auto_increment_offset = 2
auto_increment_increment = 2
这样B的auto_increment字段产生的数值是：2, 4, 6, 8, …等偶数ID了
可以看出，你的auto_increment字段在不同的服务器之间绝对不会重复，所以Master-Master结构就没有任何问题了。当然，你还可以使用3台，4台，或者N台服务器，只要保证auto_increment_increment = N 再设置一下auto_increment_offset为适当的初始值就可以了，那样，我们的MySQL可以同时有几十台主服务器，而不会出现自增长ID重复。
在这里我们说的是2台MYSQL服务器，你也可以扩展到多台，实现方法类似
A -> B -> C-> D ->A
这样一个环形的备份结构就形成了，最后可要记住自增长ID（主键）要设计好哦，否则会出错的。

u master-A 和master-B锁表库
mysql> flush tables with read lock\G （锁库表）
master-A 和master-B下分别显示库信息
master-A：
mysql> show master status;
+------------------+----------+--------------+------------------+
| File             | Position | Binlog_Do_DB | Binlog_Ignore_DB |
+------------------+----------+--------------+------------------+
| mysql-bin.000003 |      180 |              |            |
+------------------+----------+--------------+------------------+
1 row in set (0.00 sec)
master-B：
mysql> show master status;
+------------------+----------+--------------+------------------+
| File             | Position | Binlog_Do_DB | Binlog_Ignore_DB |
+------------------+----------+--------------+------------------+
| mysql-bin.000002 |      189|              |            |
+------------------+----------+--------------+------------------+
u 设置master change to
设置连接MASTER MASTER_LOG_FILE为对方库的File，MASTER_LOG_POS为对方库的Position
master-A：
------------------------------
mysql> slave stop;
mysql> change master to
    -> master_host='192.168.15.233',
    -> master_user='repl,
    -> master_password='repl',
    -> master_log_file=' mysql-bin.000002',
-> master_log_pos=189;
mysql> slave start;

master-B：
mysql> slave stop;
mysql> change master to
    -> master_host='192.168.15.253',
    -> master_user='repl,
    -> master_password='repl',
    -> master_log_file=' mysql-bin.000002',
-> master_log_pos=189;
mysql> slave start;

测试完成！

转载于:https://blog.51cto.com/511fly/590459

weixin_34144450

关注

0
点赞
踩
2

收藏

觉得还不错? 一键收藏
0
评论
Mysql双机热备（master-slave、master-master）

Mysql主从热备（master-slave）u设备环境Master:192.168.15.233Slave:192.168.15.235umysql主服务器（master）配置编辑配置文件/etc/my.cnfserver-id = 1log-bin=mysql-binbinlog-do-d...
复制链接

扫一扫