先配置一个mysql数据库作为从库等待使用(要求从库的版本不能比主库低,可以相同版本,防止复制时因为版本对字段要求不同导致无法复制,建议使用安装版,免安装版配置信息总是不识别,这个原因已找到,因为免安装版,每一个参数所在的位置是有要求的,放的位置不对就会无效,但是我懒得去找这些配置应该都放在哪里)
主库配置操作:
1、配置主库的各项配置信息
打开my.ini配置文件修改如下几个参数
server-id 自定义一个数字,可以使用默认的1,但是要求配置从库的时候,从库的不能和主库一样
binlog-do-db 要复制的数据库的名字 如果要复制多个库,如下案例所示
binlog-do-db=test
binlog-do-db=794_20210816_test_mysql
2、重启一下主库
停止主库:net stop 服务名
启动主库:net start服务名
3、在主库上创建一个账户,主要作用是用于复制主库的表数据
创建账户
CREATE USER 'slave'@'localhost' IDENTIFIED BY '121212';
授权,复制权限
grant replication slave on *.* to 'slave'@'localhost'
'slave' :默认就创建这个账户,好记
'localhost':要复制到的数据库IP ,如果都是本地就是localhost,如果不是例如122.195.129.243即可
'121212':设置账户的密码
4、接下来在主库上查询一下,看一下是否账户创建成功
select user,host from mysql.user;
结果如下图所示:
Slave账户是我向本地从库复制数据
Slave_2账户是我向243服务器复制数据
5、然后查询一下主库当前的file与log位置
show master status;
如下图所示,我们需要记住file(当前运行的数据库文件)以及position(当前运行的log的位置)
从库配置操作:
要求从库能ping的通主库的IP否则没用
1、然后配置从库配置文件my.ini
从库只需要配置一个server-id即可(注意不能和主库的相同否则无效)
2、配置完成后重启从库,然后执行如下代码,进行连通主库
change master to
master_host="localhost",
master_user="slave",
master_password="121212",
master_log_file="binlog.000004",
master_log_pos=4587;
# master_host 是访问主库IP
# master_user 是你在主库创建的那个账户
# master_password 是密码
# master_log_file 与 master_log_pos 是我们之前主库用show master status 查询到的File与Position
3、然后开启主从功能
start slave;
4、查询主从是否配置成功
show slave status
如果下图所框都是YES说明配置成功了,否则就是配置失败,失败的原因后面会有部分排查
可能遇到的问题:
Slave_IO_Running:NO
主从库的Server-id相同
Slave_IO_Running:Connecting
主从库通讯不上
Slave_SQL_Running:NO
1、两个数据库导入数据有差距,比如主库操作了A表,但是从库没有A表,或者从库A表的主键已经被声明了,导致无法复制。
解决办法(1)添加忽略异常,如果发生异常就跳过该复制,但是会导致这条数据不准确
从库配置文件上加其中一句即可(但是我加完之后就不会在出现错误信息了。。。所以又去了)
#slave-skip-errors=1062,1053,1146 #跳过指定error no类型的错误
#slave-skip-errors=all #跳过所有错误
解决办法(2)导出一份主库表结构与数据,然后导入从库,重新开启一次主从配置
stop slave;
change master to master_log_file="WIN-OGQ0QRP59E2-bin.000009", master_log_pos=156;(此方法参照从库方法2的修改,需要改哪个参数就加哪个)
start slave;
需要特别注意的地方:
如果主库每时每刻都在插入数据或者不定时插入数据,如果条件允许,尽量可以停一下主库写入功能,先配置主库,然后重启,重启完成之后清除一下主库的log(命令是flush logs;),然后查询一下主库当前的配置情况(命令是show master status),然后导出一下主库,这样我们就获取了我们导出的主库时候的文件以及logId。然后放开主库读写功能。
配置从库的时候,只需要导入主库的数据,配置从库配置的时候填写logId,mysql会自动将中间这段时间的logId填补上的
2021-08-24
今天遇到一个问题,我这边修改主库的一个用户,结果从库就停了,原因是因为从库没有这个用户,但是我设置的是只拉取a表,原则上是不会拉取存放用户信息的mysql表。经过排查发现原来,主库的log内会存入主库的所有操作,从库也会拉取日志内的所有节点。
所以有两个解决办法,一个是在从库配置文件内加,复制的时候涉及mysql其他表的操作一律不执行
(我也不知道语句对不对,解决问题之后忘记存了,懒得去百度)
replicate_ignore_db = mysql
replicate_ignore_db = information_schema
replicate_ignore_db = performance_schema
replicate_ignore_db = sakila
replicate_ignore_db = sys
另一个办法是在主库配置文件内加。。。这个没试过,不知道好不好用
binlog-do-db = 816_20201016data_fy
binlog-ignore-db = mysql
binlog-ignore-db = information_schema
binlog-ignore-db = performance_schema
binlog-ignore-db = mysql
binlog-ignore-db = sys
2021-08-25
关于主从同步,如果主库不能停,我有一个大胆的想法(对于那种已经上线的项目,只是自己单纯的想法)。
首先呢,主库一直在写入数据,而且主库最多只能停止一次,并且不超过2分钟的情况,又需要配置主从库有什么办法
其实对于主库操作有一个最重要的步骤就是配置要复制数据库,也就是主库配置的第一步,然后其实就可以没有主库什么事了。
我们完全可以,把主库的配置文件修改一下,然后重启主库,这时候我们记录一下,重启之后的主库file和logId.
从库想和主库连通需要数据一致,但是呢从库有一个操作是跳过错误。所以我就想,我只要随便记住某一个点的主库状态信息,能不能通过跳过错误,直接一直备份到跟主库的logID一致之后,我再将配置文件改成不跳过错误,继续执行后续操作。
但是有一个问题。如果数据库差距较大或者数据量很大可能会出现问题吧。咨询过这个属于比较下乘的方法但是也是有可行性的。(还有就是通过第三方工具慢慢同步数据)
2021-08-28
昨天跟小伙伴争辩了一顿,主从配置,其目的是减轻主库压力,我们公司手里有一个正在运行的大的项目,老板的原始想法是,增改删都用主库,查询用从库。但是这就有一个关于数据延迟的问题。比如主库存了,立马去从库查,小批量的是可行的,但是如果一秒执行1000条的时候或者更多就不行了。大约1000条会丢失300条(加了执行查询延迟100毫秒也不行),配置了各种减轻缓存的方法都无效。
其实主从不论怎么改都是有延迟的,哪怕在一个服务器也不行。主从配置到项目,可以理解为关键查询还是主库查询,但是关于统计一类不需要极度精准的查询可以用从库查询。