集群技术,一主一从的部署和原理方式

集群概述

所谓集群,就是将多台服务器集中在一起,同时处理用户对服务器的请求

比如,我们现在开启的这一台mysql服务器,可以同时处理1000个用户的请求,那么我们开启两个这样的服务器,就可以同时处理2000

数据库集群之间最重要的是数据一致性

Replication

集群图示:

请添加图片描述
类型:

  • M

  • M-S

  • M-S-S…

  • M-M

  • M-M-S-S

    M表示主服务器

    S表示从服务器

    需要从主服务器备份到从服务器,即主从复制

    我们需要通过配置,完成自动的主从复制

原理图示:

图示1
请添加图片描述
概念:

  1. 在主库上把数据更改(DDL DML DCL)记录到二进制日志(Binary Log)中。
  2. 从库和主库连接,此时从库会开启io现成和sql线程
  3. 备库I/O线程将主库上的日志复制到自己的中继日志(Relay Log)中。
  4. 备库SQL线程读取中继日志中的事件,将其重放到备库数据库之上。

集群案例

环境
  • 环境三部曲

    • 1.全新服务器-互相通信
    • 2.全新安装mysql8.0-分别安装
    • 3.配置域名解析

配置静态ip

  • 2台服务器ip分别是

  • 192.168.145.141

  • 192.168.145.142

  • 配置mysql8.0yum源头

    • 下载安装包
    • yum源 几台服务器都有,其中19,29,39,49安装yum源
    • mysql8.0安装包,19,29,39,49安装
  • 141服务器操作如下:

在19服务器下操作:

 wget https://dev.mysql.com/get/mysql80-community-release-el9-1.noarch.rpm
 yum install  mysql80-community-release-el9-1.noarch.rpm

 yum install   mysql-community-server  --downloadonly -y
find / -iname "*mysql*.rpm"  //查找包的位置

cd /var/cache/dnf/mysql80-community-22d3d3ecd3d92106/packages/

scp ./*.rpm 192.168.145.142:~/

141安装mysql
yum install -y *.rpm
启动数据库
systemctl start mysqld


grep 'password' /var/log/mysqld.log
mysqladmin -uroot -p'复制的密码' password "Lixinyi@123"

mysql -uroot -p'Lixinyi@123';
show databases;

其他同理

142:

  [root@localhost ~]# ls
  anaconda-ks.cfg                                         mysql-community-common-8.0.38-1.el9.x86_64.rpm
  install_mysql.sh                                        mysql-community-icu-data-files-8.0.38-1.el9.x86_64.rpm
  mysql-community-client-8.0.38-1.el9.x86_64.rpm          mysql-community-libs-8.0.38-1.el9.x86_64.rpm
  mysql-community-client-plugins-8.0.38-1.el9.x86_64.rpm  mysql-community-server-8.0.38-1.el9.x86_64.rpm
  
  [root@localhost ~]# chmod +x install_mysql.sh
  //开始安装
  [root@localhost ~]# ./install_mysql.sh
  
  
一主一从(M-S)(1)
  • 主(master1)

    • 部署一台新mysql服务器。准备好域名解析。

    • 准备数据1(验证主从同步使用)

      • master1

         create database master1db;
         create table master1db.master1tab(name char(50));
         insert into master1db.master1tab values (1111);
         insert into master1db.master1tab values (2222);
        
    • 开启二进制日志

      • master1

         [root@localhost ~]# vim /etc/my.cnf
         log_bin
         server-id=1
         [root@localhost ~]# systemctl restart mysqld
         重启生效
         
         ---------------------------------------------
         log_bin   开启二进制日志
         server-id 集群中二进制的编号 不要重复
        
    • 创建复制用户

      • master1
创建用户:
mysql> create user  'rep'@'192.168.145.%' identified by 'Lixinyi@123';
 
 授权:
 mysql>grant replication slave, replication client on *.* to 'rep'@'192.168.145.%' ;
下面是这条命令的详细解释:

grant: 这是SQL的关键字,用于授权用户特定的权限。
replication slave: 这个权限允许用户请求在主服务器复制二进制日志事件到从服务器,这通常用于MySQL的主从复制功能。

replication client: 这个权限允许用户查询主服务器或从服务器的状态,以及执行SHOW SLAVE 
STATUS和SHOW MASTER STATUS等命令。

on *.*: 这表示对所有数据库和所有表进行授权。
to ‘rep’@‘192.168.229.%’: 这表示将权限授予用户名为rep的用户,并且这个用户可以从192.168.229.*这个IP地址范围内的任何主机连接到MySQL服务器。这里的%是一个通配符,表示匹配该IP段内的任何具体IP地址。

简而言之,这条命令的意思是:“为从192.168.229.*这个IP地址范围内的任何主机连接到MySQL服务器的rep用户授予复制从服务器和复制客户端的权限”。这通常用于设置MySQL的主从复制功能,其中rep用户将用于从主服务器复制数据到从服务器。

备份master数据库的数据

  • master1

    刚才是先添加的数据,然后才开启的二进制日志。二进制日志中没有记录一开始添加数据的记录。

    所以需要我们对之前的数据先进行一个手动备份

    退出mysql登陆页
    
    mysqldump -uroot -p'Lixinyi@123' --all-databases --single-transaction --master-data=2 --flush-logs > `date +"%F-%H"`-mysql-all.sql
    
    
    # ls
    2024-07-15-14-mysql-all.sql 
    
    注释:
    --single-transaction  保持服务的可以用性,服务保持开机状态
    master-data=2         帮我开启记录 记录二进制节点的位置
    --flush-logs          刷新二进制日志  对二进制日志进行分割
    

    发送给另一台主机:

     scp -r ./2024-07-15-14-mysql-all.sql    192.168.145.142:/tmp
    
    

    观察二进制日志分割点:

     vim ./2024-07-15-14-mysql-all.sql
    
    查看第24行:
    CHANGE MASTER TO MASTER_LOG_FILE='localhost-bin.000002', MASTER_LOG_POS=157;
    
      • 准备数据2(验证主从同步使用)

      ​ 刚刚备份的是之前开始的数据,我们现在模拟真实的生产环境,在备份后,又产生了新的数据

      • master1

        mysql -uroot -p'Lixinyi@123'
        
        insert into master1db.master1tab values (33333333);
        insert into master1db.master1tab values (44444);
        
  • 从(master2)

    • 测试rep用户是否可用

      • master2

        部署数据库应用

        mysql -h master1 -urep -p'Lixinyi@123'
        
        用授权的账号登陆
        
        • 预防账户问题,防火墙、selinux都要关闭。
    • 启动服务器序号

      [root@localhost ~]#vim /etc/my.cnf
      不用在从设备上开启二进制日志,没有人向master2请求日志。
      
      server-id=2
      
      服务器ID是必须设置的。
      
      [root@localhost ~]# systemctl restart mysqld
      
      mysql -uroot -p'Lixinyi@123'
       测试服务器是否修改正确。能否正常登陆。
      
    • 手动同步数据

       mysql>  set sql_log_bin=0;
       mysql>  source /tmp/2024-07-15-03-mysql-all.sql
      
      注释:
       set sql_log_bin=0;  设置当前数据库服务器的二进制日志临时关闭
       
       source /tmp/2024-07-15-14-mysql-all.sql  根据日志文件还原数据库
      

      验证是否正确完成备份:

       
      mysql> show databases;
      +--------------------+
      | Database           |
      +--------------------+
      | information_schema |
      | master1db          |
      | mysql              |
      | performance_schema |
      | sys                |
      +--------------------+
      5 rows in set (0.00 sec)
      
      
      
      mysql> select * from master1db.master1tab;
      +------+
      | name |
      +------+
      | 1111 |
      | 2222 |
      +------+
      
      
    • 设置主服务器

      配置主从关系

mysql> change master to
master_host='192.168.145.142',
master_user='rep',
master_password='Lixinyi@123',
master_log_file='localhost-bin.000002',
master_port=3306,
master_log_pos=157;


ERROR 1064 (42000): You have an error in your SQL syntax; check the manual that corresponds to your MySQL server version for the right syntax to use near 'master to master_host='master1',master_user='rep',master_password='Lixinyi@123' at line 1

  • 原因:

    在MySQL 8.0中,CHANGE MASTER TO 语句用于配置复制。但是,从MySQL 8.0.14开始,该语句已经被弃用,并建议使用新的语句 CHANGE REPLICATION SOURCE TO

      CHANGE REPLICATION SOURCE TO
        SOURCE_HOST = '192.168.145.142',
        SOURCE_USER = 'rep',
        SOURCE_PASSWORD = 'Lixinyi@123',
        SOURCE_PORT = 3306,
        SOURCE_LOG_FILE = 'localhost-bin.000002',
        SOURCE_LOG_POS = 158;
    
      change replication source to
        source_host = '192.168.145.142',
        source_user = 'rep',
        source_password = 'Lixinyi@123',
        source_port = 3306,
        source_log_file = 'localhost-bin.000002',
        source_log_pos = 158;
    
      mysql> change replication source to source_host = '192.168.145.142',source_user = 'rep',source_password = 'Lixinyi@123',source_port = 3306,source_log_file = 'localhost-bin.000002',source_log_pos = 158;
      
    注意,二进制日志的位置,应该参照主服务器备份时生成的新位置。
    
    
    
  • 启动从服务器的复制线程

    mysql> start slave;
    
    
  • 查看启动状态(IO-YES/SQL-YES)

    show slave status\G;
    
    mysql> show slave status\G;
    *************************** 1. row ***************************
                   Slave_IO_State: Waiting for master to send event
                      Master_Host: master1
                      Master_User: rep
                      Master_Port: 3306
                    Connect_Retry: 60
                  Master_Log_File: localhost-bin.000003
              Read_Master_Log_Pos: 154
                   Relay_Log_File: localhost-relay-bin.000003
                    Relay_Log_Pos: 375
            Relay_Master_Log_File: localhost-bin.000003
                 Slave_IO_Running: Yes
                Slave_SQL_Running: Yes
    
    

    请添加图片描述

  • 从服务器查看数据库,看数据是否一致

    mysql> select * from master1db.master1tab;
    +----------+
    | name     |
    +----------+
    | 1111     |
    | 2222     |
    | 33333333 |
    | 44444    |
    +----------+
    
    3333,4444就是主从集群同步过来的数据
    
    
  • 返回主服务器(master1)更新数据,在从服务器(master2)观察是否同步。

    master1主服务器添加数据
    
    mysql> insert into master1db.master1tab values (55555);
    
    
    从master2查看数据:
    
    mysql> select * from master1db.master1tab;
    +----------+
    | name     |
    +----------+
    | 1111     |
    | 2222     |
    | 33333333 |
    | 44444    |
    | 55555    |
    +----------+
    已经同步了
    

    注意:

    如果从服务器添加了数据,主服务器是不会同步的

    不要这样操作,不要操作

    因为主从复制的原理,就是从服务器来同步主服务器,如果从服务器擅自添加数据,添加的数据就属于脏数据

    了解,不要去实验操作!!!!!

  • 21
    点赞
  • 9
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值