consul+mysql高可用部署

于 2021-11-01 15:01:09 发布
阅读量520 收藏 1
点赞数
分类专栏： 服务发现 文章标签： consul mysql 数据库
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/dbone_88888888/article/details/121080416
版权

1.集群规划

IP类型机房说明
10.242.178.130consul server新港Consul v1.10.2
10.242.178.131consul server新港Consul v1.10.2
10.242.178.129consul server新港Consul v1.10.2
10.238.199.17mysql+consul client新港mysql 5.7.19-17
10.238.199.18mysql+consul client新港mysql 5.7.19-17

2.安装部署

2.1.consul

consul安装部署参考"consul安装部署.md"

2.2.mysql

mysql安装部署参考mysqlrds安装部署手册

3.服务注册

3.1.主从关系

IP主从
10.238.199.17主
10.238.199.18从

3.2.主库服务注册

10.238.199.17 /opt/consul/etc/client.json

{
"data_dir": "/opt/consul/data",
"enable_script_checks": true,
"bind_addr": "10.238.199.17",
"client_addr": "0.0.0.0",
"retry_join": ["10.242.178.129","10.242.178.130","10.242.178.131"],
"retry_interval": "5s",
"rejoin_after_leave": true,
"start_join": ["10.242.178.129","10.242.178.130","10.242.178.131"],
"node_name": "10.238.199.17",
"datacenter": "xingang",
"primary_datacenter":"xingang",
"encrypt": "PwGyXsuuc6w0Jx6noxi6PwrN6GeH1HHYBpZ4E77mEwk=",
"log_file":"/opt/consul/log/",
"log_rotate_duration":"24h",
"log_rotate_bytes":10000000,
"log_rotate_max_files":100,
"encrypt_verify_incoming": true,
"encrypt_verify_outgoing": true,
"enable_local_script_checks":true,
"acl":{
"tokens": {
      "default":"7a8ea281-c9a2-b559-e3df-578d46752f70"
    }
}
}

10.238.199.17 /opt/consul/etc/services.json

{
"services": [
    {
        "name": "mysqlrw",
        "id": "10.238.199.17_rw",
        "address": "10.238.199.17",
        "port": 3306, 
        "check": { 
            "id":"10.238.199.17_rw_ck",
            "name":"check write domain",
            "tcp":"10.238.199.17:3306",
            "interval": "5s",
            "timeout": "1s"
        }   
    },
    {
        "name": "mysqlro",
        "id": "10.238.199.17_ro",
        "address": "10.238.199.17",
        "port": 3306, 
        "check": { 
            "id":"10.238.199.17_ro_ck",
            "name":"check readonly domain",
            "args":["/bin/bash","/opt/consul/bin/check.sh"],
            "interval": "5s",
            "timeout": "1s"
        }   
    }
    
]
}

10.238.199.17 /opt/consul/bin/check.sh

探测只读域名A记录是否除自己外有无其它A记录且本地3306端口正常，是:返回0(生效自己) 否:返回非0(不生效自己)

rs=`dig +nocmd mysqlro.service.sndbxingang A @10.242.178.129 +noall +answer +time=1 +tries=1|grep mysqlro|grep -v 10.238.199.17|wc -l`
rs1=`netstat -anp|grep 3306|grep LISTEN|wc -l`
if [ $rs == '0' ] && [ $rs1 == '1' ]
then
exit 0
fi
exit 10

3.3.从库服务注册

10.238.199.18 /opt/consul/etc/client.json

{
"data_dir": "/opt/consul/data",
"enable_script_checks": true,
"bind_addr": "10.238.199.18",
"client_addr": "0.0.0.0",
"retry_join": ["10.242.178.129","10.242.178.130","10.242.178.131"],
"retry_interval": "5s",
"rejoin_after_leave": true,
"start_join": ["10.242.178.129","10.242.178.130","10.242.178.131"],
"node_name": "10.238.199.18",
"datacenter": "xingang",
"primary_datacenter":"xingang",
"encrypt": "PwGyXsuuc6w0Jx6noxi6PwrN6GeH1HHYBpZ4E77mEwk=",
"log_file":"/opt/consul/log/",
"log_rotate_duration":"24h",
"log_rotate_bytes":10000000,
"log_rotate_max_files":100,
"encrypt_verify_incoming": true,
"encrypt_verify_outgoing": true,
"enable_local_script_checks":true,
"acl":{
"tokens": {
      "default":"7a8ea281-c9a2-b559-e3df-578d46752f70"
    }
}
}

10.238.199.18 /opt/consul/etc/services.json

{
"services": [
    {
        "name": "mysqlro",
        "id": "10.238.199.18_ro",
        "address": "10.238.199.18",
        "port": 3306, 
        "check": { 
            "id":"10.238.199.18_ro_ck",
            "name":"check readonly domain",
            "tcp":"10.238.199.18:3306",
            "interval": "5s",
            "timeout": "1s"
        }   
    }
    
]
}

3.4.域名测试

读写域名

[root@sndspgdpredb352 consul]# dig +nocmd  mysqlrw.service.xingang.sndbxingang @10.242.178.132 +noall +answer
mysqlrw.service.xingang.sndbxingang. 0 IN A 10.238.199.17

只读域名

[root@sndspgdpredb352 consul]# dig +nocmd  mysqlro.service.xingang.sndbxingang @10.242.178.131 +noall +answer
mysqlro.service.xingang.sndbxingang. 0 IN A 10.238.199.18

4.在线切换

1.停止主库consul client --读写域名失效

[root@sndspgdpredb353 ~]# ps -ef|grep -i consul
root     29264     1  0 11:25 ?        00:00:30 bin/consul agent -config-dir=etc/
root     29365 27700  0 14:55 pts/0    00:00:00 grep -i consul
[root@sndspgdpredb353 ~]# kill -9 29264
[root@sndspgdpredb353 ~]# dig +nocmd  mysqlrw.service.xingang.sndbxingang @10.242.178.131 +noall +answer

2.mha切换主从 --使用rds脚本模拟mha切换

[root@sndspgdpredb353 ~]# mysql_ha_online_switch -n

3.修改新主/opt/consul/etc/services.json文件并reload --读写只读域名指向新主

[root@sndspgdpredb352 consul]# cat /opt/consul/etc/services.json 
{
"services": [
    {
        "name": "mysqlrw",
        "id": "10.238.199.18_rw",
        "address": "10.238.199.18",
        "port": 3306, 
        "check": { 
            "id":"10.238.199.18_rw_ck",
            "name":"check write domain",
            "tcp":"10.238.199.18:3306",
            "interval": "5s",
            "timeout": "1s"
        }   
    },
    {
        "name": "mysqlro",
        "id": "10.238.199.18_ro",
        "address": "10.238.199.18",
        "port": 3306, 
        "check": { 
            "id":"10.238.199.18_ro_ck",
            "name":"check readonly domain",
            "args":["/bin/bash","/opt/consul/bin/check.sh"],
            "interval": "5s",
            "timeout": "1s"
        }   
    }
    
]
}
[root@sndspgdpredb352 consul]# bin/consul reload
[root@sndspgdpredb352 consul]# dig +nocmd  mysqlrw.service.xingang.sndbxingang @10.242.178.131 +noall +answer
mysqlrw.service.xingang.sndbxingang. 0 IN A 10.238.199.18
[root@sndspgdpredb352 consul]# dig +nocmd  mysqlro.service.xingang.sndbxingang @10.242.178.131 +noall +answer
mysqlro.service.xingang.sndbxingang. 0 IN A 10.238.199.18

4.修改老主/opt/consul/etc/services.json文件并启动client --只读域名指向老主

[root@sndspgdpredb353 consul]# cat  /opt/consul/etc/services.json 
{
"services": [
    {
        "name": "mysqlro",
        "id": "10.238.199.17_ro",
        "address": "10.238.199.17",
        "port": 3306, 
        "check": { 
            "id":"10.238.199.17_ro_ck",
            "name":"check readonly domain",
            "tcp":"10.238.199.17:3306",
            "interval": "5s",
            "timeout": "1s"
        }   
    }
    
]
}
[root@sndspgdpredb353 consul]# nohup bin/consul agent --config-dir=etc/ >/dev/null &
[1] 5708
nohup: ignoring input and redirecting stderr to stdout
[root@sndspgdpredb353 consul]# dig +nocmd  mysqlro.service.xingang.sndbxingang @10.242.178.131 +noall +answer
mysqlro.service.xingang.sndbxingang. 0 IN A 10.238.199.17

5.故障切换

5.1.从库宕机

从库:10.238.199.17 --宕机场景包括:1.数据库进程停止 2.服务器宕机(consul client失联)

  • 数据库进程停止 --只读域名A记录自动切换至主库

[root@sndspgdpredb353 consul]# dig +nocmd  mysqlro.service.xingang.sndbxingang @10.242.178.131 +noall +answer
mysqlro.service.xingang.sndbxingang. 0 IN A 10.238.199.18

  • 数据库进程启动 --只读域名A记录自动切换至从库

[root@sndspgdpredb353 consul]# dig +nocmd  mysqlro.service.xingang.sndbxingang @10.242.178.131 +noall +answer
mysqlro.service.xingang.sndbxingang. 0 IN A 10.238.199.17

  • consul client进程停止 --只读域名A记录自动切换至主库

[root@sndspgdpredb353 consul]# dig +nocmd  mysqlro.service.xingang.sndbxingang @10.242.178.131 +noall +answer
mysqlro.service.xingang.sndbxingang. 0 IN A 10.238.199.18

  • consul client进程启动 --只读域名A记录自动切换至从库

[root@sndspgdpredb353 consul]# dig +nocmd  mysqlro.service.xingang.sndbxingang @10.242.178.131 +noall +answer
mysqlro.service.xingang.sndbxingang. 0 IN A 10.238.199.17

5.2.主库宕机

主库:10.238.199.18

1.mha切换10.238.199.17为新主 ---使用rds脚本模拟mha切换

[root@sndspgdpredb353 ~]# mysql_ha_failover

2.修改新主/opt/consul/etc/services.json文件并reload --读写只读域名指向新主

[root@sndspgdpredb353 consul]# cat /opt/consul/etc/services.json 
{
"services": [
    {
        "name": "mysqlrw",
        "id": "10.238.199.17_rw",
        "address": "10.238.199.17",
        "port": 3306, 
        "check": { 
            "id":"10.238.199.17_rw_ck",
            "name":"check write domain",
            "tcp":"10.238.199.17:3306",
            "interval": "5s",
            "timeout": "1s"
        }   
    },
    {
        "name": "mysqlro",
        "id": "10.238.199.17_ro",
        "address": "10.238.199.17",
        "port": 3306, 
        "check": { 
            "id":"10.238.199.17_ro_ck",
            "name":"check readonly domain",
            "args":["/bin/bash","/opt/consul/bin/check.sh"],
            "interval": "5s",
            "timeout": "1s"
        }   
    }
    
]
}
[root@sndspgdpredb353 consul]# bin/consul reload
[root@sndspgdpredb353 consul]# dig +nocmd  mysqlro.service.xingang.sndbxingang @10.242.178.131 +noall +answer
mysqlro.service.xingang.sndbxingang. 0 IN A 10.238.199.17
[root@sndspgdpredb353 consul]# dig +nocmd  mysqlrw.service.xingang.sndbxingang @10.242.178.131 +noall +answer
mysqlrw.service.xingang.sndbxingang. 0 IN A 10.238.199.17

3.老主恢复后修改/opt/consul/etc/services.json并启动client(复制状态恢复前确保consul进程停止,防止读写域名注册) --只读域名指向老主

[root@sndspgdpredb352 consul]# cat etc/services.json 
{
"services": [
    {
        "name": "mysqlro",
        "id": "10.238.199.18_ro",
        "address": "10.238.199.18",
        "port": 3306, 
        "check": { 
            "id":"10.238.199.18_ro_ck",
            "name":"check readonly domain",
            "tcp":"10.238.199.18:3306",
            "interval": "5s",
            "timeout": "1s"
        }   
    }
    
]
}
[root@sndspgdpredb352 consul]# bin/consul reload
Error reloading: Put "http://127.0.0.1:8500/v1/agent/reload": dial tcp 127.0.0.1:8500: connect: connection refused
[root@sndspgdpredb352 consul]# nohup bin/consul agent --config-dir=etc/ >/dev/null &
[1] 10513
nohup: ignoring input and redirecting stderr to stdout
[root@sndspgdpredb352 consul]# dig +nocmd  mysqlrw.service.xingang.sndbxingang @10.242.178.131 +noall +answer
mysqlrw.service.xingang.sndbxingang. 0 IN A 10.238.199.17
[root@sndspgdpredb352 consul]# dig +nocmd  mysqlro.service.xingang.sndbxingang @10.242.178.131 +noall +answer
mysqlro.service.xingang.sndbxingang. 0 IN A 10.238.199.18

附录

dbone_88888888
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Consul+Ocelot+.NetCore Api+IdentityServer 4
12-28
Consul+Ocelot+.NetCore Api+IdentityServer 4配置服务，初学.net 微服务
基于Consul的MySQL高可用服务，健康检查怎么做？这里有一个完整脚本
杨建荣的学习笔记
10-13 466
这是学习笔记的第2128篇文章 今天写了下Consul健康检查的脚本内容，之前更新过一版，可以参见： 我是在上一个版本上面做的更新,对于健康检查来说，我们改进的思路是希望检查的过程是稳定可控的，换句话说，要判断一个数据库是主库还是从库，这个逻辑不是很难写，难就难在这个过程中出现一些异常的时候，检查的逻辑是否健壮，比如网络出现抖动，可能检查的结果就错误了，对于数据库服务来...
MySQL基于域名做高可用切换（Consul初试）
weixin_30699741的博客
05-11 626
MySQL基于域名做高可用切换（Consul初试） 一，Consul功能介绍 服务发现 - Consul的客户端可用提供一个服务,比如 api 或者mysql ,另外一些客户端可用使用Consul去发现一个指定服务的提供者.通过DNS或者HTTP应用程序可用很容易的找到他所依赖的服务. 健康检查 - Consul客户端可用提供任意数量的健康...
consul配置mysql集群_consul集群部署-01
weixin_35963855的博客
02-06 495
consul介绍Consul包含多个组件,可是做为一个总体,为你的基础设施提供服务发现和服务配置的工具.他提供如下关键特性:服务发现 Consul的客户端可用提供一个服务,好比 api 或者mysql ,另一些客户端可用使用Consul去发现一个指定服务的提供者.经过DNS或者HTTP应用程序可用很容易的找到他所依赖的服务.健康检查 Consul客户端可用提供任意数量的健康检查,指定一个服务(好比...
consul mysql 检查_MySQL在Consul服务中的健康检查逻辑
weixin_33795788的博客
01-19 318
这是学习笔记的第2090篇文章MySQL的Consul方向开始要大规模推广的时候，一直感觉健康检查的部分还是不够严谨，虽然感觉是，但是总体逻辑上看也没什么硬伤，就暂时搁置了下来，最近业务的推广和普及，一旦逻辑出现漏洞或者不严谨，则是一种很被动的局面，所以我们开始梳理清晰完整的检查逻辑，我对这个部分的要求是能够输出一个清晰可见的逻辑关系图，经得起推敲，一目了然，这样才算是心里踏实。在Consul服务...
consul配置mysql集群_consul集群搭建，配合nginx完成服务动态发现和健康检查
weixin_29050829的博客
02-06 215
1、概述1.1 介绍consul是一个服务发现和配置共享的服务软件，结合nginx的主动健康检查模块nginx_upstream_check_module和服务发现模块nginx-upsync-module，实现一套服务动态发现机制。nginx的upstream不再通过手动配置，而是定时向consul发送请求，获取consul数据中心的配置文件，动态更新upstream地址池。1.2 术语cons...
将mysql服务注册到consul_我的第一个微服务系列（四）：使用Consul来做服务注册与发现...
weixin_33344147的博客
02-12 503
Consul是一种提供具有服务发现，配置和分段功能的全功能控制平面的服务网格解决方案，其主要功能有：服务发现：Consul的客户端可以注册服务，例如api或mysql，其他客户端可以使用Consul来发现给定服务的提供者。使用DNS或HTTP，应用程序可以轻松找到它们所依赖的服务。健康监测：Consul客户端可以提供与给定服务相关的任意数量的健康检查，可以使用此信息来监控集群运行状况，服务发现组件...
gtid实现MySQL高可用_consul1.6实现Mysql-Gtid主从读写分离和高可用-03
weixin_39830303的博客
01-28 89
规划Mysql Gtid主从配置https://blog.51cto.com/9025736/2500516consul集群搭建https://blog.51cto.com/9025736/2500976创建mysql用户并授权(mysql服务器需要授权)MySQL [(none)]> grant all on *.* to 'han'@'%' identified by 'hanye131...
mysql mgr CONSuL_Mysql MGR + Consul + Consul-template + Haproxy 搭建mysql 高可用集群 （三）...
weixin_35187410的博客
02-01 183
使用consul做服务发现Consul是一款用Go开发的分布式服务协调管理的工具，它提供了服务发现，健康检查，Key／Value存储等功能，并且支持跨数据中心的功能。这里用consul来做mysql主从的服务发现。Consul-template是Consul的一个扩展工具，通过监听Consul中的数据可以动态修改一些配置文件。这里用来动态生成haproxy的配置文件。从官网下载consul和con...
mysql设计或者配置_MySQL的consul配置这么设计就完整了
weixin_31028871的博客
02-01 261
最近在梳理Consul健康检查逻辑的时候，也发现了一些潜在的问题，这些问题虽然不会直接造成业务故障，但是在故障发生的时候还是存在较高的概率导致一些意料之外的影响。从解耦的设计思路来看，我们希望很多事情能够做到多重校验，即设计一个组件的时候，如何涉及外部环节，我们需要从故障设计的角度来进行考量，即认为我们的服务或者组件是存在故障的风险，按照这个来设计，就能够导致一些后续设计中的尴尬。对于Consul...
软件集成工具（mysql+redis+nacos+consul）
02-02
************************ ** 集成工具使用文档 ** ************************ 启动程序项目会依赖各种服务，给服务器造成一定消耗 本地部署服务，也需要启动虚拟机、运行命令、等繁琐操作 基于该目的，将集成一款具有多组环境，且易于部署的集成包 运行平台：windows mysql/5.7.9 redis/3.2 nacos/1.1.4 consul/1.9.1 说明： 1 各个项目可以独立运行bat，且具有自定义性 2 _run.bat用于一键启动服务
CentOS7.4+HDP+Ambari+consul+Elasticsearch安装部署文档.rar
07-12
CentOS7.4+HDP+Ambari+consul+Elasticsearch 安装部署文档
.NetCore+Consul+Ocelot实现服务网关和服务注册与发现.rar
12-01
.NetCore+Consul+Ocelot实现服务网关和服务注册与发现，此Demo是个完整的列子，下载可直接运行。
Consul+upsync+Nginx动态配置负载均衡.pdf
10-29
Consul+upsync+Nginx 实现无需重启Nginx的动态负载均衡
Consul+Grafana+Prometheus实现服务器监控-window版.zip
12-14
Consul+Grafana+Prometheus实现服务器监控-window版 所需的包和Windows资源收集器
微服务之SpringCloud-服务保护机制Hystrix
打酱油的程序员
06-21 321
微服务高可用技术 大型复杂的分布式系统中，高可用相关的技术架构非常重要。高可用架构非常重要的一个环节，就是如何将分布式系统中的各个服务打造成高可用的服务，从而足以应对分布式系统环境中的各种各样的问题，，避免整个分布式系统被某个服务的故障给拖垮. 比如：服务间的调用超时、服务间的调用失败 要解决这些棘手的分布式系统可用性问题，就涉及到了高可用分布式系统中的很多重要的技术，包括： 资源隔离 ...
consul mysql 检查_MySQL高可用新玩法之MGR+Consul
weixin_36264801的博客
01-19 470
前面的文章有提到过利用consul+mha实现mysql的高可用，以及利用consul+sentinel实现redis的高可用，具体的请查看：http://www.cnblogs.com/gomysql/p/8010552.html。本次给大家带来mysql高可用的新玩法，利用mysql 5.7的mgr+consul实现，至于mgr是什么，有什么优势，如何搭建这里就不说了，大家自己google，我...
consul配置mysql集群_Mysql MGR + Consul + Consul-template + Haproxy 搭建mysql 高可用集群 （三）...
weixin_42514910的博客
03-03 207
使用consul做服務發現Consul是一款用Go開發的分布式服務協調管理的工具，它提供了服務發現，健康檢查，Key／Value存儲等功能，並且支持跨數據中心的功能。這里用consul來做mysql主從的服務發現。Consul-template是Consul的一個擴展工具，通過監聽Consul中的數據可以動態修改一些配置文件。這里用來動態生成haproxy的配置文件。從官網下載consul和con...
【DB宝45】MySQL高可用之MGR+Consul架构部署
小麦苗DBA宝典
03-29 773
文章目录一、MGR+Consul架构简介二、搭建MGR2.1、申请3台MGR机器2.2、3台主机安装MySQL环境2.3、修改MySQL参数2.4、重启MySQL环境2.5、安装MGR插件（所有节点执行）2.6、设置复制账号2.7、启动MGR，在主库(192.168.68.60)上执行2.8、其他节点加入MGR，在从库（192.168.68.61，192.168.68.62）上执行2.9、测试同步三、搭建Consul Server集群3.1、申请3台Consul Server主机3.2、安装Consul S
Consul+Registrator+Nginx
最新发布
07-09
综合使用Consul、Registrator和Nginx，您可以构建一个具有高可用性、弹性和可扩展性的微服务架构。通过Consul进行服务发现和配置管理，Registrator实现自动化服务注册，Nginx实现负载均衡和请求转发，可以实现容器化...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值