Docker-consul + Nginx反向代理群集搭建（转载）

最新推荐文章于 2024-07-20 11:59:24 发布
最新推荐文章于 2024-07-20 11:59:24 发布
阅读量682 收藏
点赞数
分类专栏： docker 文章标签： docker
原文链接：https://blog.csdn.net/weixin_42953006/article/details/105671388
版权

https://blog.csdn.net/weixin_42953006/article/details/105671388

一、Consul概述

  • Consul是HashiCorp公司推出的开源工具，用于实现分布式系统的服务发现和配置
  • Consul支持健康检查，允许存储键值对
  • 一致性协议采用Raft算法，用来保证服务的高可用
  • 成员管理和消息广播采用GOSSIP协议，支持ACL访问控制
  • 方便部署，与Docker等轻量级容器可无缝配合

二、Consul集群工作流程

在这里插入图片描述

  • consul是微服务中的一个重要内容，在docker中有个服务的更新和发现机制
  • consultemplate：主要用于更新，是一个守护进程，用于实时查询consul集群信息，并更新文件系统上任意数量的指定模板，生成配置文件。更新完成后，可以选择运行shell命令执行更新操作重新加载nginx服务。
  • registrator：用于发现，可以检查容器运行状态自动注册，还可注销docker容器的服务到服务配置中心，目前支持Consul、Etcd和SKyDNS2

如上图：

nginx提供出nginx.conf配置文件，定义在consul template的模板中，在整个容器中增加内容时，

consultemplate会控制其中的配置文件进行自动更新，如反向代理的配置文件，后端的web上都安装

registrator工具，（registrator优先发现容器变动）用于自动发现web中的容器是否进行了变动从而带

动consul template进行更新。

三、Consul+nginx集群部署

3.1、建立Consul服务
  • 每个提供服务的节点上都要部署和运行Consul的agent
  • Consul agent有两种运行模式： Server和Client
  • Server和Client只是Consul群集层面的划分，与搭建在cluster上的应用服务没有关系
3.2、实验环境
  • 两台centos7服务器
  • server端：192.168.5.233/24 ，安装软件:docker-ce、consul、consul-template、nginx反向代理
  • 后端client：192.168.5.129/24，安装软件：docker-ce、registrator，构建nginx容器作为web
3.3、实验目的
  • server端的nginx作为反向代理；
  • 通过配置consul+nginx群集，能够实时监控后端的nginx容器，动态的自动添加或删除后端web到server端的nginx反向代理配置中。
3.4、Server端部署
  • 关闭防火墙，编译安装nginx作为反向代理调度器
[root@consul ~]# [root@consul ~]# systemctl stop firewalld
[root@consul ~]# setenforce 0
[root@consul ~]# yum install gcc gcc-c++ pcre-devel zlib-devel -y
[root@consul ~]# wget http://nginx.org/download/nginx-1.12.2.tar.gz
[root@consul ~]# tar zxvf nginx-1.12.0.tar.gz -C /opt
[root@consul ~]# cd /opt/nginx-1.12.2/
[root@consul nginx-1.12.2]# ./configure --prefix=/usr/local/nginx
[root@consul nginx-1.12.2]# make && make install

 
 

 
 
  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7
  • 8
  • 配置nginx服务
[root@consul nginx-1.12.2]# vim /usr/local/nginx/conf/nginx.conf
##在http字段中添加 “include  vhost/*.conf;”
http {
    include       mime.types;
    include      vhost/*.conf;
   default_type  application/octet-stream;

[root@consul nginx-1.12.2]# mkdir /var/log/nginx ##创建nginx日志目录
[root@consul nginx-1.12.2]# /usr/local/nginx/sbin/nginx ##启动服务
[root@consul nginx-1.12.2]# netstat -natp | grep 80
tcp 0 0 0.0.0.0:80 0.0.0.0:* LISTEN 48582/nginx: master
[root@consul nginx-1.12.2]# mkdir /usr/local/nginx/conf/vhost ##创建虚拟主机目录

[root@consul nginx-1.12.2]# mkdir /var/log/nginx ##创建日志文件目录

  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7
  • 8
  • 9
  • 10
  • 11
  • 12
  • 13
  • 14

在这里插入图片描述

  • 创建consul工作目录，上传consul软件包并解压
[root@consul ~]# mkdir /root/consul
[root@consul ~]# unzip consul_0.9.2_linux_amd64.zip 
[root@consul ~]# mv consul /usr/bin                      ##移动工具到/usr/bin让系统能识别
  • 1
  • 2
  • 3
  • 4
  • 配置consul agent
[root@consul ~]# consul agent \
> -server \
> -bootstrap \
> -ui \
> -data-dir=/var/lib/consul-data \
> -bind=192.168.5.233 \
> -client=0.0.0.0 \
> -node=consul-server01 &> /var/log/consul.log & 

 
 

 
 
  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7
  • 8
  • 查看当前群集信息，查看consul8500端口是否开启
[root@consul ~]# consul members   
Node             Address             Status  Type    Build  Protocol  DC
consul-server01  192.168.5.233:8301  alive   server  0.9.2  2         dc1
[root@consul ~]# consul info |grep leader
	leader = true
	leader_addr = 192.168.5.233:8300
[root@consul ~]# netstat -natp | grep 8500
tcp6       0      0 :::8500                 :::*                    LISTEN      45930/consul  

 
 

 
 
  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7
  • 8
  • 配置template nginx模板文件
[root@consul ~]# vim /root/consul/nginx.ctmpl
##添加以下内容
upstream http_backend {
     {{range service "nginx"}}
       server  {{.Address}}:{{.Port}};
       {{end}}
}

server {
listen 1111;
server_name localhost 192.168.5.233;
access_log /var/log/nginx/ng.cn-access.log;
index index.html index.php;
location / {
proxy_set_header HOST $host;
proxy_set_header X-Real-IP $remote_addr;
proxy_set_header Client-IP $remote_addr;
proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
proxy_pass http://http_backend;
}
}

  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7
  • 8
  • 9
  • 10
  • 11
  • 12
  • 13
  • 14
  • 15
  • 16
  • 17
  • 18
  • 19
  • 20
  • 21
3.5、Client端部署
  • 安装Gliderlabs/Registrator
[root@client ~]# docker run -d \
> --name=registrator \
> --net=host \
> -v /var/run/docker.sock:/tmp/docker.sock \
> --restart=always \
> gliderlabs/registrator:latest \
> -ip=192.168.5.129 \
> consul://192.168.5.233:8500
  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7
  • 8
  • 9
3.6、群集功能验证
3.6.1、验证自动发现和更新
  • 在server端配置并启动template
[root@consul ~]# unzip consul-template_0.19.3_linux_amd64.zip 
[root@consul ~]# mv consul-template /usr/bin
[root@consul ~]# consul-template -consul-addr 192.168.5.233:8500 -template "/root/consul/nginx.ctmpl:/usr/local/nginx/conf/vhost/ng.conf:/usr/local/nginx/sbin/nginx -s reload" --log-level=info
2020/04/22 16:58:18.987120 [INFO] consul-template v0.19.3 (ebf2d3d)
2020/04/22 16:58:18.987149 [INFO] (runner) creating new runner (dry: false, once: false)
2020/04/22 16:58:18.988963 [INFO] (runner) creating watcher
2020/04/22 16:58:18.989530 [INFO] (runner) starting
2020/04/22 16:58:18.989563 [INFO] (runner) initiating run
2020/04/22 16:58:19.002724 [INFO] (runner) initiating run
  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7
  • 8
  • 9
  • 10
  • 此时在本地的vhost目录中会自动生成ng.conf配置文件，此文件能够根据后端的容器情况，进行动态的更新
[root@consul ~]# ls /usr/local/nginx/conf/vhost/
ng.conf

[root@consul ~]# cat /usr/local/nginx/conf/vhost/ng.conf
uptream http_backend {

}

server {
listen 1111;
server_name localhost 192.168.5.233;
access_log /var/log/nginx/ng.cn-access.log;
index index.html index.php;
location / {
proxy_set_header HOST $host;
proxy_set_header X-Real-IP $remote_addr;
proxy_set_header Client-IP $remote_addr;
proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
proxy_pass http://http_backend;
}
}

  • 1
  • 2
  • 3
  • 4
  • 5
  • 6
  • 7
  • 8
  • 9
  • 10
  • 11
  • 12
  • 13
  • 14
  • 15
  • 16
  • 17
  • 18
  • 19
  • 20
  • 21
  • 22

在这里插入图片描述

  • 在后端的client中创建2个nginx容器作为测试，发现nginx容器能够自动加入
[root@client ~]# docker run -itd -p:100:80 --name  test-01 -h test01 nginx
[root@client ~]# docker run -itd -p:200:80 --name  test-02 -h test02 nginx
  • 1
  • 2
  • 3
  • 再次查看vhost中的ng.conf文件

在这里插入图片描述

3.6.2、验证nginx反向代理
  • 网页带1111端口访问server端nginx调度器地址192.168.5.129:1111，自动跳转到后端web

在这里插入图片描述

  • 进入client端查看nginx容器的访问日志，发现源地址是server端的nginx调度器地址
[root@client ~]# docker logs -f test-01
  • 1
  • 2

在这里插入图片描述

                                </div>
            <link href =“ https://csdnimg.cn/release/phoenix/mdeditor/markdown_views-60ecaf1f42.css” rel =“样式表”> 
                            </ div>
Docker-consul + Nginx反向代理群集搭建
时光慢旅的博客
04-23 1571
文章目录 一、Consul概述 二、Consul工作流程 三、
Consul-Template+Nginx反向代理动态查询Consul群集信息实现自动化
weixin_45724795的博客
04-26 698
前言： 之前对consul进行了相关了解以及部署点此查看 在之前的操作中，通过node1的主机对nginx以及http服务进行了容器的创建并成功的加入到了consul群集当中 其实可以登录node1节点并指定端口查看到nginx与http服务界面 指定的83，84端口和88，89端口都可以访问 下面将通过Template工具以及Nginx的反向代理动态查询Consul群集...
使用docker+consul+nginx集成分布式的服务发现与注册架构
weixin_30768175的博客
12-21 245
一、环境说明： 1.一台虚拟机，该系统已经装好了docker； 　　ip 192.168.10.224 虚拟网卡，与主机互通 　　操作系统rhel6 内核 2.6.32 64位 　　docker版本 1.7.1 2.一台主机 　　ip 192.168.10.103 　　操作系统windows server 2008R 64位 　　ningx版本 1.8.0 二、思路及部署图 ...
基于Docker + Consul + Nginx + Consul-template的服务负载均衡实现
weixin_34087301的博客
06-20 245
前言 上一篇文章使用 Consul 和 Registrator 在 docker 的容器环境中搭建了服务注册和发现集群。在服务发现和注册的基础上，本文将引入 Nginx反向代理服务器和 Consul-template 组件，实现动态的服务负载均衡。 正文 1. 工具介绍 1.1. Nginx 一个高性能的 HTTP 和反向代理服务器，用于前端访问流量到后台应用服务器负载均衡和请求转发。 1.2...
docker + consul + nginx集成分布式架构
Shadow__Flow的博客
12-01 941
一、Docker Consul容器服务更新与发现理论 Consul是一个分布式、高可用的系统，是一个为了解决在生产环境中服务注册，服务发现，服务配置的一个工具，它有多个组件，提供如下几个关键功能： 服务发现： Consul的某些客户端可以提供一个服务，例如api或者mysql，其它客户端可以使用Consul去发现这个服务的提供者。使用DNS或者HTTP，应用可以很容易的找到他们所依赖的服务。 健康检查： Consul客户端可以提供一些健康检查，这些健康检查可以关联到一个指定的服务（服务是否返回200 OK）
这就是你日日夜夜想要的docker！！！---------docker+consul+ nginx集成分布式的服务发现与注册架构
weixin_47219935的博客
09-23 2173
一、Docker consul容器服务更新与发现理论 1、基本架构 注册中心： 每个服务提供者向注册中心登记自己的服务，将服务名与主机Ip，端口等一些附加信息告诉注册中心，注册中心按服务名分类组织服务清单。如A服务运行在192.168.1.82:3000，192.168.1.83：3000实例上。那么维护的内容如下： 2、基于nginx和consul构建高可用及自动发现的Docker服务架构 上方拓扑图是基于Docker完成的，然后将consul、consul template、registrator
consul + Nginx 实现nginx代理自动载入backed的服务器, 实现fullnat效果
weixin_34240520的博客
04-13 537
consul 安装部署略过，具体参见http://kkkkkk.blog.51cto.com/468162/1914469 nginx扩展consul模块 https://github.com/weibocom/nginx-upsync-module 转载于:https://blog.51cto.com/kkkkkk/1915716...
consul+consul-template+nginx代理
taonihou_的博客
06-27 576
三台主机分别使用docker部署consul组成集群 查看集群组成 查看集群选举状态 consul-template+nginx 使用consul-template指定模板文件生成nginx配置文件 consul-template -consul-addr 10.144.100.90:8500 -template “./nginx.yml:/etc/nginx/conf.d/consul.conf:/usr/sbin/nginx -s reload” -log-level=info nginx代理8500端
单机Nomad+Consul+consul-template+Nginx反向代理
weixin_43739110的博客
11-03 2254
目录consul-template单机测试1 下载consul-template工具 consul-template单机测试 1 下载consul-template工具 源码：https://github.com/hashicorp/consul-template 二进制文件：https://releases.hashicorp.com/consul-template/ consul agent \ -server \ -bootstrap \ -ui \ -data-dir=/home/lz
多机Nomad+Consul+consul-template+Nginx反向代理
weixin_43739110的博客
11-16 2675
目录多机Nomad+Consul+consul-template+Nginx反向代理1 Nomad与Consul连接1.1 Nomad1.2 Consul1.3 Nomad Job(http-echo容器)2 consul-template3 Nginx反向代理 多机Nomad+Consul+consul-template+Nginx反向代理 虚拟机1：Ubuntu18.04，IP：192.168.10.11 虚拟机2：Ubuntu18.04，IP：192.168.10.22 测试过程：Nomad起2个jo
Nginx + consul
01-30 2590
Nginx + consul 功能   Nginx + consul 可以实现服务器动态下线、上线、水平扩展、限流、监控、灰度发布。 安装依赖 yum -y install gccgcc-c++ make libtool zlib zlib-devel openssl openssl-devel pcre pcre-devel   下载文件 wget http://nginx.or
Nginx 结合 consul 实现动态负载均衡
最新发布
jc2255的博客
07-20 1585
nginx-upsync-module 提供了动态的负载均衡，动态更新上游的服务器不需要 reload nginx ，它的功能是拉取 consul 的后端 server 的列表，并更新Nginx 的路由信息。此模块不依赖于任何第三方模块。 consul 作为 Nginx 的 db，利用 consul 的 KV 服务，每个 Nginx work 进程独立的去拉取各个upstream 的配置，并更新各自的路由。挂了第三方模块无法结束进程或者是当前进程尚未结束
基于Nginx和Consul构建自动发现的Docker服务架构——非常之详细
weixin_73059729的博客
06-01 1819
Consul是HashiCorp公司推出的开源工具，用于实现分布式系统的服务发现与配置。与其他分布式服务注册与发现的方案不同，与Airbnb的SmartStack等相比，Consul的方案更“一站式”，内置了服务注册与发现框架、分布一致性协议实现、健康检查、Key/Value存储、多数据中心方案，不再需要依赖其他工具（例如Zookeeper等），使用起来也较为简单。Consul是基于Golang语言开发实现的，因此具有天然可移植性（支持Linux、Windows和Mac OS X）；
nginx+consul实现动态负载均衡
jilangyu123的博客
09-09 898
概述 nginx-upsync-module提供了动态的负载均衡，动态更新上游的服务器不需要reload nginx，它的功能是拉取 consul 的后端 server 的列表，并更新 Nginx 的路由信息。此模块不依赖于任何第三方模块。 consul 作为 Nginx 的 db，利用 consul 的 KV 服务，每个 Nginx work 进程独立的去拉取各个 upstream 的配置，...
使用Consul配合Nginx实现动态负载均衡
大海技术博客
07-26 2907
1、Nginx加载配置文件nginx.conf2、从consul中获取动态配置，生成一个动态负载均衡配置文件swoft_server.conf;3、Nginx使用该动态负载均衡配置文件，得到多个可用服务IP及端口号4、Nginx开始负载均衡注意看第三段”配置Nginx配置文件nginx.conf“即可大致分析出来动态负载均衡的实现原理。这里还没有对nginx服务做健康检查，因此使用curl或consul前端页面推送或删除的结果就直接决定配置文件生成的结果。......
nginx负载均衡+反向代理
weixin_41632551的博客
06-08 1000
nginx负载均衡+反向代理
搭建Consul自动发现服务-多数据中心-保姆级教程-详细教程无错版
weixin_53667818的博客
04-01 823
搭建多数据中心的基于Nginx和Consul构建自动发现的Docker服务框架
consul结合grpc使用
slysoul的博客
08-03 137
【代码】consul结合grpc使用。
nginx+consul+半自动平滑升级 实现动态负载均衡
yinjinshui的博客
04-20 1098
1.nginx-upsync-module安装 半自动平滑升级 所谓半自动，其实就是在最后迁移的时候使用源码自带的升级命令：make upgrade 来自动完成 说明地址： https://github.com/weibocom/nginx-upsync-module nginx-upsync-module Nginx C模块，可以同步Consul或其他模块的上游。它动态地修改了后端服务器的属性...
Docker+Consul+Nginx+keepalived项目描述怎么写
05-20
Docker+Consul+Nginx+keepalived是一种常用的云原生架构方案，它结合了容器化、服务发现、负载均衡和高可用等多种技术手段，可用于构建高可用、弹性、可扩展的应用系统。 该方案的主要组件包括： 1. Docker：用于...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值