Docker + Django + Redis 简单的负载均衡

实验环境

  • 宿主机:Ubuntu-16.04_X64
  • Docker version 18.03.0-ce

前期准备

  • 我们将搭建一个包含6个节点的Docker应用栈,其中包括一个负载均衡代理节点、两个Web应用节点、一个主数据库节点及两个从数据库节点。

  • 获取镜像:

# 获取Django镜像
$ sudo docker pull django

# 获取HAProxy镜像
$ sudo docker pull haproxy

# 获取Redis镜像
$ sudo docker pull redis

# 查看本地镜像列表
$ sudo docker images
  • 应用容器节点间的互联,由于我们使用的为同一台宿主机,若为真正的分布式架构集群,还应处理容器的跨主机通信问题,在使用run命令创建容器时,添加--link选项,通过容器名,进行容器间安全的交互通信;
  • 容器启动顺序:
    1. 启动1redis-master容器节点;
    2. 启动2redis-slave容器节点并连接redis-master节点;
    3. 启动2Web APP容器节点并连接redis-master节点;
    4. 启动1HAProxy容器节点并连接2个Web APP节点;

搭建指导

启动各节点并互连

# 请总共打开宿主机的7个终端, 每个终端连接一个容器 or 可以使用tmux工具(强烈推荐!!!),更方便快捷
# Ubuntu 安装tmux: sudo apt install -y tmux
# tmux 快捷键 Ctrl + B 再按 C 是创建 ,再按 N 是下一个窗口,详情可百度
# 启动redis数据库节点
$ sudo docker run -it --name redis-master redis /bin/bash
$ sudo docker run -it --name redis-slave1 --link redis-master:master redis /bin/bash
$ sudo docker run -it --name redis-slave2 --link redis-master:master redis /bin/bash

# 启动APP节点
$ sudo docker run -it --name APP1 --link redis-master:db -v ~/Projects/Django/App1:/usr/src/app django /bin/bash
$ sudo docker run -it --name APP2 --link redis-master:db -v ~/Projects/Django/App2:/usr/src/app django /bin/bash

# 启动HAProxy节点
$ sudo docker run -it --name HAProxy --link APP1:APP1 --link APP2:APP2 -p 6301:6301 -v ~/Projects/HAProxy:/tmp haproxy /bin/bash

# 查看运行中的容器
$ sudo docker ps

配置redis数据库,在宿主机上创建redis数据库的配置文件

  • redis-master配置文件:
$ sudo vim redis-master.conf
daemonize yes
pidfile /var/run/redis.pid
port 6379
timeout 0
tcp-keepalive 0
databases 1

stop-writes-on-bgsave-error no
rdbcompression yes
rdbchecksum yes
dbfilename dump.rdb
dir /tmp/

maxmemory 2gb
maxmemory-policy allkeys-lru
appendonly no
appendfsync everysec
no-appendfsync-on-rewrite no
auto-aof-rewrite-percentage 100
auto-aof-rewrite-min-size 512mb
hash-max-ziplist-entries 64
hash-max-ziplist-value 128
list-max-ziplist-entries 64
list-max-ziplist-value 128
set-max-intset-entries 64
zset-max-ziplist-entries 64
zset-max-ziplist-value 128
activerehashing yes
  • redis-slave配置文件:
$ sudo vim redis-slave.conf
daemonize yes
pidfile /var/run/redis.pid
port 6379
slaveof master 6379
timeout 0
tcp-keepalive 0
databases 1

stop-writes-on-bgsave-error no
rdbcompression yes
rdbchecksum yes
dbfilename dump.rdb
dir /tmp/

maxmemory 2gb
maxmemory-policy allkeys-lru
appendonly no
appendfsync everysec
no-appendfsync-on-rewrite no
auto-aof-rewrite-percentage 100
auto-aof-rewrite-min-size 512mb
hash-max-ziplist-entries 64
hash-max-ziplist-value 128
list-max-ziplist-entries 64
list-max-ziplist-value 128
set-max-intset-entries 64
zset-max-ziplist-entries 64
zset-max-ziplist-value 128
activerehashing yes
  • 配置redis数据库(未简化):
# 适用于1.12版本及以上
## 获取数据卷的挂载点
$ sudo docker inspect -f '{{ .Mounts }}' redis-master
$ sudo docker inspect -f '{{ .Mounts }}' redis-slave1
$ sudo docker inspect -f '{{ .Mounts }}' redis-slave2

## 分别记录挂载点
## 形如:/var/lib/docker/volumes/<Container-ID>/_data

## 拷贝配置文件
$ sudo cp redis-master.conf <redis-master的挂载点>
$ sudo cp redis-slave.conf <redis-slave1的挂载点>
$ sudo cp redis-slave.conf <redis-slave2的挂载点>
  • 配置redis数据库(简化版):
# Docker版本:1.12
## 拷贝配置文件
$ sudo cp redis-master.conf $(docker inspect -f '{{ .Mounts }}' redis-master | awk '{print $2}')
$ sudo cp redis-slave.conf $(docker inspect -f '{{ .Mounts }}' redis-slave1 | awk '{print $2}')
$ sudo cp redis-slave.conf $(docker inspect -f '{{ .Mounts }}' redis-slave2 | awk '{print $2}')

# Docker版本:1.13及以上
## 拷贝配置文件
$ sudo cp redis-master.conf $(docker inspect -f '{{ .Mounts }}' redis-master | awk '{print $3}')
$ sudo cp redis-slave.conf $(docker inspect -f '{{ .Mounts }}' redis-slave1 | awk '{print $3}')
$ sudo cp redis-slave.conf $(docker inspect -f '{{ .Mounts }}' redis-slave2 | awk '{print $3}')
  • 测试操作:
# 在redis-master节点
$ cp /data/redis-master.conf /usr/local/bin/redis.conf
$ cd /usr/local/bin/
$ redis-server redis.conf
$ redis-cli
127.0.0.1:6379> set stu_num 1441310222
127.0.0.1:6379> get stu_num
127.0.0.1:6379> exit

# 在redis-slave节点
$ cp /data/redis-slave.conf /usr/local/bin/redis.conf
$ cd /usr/local/bin/
$ redis-server redis.conf
$ redis-cli
127.0.0.1:6379> get stu_num
127.0.0.1:6379> exit

配置Web APP节点

在Web APP节点上
  • 安装redis模块:
$ pip install redis
  • 测试操作:
$ python
import redis
print(redis.__file__)
exit()
  • 创建Hello-WorldAPP
$ cd /usr/src/app
$ mkdir dockerweb
$ cd dockerweb
$ django-admin.py startproject redisweb
$ cd redisweb
$ python manage.py startapp helloworld
在宿主机上
  • 切换目录:
$ cd ~/Projects/Django/App1/dockerweb/redisweb/
$ cd ~/Projects/Django/App2/dockerweb/redisweb/
  • 配置视图(View):
$ sudo vim helloworld/views.py
from django.shortcuts import render
from django.http import HttpResponse
import redis


def hello(requset):
    r = redis.Redis(host='db', port=6379, db=0)
    # 在APP2节点修改为HelloWorld-APP2
    r.set('app_info', 'HelloWorld-APP1')
    app_info = bytes.decode(r.get('app_info'))
    stu_num_info = int(r.get('stu_num'))
    info = "Hello, everyone!<br/>Get Hi: {0}<br/>Get stu_num: {1}<br/>".format(app_info, stu_num_info)
    return HttpResponse(info)
  • 更改配置文件:
$ sudo vim redisweb/settings.py
# 文件内容
ALLOWED_HOSTS = ['*',]
INSTALLED_APPS = [
    ...
    'helloworld',
]
  • 配置url
$ sudo vim redisweb/urls.py
from django.conf.urls import url
from django.contrib import admin
from helloworld.views import hello

urlpatterns = [ 
   url(r'^admin/', admin.site.urls),
   url(r'^$', hello),
]
Web APP节点上
  • 初始化项目:
$ python manage.py makemigrations
$ python manage.py migrate
  • 启动服务:
# APP1:
$ python manage.py runserver 0.0.0.0:8001

# APP2:
$ python manage.py runserver 0.0.0.0:8002

配置HAProxy节点

在宿主机上
  • 切换目录:
$ cd ~/Projects/HAProxy/
  • 创建配置文件:
$ sudo vim haproxy.cfg
global
    log 127.0.0.1   local0
    maxconn 4096
    chroot /usr/local/sbin
    daemon
    nbproc  4
    pidfile /usr/local/sbin/haproxy.pid

defaults
    log     127.0.0.1   local3
    mode    http
    option  dontlognull
    option  redispatch
    retries 2
    maxconn 2000
    balance roundrobin 
    timeout connect 5000ms
    timeout client  50000ms
    timeout server  50000ms

listen redis_proxy
    bind 0.0.0.0:6301
    stats enable
    bind-process 1
    stats uri /haproxy-stats
    stats auth phil:NRG93012
        server APP1 APP1:8001 check inter 2000 rise 2 fall 5
        server APP2 APP2:8002 check inter 2000 rise 2 fall 5
HAProxy节点
  • 切换目录:
$ cd /tmp
  • 复制配置文件:
$ cp haproxy.cfg /usr/local/sbin
  • 切换目录:
$ cd /usr/local/sbin
  • 启动服务:
$ haproxy -f haproxy.cfg

测试操作

  • 使用浏览器访问,http://<宿主机的IP地址>:<6301>/
  • 多次请求代理节点,HAProxy节点会自动分发请求,达到负载均衡的目的;
  • 这里的负载均衡是轮询模式,还有其他的模式,比如加权轮询等,这就不做介绍

成功如图

这里写图片描述
这里写图片描述

评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值