redis 多服务器, 主从配置

最新推荐文章于 2023-09-07 00:12:06 发布

笑豆

最新推荐文章于 2023-09-07 00:12:06 发布

阅读量739

点赞数

由于业务需要,今天配置了6台服务器的redis, 4台作为master, 2台作为slave. 一主一从, master-slave 结构.
根据业务的划分, 不同机器挂载的redis服务数量也不同, 分布如下.

 
#master
 
10.0.8.4
 
10.0.8.5
 
10.0.8.6
 
10.0.8.7
 
 
 
#master 服务端口
 
A服务 2001
 
B服务 2002
 
C服务 2003
 
 
 
#redis服务分布
 
10.0.8.4:2001
 
10.0.8.4:2002
 
10.0.8.5:2002
 
10.0.8.6:2002
 
10.0.8.7:2002
 
10.0.8.4:2003
 
10.0.8.5:2003
 
10.0.8.6:2003
 
10.0.8.7:2003
 
 
 
#slave
 
10.0.8.2
 
10.0.8.3
 
 
 
#slave分布
 
10.0.8.2:3001
 
10.0.8.2:3002
 
10.0.8.2:3003
 
10.0.8.2:3004
 
10.0.8.2:3005
 
10.0.8.3:3006
 
10.0.8.3:3007
 
10.0.8.3:3008
 
10.0.8.3:3009
 
 
 
#salve:port -> master:port (服务) 对照
 
10.0.8.2:3001 -> 10.0.8.4:2001 (A服务)
 
10.0.8.2:3002 -> 10.0.8.4:2002 (B服务)
 
10.0.8.2:3003 -> 10.0.8.5:2002 (B服务)
 
10.0.8.2:3004 -> 10.0.8.6:2002 (B服务)
 
10.0.8.2:3005 -> 10.0.8.7:2002 (B服务)
 
10.0.8.3:3006 -> 10.0.8.4:2003 (C服务)
 
10.0.8.3:3007 -> 10.0.8.5:2003 (C服务)
 
10.0.8.3:3008 -> 10.0.8.6:2003 (C服务)
 
10.0.8.3:3009 -> 10.0.8.7:2003 (C服务)

常规部署&启动
1. 从redis官网下载源码包 .我用的是redis-2.6.3.tar.gz.
2. 解压 tar zxvf redis-2.6.3.tar.gz
3. 编译 make & make install
4. 启动 redis-server redis.conf (redis.conf 可在下载的源码包中找到)

默认redis启动模式为非daemon, 启动后为master

master修改配置

 
######Master config
 
###General 配置
 
daemonizeyes    #使用daemon 方式运行程序，默认为非daemon方式运行
 
pidfile /tmp/redis.pid  #pid文件位置
 
port 2001   #根据服务规定的端口填写 (默认6379)
 
timeout 30   # client 端空闲断开连接的时间
 
loglevel warning  #日志记录级别，默认是notice，我这边使用warning,是为了监控日志方便。使用warning后，只有发生告警才会产生日志，这对于通过判断日志文件是否为空来监控报警非常方便。
 
logfile /opt/logs/redis/redis.log   #日志产生的位置
 
databases 16   #默认是0，也就是只用1 个db,我这边设置成16，方便多个应用使用同一个redis server。使用select n 命令可以确认使用的redis db ,这样不同的应用即使使用相同的key也不会有问题。
 
 
 
###下面是SNAPSHOTTING持久化方式的策略。为了保证数据相对安全，在下面的设置中，更改越频繁，SNAPSHOTTING越频繁，也就是说，压力越大，反而花在持久化上的资源会越多。所以我选择了master-slave模式，并在master关掉了SNAPSHOTTING。
 
#save 900 1     #在900秒之内，redis至少发生1次修改则redis抓快照到磁盘
 
#save 300 100   #在300秒之内，redis至少发生100次修改则redis抓快照到磁盘
 
#save 60 10000  #在60秒之内，redis至少发生10000次修改则redis抓快照到磁盘
 
rdbcompressionyes #使用压缩
 
dbfilename dump.rdb  #SNAPSHOTTING的文件名
 
dir/opt/data/redis/ #SNAPSHOTTING文件的路径
 
 
 
###REPLICATION 设置，
 
#slaveof    #如果这台机器是台redis slave，可以打开这个设置。如果使用master-slave模式，我就会在master上把SNAPSHOTTING关了，这样可以不用在master上做持久化，而是在slave上做，这样可以大大提高master 内存使用率和系统性能。
 
#slave-serve-stale-data yes  #如果slave 无法与master 同步，是否还可以读
 
 
 
### SECURITY 设置
 
#requirepass aaaaaaaaa   #redis性能太好，用个passwd 意义不大
 
#rename-command FLUSHALL ""  #可以用这种方式关掉非常危险的命令，如FLUSHALL这个命令，它清空整个 Redis 服务器的数据，而且不用确认且从不会失败
 
 
 
###LIMIT 设置
 
maxclients 0 #无client连接数量限制
 
maxmemory 14gb #redis最大可使用的内存量，我的服务器内存是16G，如果使用redis SNAPSHOTTING的copy-on-write的持久会写方式，会额外的使用内存，为了使持久会操作不会使用系统VM，使redis服务器性能下降，建议保留redis最大使用内存的一半8G来留给持久化使用，我个人觉得非常浪费。我没有在master上不做持久化，使用主从方式
 
maxmemory-policy volatile-lru  #使用LRU算法删除设置了过期时间的key,但如果程序写的时间没有写key的过期时间，建议使用allkeys-lru，这样至少保证redis不会不可写入。
 
 
 
###APPEND ONLY MODE 设置
 
appendonly no  #不使用AOF，AOF是另一种持久化方式，我没有使用的原因是这种方式并不能在服务器或磁盘损坏的情况下，保证数据可用性。
 
appendfsync everysec
 
no-appendfsync-on-rewrite no
 
auto-aof-rewrite-percentage 100
 
auto-aof-rewrite-min-size 64mb
 
 
 
###SLOW LOG 设置
 
slowlog-log-slower-than 10000  #如果操作时间大于0.001秒，记录slow log,这个log是记录在内存中的，可以用redis-cli slowlog get 命令查看
 
slowlog-max-len 1024  #slow log 的最大长度
 
 
 
###VIRTUAL MEMORY 设置
 
vm-enabled no   #不使用虚拟内存，在redis 2.4版本，作者已经非常不建议使用VM。
 
vm-swap-file/tmp/redis.swap
 
vm-max-memory 0
 
vm-page-size 32
 
vm-pages 134217728
 
vm-max-threads 4
 
 
 
###ADVANCED CONFIG 设置，下面的设置主要是用来节省内存的，我没有对它们做修改
 
hash-max-zipmap-entries 512
 
hash-max-zipmap-value 64
 
list-max-ziplist-entries 512
 
list-max-ziplist-value 64
 
set-max-intset-entries 512
 
zset-max-ziplist-entries 128
 
zset-max-ziplist-value 64
 
activerehashingyes
 
 
 
###INCLUDES 设置 ，使用下面的配置，可以配置一些个另其它的设置，如slave的配置
 
#include /path/to/local.conf
 
#include /path/to/other.conf
 
#include /opt/redis/etc/slave.conf  如果是slave server,把这个注释打开

一台redis master服务搞定后, 按照相同的步骤部署到其余的master中, 根据服务不同copy多份redis.conf, 修改对应的port即可
为了方便管理配置文件名称为

 
master-redis-2001.conf
 
master-redis-2002.conf
 
master-redis-2003.conf

然后根据服务的分布, 将相关环境搭建好, 在以下服务器跑各自相关业务即可

 
#10.0.8.4
 
redis-server /redis/config/master-redis-2001.conf
 
redis-server /redis/config/master-redis-2002.conf
 
redis-server /redis/config/master-redis-2003.conf
 
 
 
#10.0.8.5 , 10.0.8.6 , 10.0.8.7
 
redis-server /redis/config/master-redis-2002.conf
 
redis-server /redis/config/master-redis-2003.conf

测试master服务器

 
redis-cli -p 2001
 
redis 10.0.8.4:2001> settestredis 4-2001
 
OK
 
redis 10.0.8.4:2001> get testredis
 
"4-2001"
 
redis 10.0.8.4:2001> del testredis
 
(integer) 1
 
redis 10.0.8.4:2001> get testredis
 
(nil)
 
redis 10.0.8.4:6489> exit

像部署master一样, 部署slave, 将主服务器的配置文件copy一份到从服务器,修改port以及以下设置

 
######slave config
 
###REPLICATION
 
slaveof 10.0.8.2 3001
 
slave-serve-stale-data no  #如果slave无法与master同步，slave不可读
 
###APPEND ONLY MODE 设置
 
appendonlyyes #在slave上使用了AOF,以保证数据可用性。

slave配置文件命名

 
slave-redis-3001.conf
 
slave-redis-3002.conf
 
slave-redis-3003.conf
 
slave-redis-3004.conf
 
slave-redis-3005.conf
 
slave-redis-3006.conf
 
slave-redis-3007.conf
 
slave-redis-3008.conf
 
slave-redis-3009.conf
 
[/bash]
 
 
 
启动slave.
 
1
 
#10.0.8.2
 
redis-server /redis/config/master-redis-3001.conf
 
redis-server /redis/config/master-redis-3002.conf
 
redis-server /redis/config/master-redis-3003.conf
 
redis-server /redis/config/master-redis-3004.conf
 
redis-server /redis/config/master-redis-3005.conf
 
 
 
#10.0.8.3
 
redis-server /redis/config/master-redis-3006.conf
 
redis-server /redis/config/master-redis-3007.conf
 
redis-server /redis/config/master-redis-3008.conf
 
redis-server /redis/config/master-redis-3009.conf