Redis6集群搭建

Redis6集群搭建

当前redis最新版本已经是6.2.6，在集群搭建上和redis3.x、redis4.x区别很大。redis5以后，就不需要安装ruby了，并且新版本redis创建集群不再使用redis-trib.rb，而使用redis-cli。以下为新版redis6.2.6集群搭建记录。本文使用三台服务器，6个redis服务实例（redis集群会自动尽量使同一台机器的两个实例不互为主从关系）。

---

一、环境准备

ip	端口
101.0.0.101	7001 、7002
101.0.0.102	7001 、7002
101.0.0.103	7001 、7002

二、搭建和启动redis实例

1.1 将redis-6.2.6.tar.gz(下载地址：https://redis.io/download)上传到服务器上，解压并编译

yum -y install gcc

tar xzf redis-6.2.6.tar.gz -C home/

cd home/redis-6.2.6

make MALLOC=libc 

make PREFIX=/home/redis-6.2.6  install  #如make PREFIX=/usr/local/redis install，关键字 PREFIX= 这个关键字的作用是编译的时候用于指定程序存放的路径，假设不添加该关键字Linux会将可执行文件存放在/usr/local/bin目录，库文件会存放在/usr/local/lib目录。配置文件会存放在/usr/local/etc目录。
其他的资源文件会存放在usr/local/share目录。这里指定号目录也方便后续的卸载，后续直接rm -rf /usr/local/redis 即可删除redis。

1.2 创建相关目录，修改配置文件

mkdir home/rediscluster/{7000,7001} -p

mkdir home/rediscluster/7000/{conf,data,log} -p

mkdir /home/rediscluster/7001/{conf,data,log} -p

cp /home/redis-6.2.6/redis.conf  /home/rediscluster/7000/conf/

cp /home/redis-6.2.6/redis.conf  /home/rediscluster/7001/conf/

1.3 修改配置文件

修改/home/rediscluster/7000/conf/redis.conf（以下集群配置为必须修改，其余配置根据实际情况修改）：

bind 101.0.0.101

port 7000

daemonize yes

pidfile "/home/rediscluster/7000/data/redis_7000.pid"

logfile "/home/rediscluster/7000/log/redis_7000.log"

dbfilename dump-7000.rdb

dir "/home/rediscluster/7000/data/"

masterauth "myredis"   #设置密码，redis启用密码认证一定要requirepass和masterauth同时设置；masterauth作用：主要是针对master对应的slave节点设置的，在slave节点数据同步的时候用到。requirepass作用：对登录权限做限制，redis每个节点的requirepass可以是独立、不同的。requirepass验证客户端，masterauth验证从库。
requirepass "myredis"  

cluster-enabled yes

cluster-node-timeout 5000

将7000目录的配置文件拷贝到7001实例并注意将配置文件的7000改为7001：

cp /home/rediscluster/7000/conf/redis.conf  /home/rediscluster/7001/conf/redis.conf

sed -i 's#7000#7001#g' /home/rediscluster/7001/conf/redis.conf

1.4 配置环境变量

echo 'export  REDIS_HOME=/home/redis-6.2.2' >> /etc/profile 

echo 'export  PATH=$REDIS_HOME/bin:$PATH' >> /etc/profile

source /etc/profile

1.5 启动redis

redis-server /home/rediscluster/7000/conf/redis.conf

redis-server /home/rediscluster/7001/conf/redis.conf

1.6 其它两台服务器

在其它两台服务器重复上述搭建步骤，注意将redis.conf里面的bind IP改为本机IP。
保证三台服务器的redis节点正常启动：

三、创建redis集群

在三台服务器的redis实例成功启动后，在第一台服务器上执行命令创建集群（注意如果在redis.conf中设置了密码，这里就要加上-a ‘密码’，如果没有密码，就不加-a参数）：

有密码：
redis-cli --cluster create --cluster-replicas 1 101.0.0.101:7000  101.0.0.101:7001  101.0.0.102:7000  101.0.0.102:7001  101.0.0.103:7000  101.0.0.103:7001 -a myredis
无密码：
redis-cli --cluster create --cluster-replicas 1 101.0.0.101:7000  101.0.0.101:7001  101.0.0.102:7000  101.0.0.102:7001  101.0.0.103:7000  101.0.0.103:7001

/usr/local/redis/bin/redis-cli --cluster create 10.11.0.148:7001 10.11.0.149:7002 10.11.0.149:7001 10.11.0.150:7002 10.11.0.150:7001 10.11.0.148:7002 --cluster-replicas 1

创建过程截图，注意图中确认输入“yes”。

四、验证redis集群

集群创建成功后，登录redis验证，注意加上集群参数 -c：

redis-cli -h 101.0.0.101 -p 7000 -a myredis -c  #登录redis集群

101.0.0.101:7000> cluster nodes  #查看集群节点

101.0.0.101:7000> cluster info   #查看集群信息

验证OK，redis6.2.6 集群搭建完毕。

五、Redis配置文件参数说明

1. Redis默认不是以守护进程的方式运行，可以通过该配置项修改，使用yes启用守护进程

daemonize no

2. 当Redis以守护进程方式运行时，Redis默认会把pid写入/var/run/redis.pid文件，可以通过pidfile指定

pidfile /var/run/redis.pid

3.指定Redis监听端口，默认端口为6379，作者在自己的一篇博文中解释了为什么选用6379作为默认端口，因为6379在手机按键上MERZ对应的号码，而MERZ取自意大利歌女Alessia Merz的名字

port 6379

4. 绑定的主机地址

bind 127.0.0.1

5.当 客户端闲置多长时间后关闭连接，如果指定为0，表示关闭该功能  

timeout 300
   
6. 指定日志记录级别，Redis总共支持四个级别：debug、verbose、notice、warning，默认为verbose

loglevel verbose

7. 日志记录方式，默认为标准输出，如果配置Redis为守护进程方式运行，而这里又配置为日志记录方式为标准输出，则日志将会发送给/dev/null

logfile stdout

8. 设置数据库的数量，默认数据库为0，可以使用SELECT <dbid>命令在连接上指定数据库id

databases 16

9. 指定在多长时间内，有多少次更新操作，就将数据同步到数据文件，可以多个条件配合

save <seconds> <changes>

Redis默认配置文件中提供了三个条件：

save 900 1

save 300 10

save 60 10000

分别表示900秒（15分钟）内有1个更改，300秒（5分钟）内有10个更改以及60秒内有10000个更改。

10. 指定存储至本地数据库时是否压缩数据，默认为yes，Redis采用LZF压缩，如果为了节省CPU时间，可以关闭该选项，但会导致数据库文件变的巨大

rdbcompression yes

11. 指定本地数据库文件名，默认值为dump.rdb

dbfilename dump.rdb

12. 指定本地数据库存放目录

dir ./

13. 设置当本机为slav服务时，设置master服务的IP地址及端口，在Redis启动时，它会自动从master进行数据同步

slaveof <masterip> <masterport>

14. 当master服务设置了密码保护时，slav服务连接master的密码

masterauth <master-password>

15. 设置Redis连接密码，如果配置了连接密码，客户端在连接Redis时需要通过AUTH <password>命令提供密码，默认关闭

requirepass foobared

16. 设置同一时间最大客户端连接数，默认无限制，Redis可以同时打开的客户端连接数为Redis进程可以打开的最大文件描述符数，如果设置 maxclients 0，表示不作限制。当客户端连接数到达限制时，Redis会关闭新的连接并向客户端返回max number of clients reached错误信息

maxclients 128

17. 指定Redis最大内存限制，Redis在启动时会把数据加载到内存中，达到最大内存后，Redis会先尝试清除已到期或即将到期的Key，当此方法处理 后，仍然到达最大内存设置，将无法再进行写入操作，但仍然可以进行读取操作。Redis新的vm机制，会把Key存放内存，Value会存放在swap区

maxmemory <bytes>

18. 指定是否在每次更新操作后进行日志记录，Redis在默认情况下是异步的把数据写入磁盘，如果不开启，可能会在断电时导致一段时间内的数据丢失。因为 redis本身同步数据文件是按上面save条件来同步的，所以有的数据会在一段时间内只存在于内存中。默认为no

appendonly no

19. 指定更新日志文件名，默认为appendonly.aof

 appendfilename appendonly.aof

20. 指定更新日志条件，共有3个可选值： no：表示等操作系统进行数据缓存同步到磁盘（快） always：表示每次更新操作后手动调用fsync()将数据写到磁盘（慢，安全） everysec：表示每秒同步一次（折衷，默认值）

appendfsync everysec

21.指定是否启用虚拟内存机制，默认值为no，简单的介绍一下，VM机制将数据分页存放，由Redis将访问量较少的页即冷数据swap到磁盘上，访问多的页面由磁盘自动换出到内存中（在后面的文章我会仔细分析Redis的VM机制）

vm-enabled no

22. 虚拟内存文件路径，默认值为/tmp/redis.swap，不可多个Redis实例共享

 vm-swap-file /tmp/redis.swap

23. 将所有大于vm-max-memory的数据存入虚拟内存,无论vm-max-memory设置多小,所有索引数据都是内存存储的(Redis的索引数据 就是keys),也就是说,当vm-max-memory设置为0的时候,其实是所有value都存在于磁盘。默认值为0

 vm-max-memory 0

24. Redis swap文件分成了很多的page，一个对象可以保存在多个page上面，但一个page上不能被多个对象共享，vm-page-size是要根据存储的 数据大小来设定的，作者建议如果存储很多小对象，page大小最好设置为32或者64bytes；如果存储很大大对象，则可以使用更大的page，如果不 确定，就使用默认值

 vm-page-size 32

25. 设置swap文件中的page数量，由于页表（一种表示页面空闲或使用的bitmap）是在放在内存中的，，在磁盘上每8个pages将消耗1byte的内存。

 vm-pages 134217728

26.设置访问swap文件的线程数,最好不要超过机器的核数,如果设置为0,那么所有对swap文件的操作都是串行的，可能会造成比较长时间的延迟。默认值为4

 vm-max-threads 4

27. 设置在向客户端应答时，是否把较小的包合并为一个包发送，默认为开启

glueoutputbuf yes

28. 指定在超过一定的数量或者最大的元素超过某一临界值时，采用一种特殊的哈希算法

hash-max-zipmap-entries 64

hash-max-zipmap-value 512

29. 指定是否激活重置哈希，默认为开启（后面在介绍Redis的哈希算法时具体介绍）

activerehashing yes

30. 指定包含其它的配置文件，可以在同一主机上多个Redis实例之间使用同一份配置文件，而同时各个实例又拥有自己的特定配置文件

include /path/to/local.conf