企业级NoSql数据库Redis集群

一、关系型数据库和 NoSQL 数据库

关系型数据库

是建立在关系模型基础上的数据库，其借助于集合代数等数学概念和方法来处理数据库 中的数据主流的 MySQL、Oracle、MS SQL Server 和 DB2 都属于这类传统数据库。 

NoSQL 数据库

全称为 Not Only SQL，意思就是适用关系型数据库的时候就使用关系型数据库，不适用的时候也没有必要非使用关系型数据库不可，可以考虑使用更加合适的数据存储。主要分为临时性键 值存储（memcached、Redis）、永久性键值存储（ROMA、Redis）、面向文档的数据库 （MongoDB、CouchDB）、面向列的数据库（Cassandra、HBase），每种 NoSQL 都有其特有的使用 场景及优点。

1.1、为什么还要用 NoSQL 数据库呢？

 主要是由于随着互联网发展，数据量越来越大，对性能要求越来越高，传统数据库存在着先天性的缺 陷，即单机（单库）性能瓶颈，并且扩展困难。这样既有单机单库瓶颈，却又扩展困难，自然无法满足 日益增长的海量数据存储及其性能要求，所以才会出现了各种不同的 NoSQL 产品，NoSQL 根本性的优 势在于在云计算时代，简单、易于大规模分布式扩展，并且读写性能非常高

1.2、RDBMS和NOSQL的特点及优缺点

	关系型数据库	NoSQL数据库
特点	数据关系模型基于关系模型，结构化存储，完整性约束 基于二维表及其之间的联系，需要连接、并、交、差、除等数据操作 采用结构化的查询语言(SQL)做数据读写 操作需要数据的一致性，需要事务甚至是强一致性	非结构化的存储 基于多维关系模型 具有特有的使用场景
优点	保持数据的一致性(事务处理) 可以进行 join 等复杂查询 通用化，技术成熟	高并发，大数据下读写能力较强 基本支持分布式， 易于扩展，可伸缩简单，弱结构化存储
缺点	数据读写必须经过 sq| 解析，大量数据、高并发下读写性能不足 对数据做读写，或修改数据结构时需要加锁，影响并发操作 无法适应非结构化存储 扩展困难 昂贵、复杂	join 等复杂操作能力较弱 事务支持较弱 通用性差 无完整约束复杂业务场景支持较差

二、Remote Dictionary Server 简介

中文官网：http:// https://redis.cn 

2.1、什么是redis

Redis (Remote Dictionary Server)

Redis是一个开源的、遵循BSD协议的、基于内存的而且目前比较流行的键值数据库(key-value database)，是一个非关系型数据库，redis 提供将内存通过网络远程共享的一种服务，提供类似功能的 还有memcached，但相比memcached，redis还提供了易扩展、高性能、具备数据持久性等功能。 Redis 在高并发、低延迟环境要求比较高的环境使用量非常广泛。

2.2、Redis特性

• 速度快: 10W QPS,基于内存,C语言实现
• 单线程
• 持久化
• 支持多种数据结构
• 支持多种编程语言
• 功能丰富: 支持Lua脚本,发布订阅,事务,pipeline等功能
• 简单: 代码短小精悍(单机核心代码只有23000行左右),单线程开发容易,不依赖外部库,使用简单
• 主从复制
• 支持高可用和分布式

2.3、Redis应用场景

• Session 共享：常见于web集群中的Tomcat或者PHP中多web服务器session共享
• 缓存：数据查询、电商网站商品信息、新闻内容
• 计数器：访问排行榜、商品浏览数等和次数相关的数值统计场景
• 微博/微信社交场合：共同好友,粉丝数,关注,点赞评论等
• 消息队列：ELK的日志缓存、部分业务的订阅发布系统
• 地理位置: 基于GEO(地理信息定位),实现摇一摇,附近的人,外卖等功能

2.4、缓存的实现流程

数据更新操作流程

数据读操作流程

三、安装 

官方下载地址：http://download.redis.io/releases/ 

在一台主机中不能即用rpm安装也用源码安装 

3.1 rpm包方式安装

dnf install redis -y 

3.2 源码安装 

1、安装启动 

我是上传的源码包

 [root@redis-node1 ~]# tar zxf redis-7.4.0.tar.gz

#安装编译工具 [

root@redis-node1 redis-7.4.0]# dnf install make gcc initscripts-10.11.6- 1.el9.x86_64 -y

#执行编译命令

[root@redis-node1 redis-7.4.0]# make

[root@redis-node1 redis-7.4.0]# make install

#启动Redis

[root@redis-node1 redis-7.4.0]# cd utils/

[root@redis-node1 utils]# ./install_server.sh

[root@redis-node1 utils]# vim install_server.sh #解决报错问题

[root@redis-node1 utils]# ./install_server.sh
Welcome to the redis service installer
This script will help you easily set up a running redis server

Please select the redis port for this instance: [6379]        #端口
Selecting default: 6379
Please select the redis config file name [/etc/redis/6379.conf]        #配置文件
Selected default - /etc/redis/6379.conf
Please select the redis log file name [/var/log/redis_6379.log]        #日志
Selected default - /var/log/redis_6379.log
Please select the data directory for this instance [/var/lib/redis/6379]        #数据目录
Selected default - /var/lib/redis/6379
Please select the redis executable path [/usr/local/bin/redis-server]        #命令路径
Selected config:
Port           : 6379
Config file    : /etc/redis/6379.conf
Log file       : /var/log/redis_6379.log
Data dir       : /var/lib/redis/6379
Executable     : /usr/local/bin/redis-server
Cli Executable : /usr/local/bin/redis-cli
Is this ok? Then press ENTER to go on or Ctrl-C to abort.
Copied /tmp/6379.conf => /etc/init.d/redis_6379
Installing service...
Successfully added to chkconfig!
Successfully added to runlevels 345!
Starting Redis server...
Installation successful!

 #提示系统使用的是systemd的初始化方式

2、配置文件

[root@redis-node1 utils]# vim /etc/redis/6379.conf

bind * -::*

protected-mode no
 

[root@redis-node1 utils]# /etc/init.d/redis_6379 restart

Stopping ...

Redis stopped

Starting Redis server...

[root@redis-node1 utils]# netstat -antlupe | grep redis
tcp        0      0 127.0.0.1:6379          0.0.0.0:*               LISTEN      0          67822      33301/redis-server
tcp6       0      0 ::1:6379                :::*                    LISTEN      0          67823      33301/redis-server

 3、查看信息

[root@redis-node1 utils]# redis-cli

127.0.0.1:6379> info

4、简便安装

先安装一台，发送给其他的

[root@redis-node1 ~]# scp -r redis-7.4.0 root@172.25.254.20:/root

[root@redis-node1 bin]# rsync -al * root@172.25.254.20:/usr/local/bin
[root@redis-node2 ~]# cd redis-7.4.0/utils/
[root@redis-node2 utils]# dnf install make gcc initscripts-10.11.6-1.el9.x86_64 -y

[root@redis-node2 utils]# ./install_server.sh
[root@redis-node2 utils]# vim /etc/redis/6379.conf
[root@redis-node2 utils]#  netstat -antlupe | grep redis
tcp        0      0 127.0.0.1:6379          0.0.0.0:*               LISTEN      0          67743      33397/redis-server
tcp6       0      0 ::1:6379                :::*                    LISTEN      0          67744      33397/redis-server
[root@redis-node2 utils]# /etc/init.d/redis_6379 restart
Stopping ...
Redis stopped
Starting Redis server...
[root@redis-node2 utils]#  redis-cli
127.0.0.1:6379> info

这样就安装好了 

四、Redis的基本操作 

• 查看配置（config get *）
• 写入数据（set key x）
• 读取数据（get key）
• 选择数据库（select 1）
• 清空当前数据库（flushdb）
• 清空所有数据库（flushell）
• 移动key1（move key 1）
• 删除（del key）
• 改名（rename old new）
• 设置过期时间（expire key 10）
• 设置持久化（persist key）
• 查询（key user*）
• 判断是否存在（exists key）

示例： 

#查看配置

127.0.0.1:6379> config get bind
1) "bind"
2) "* -::*"
127.0.0.1:6379[1]> CONFIG GET *

#写入和读取数据

127.0.0.1:6379> set key1 haha
OK
127.0.0.1:6379> get key1
"haha"
#如果没有设定数据过期时间会一直存在， /var/lib/redis/6379/dump.rdb内存快照中

#查看所有key

127.0.0.1:6379> set key haha
127.0.0.1:6379> set key1 hello
127.0.0.1:6379> keys *
1) "key"
2) "key1"
 

#选择数据库 redisa中有0-15个数据库

127.0.0.1:6379> select 1
127.0.0.1:6379[1]> select 15
127.0.0.1:6379[15]> select 16
(error) ERR DB index is out of range

#移动数据

127.0.0.1:6379[1]> set key1 xixi
127.0.0.1:6379[1]> get key1
"xixi"
127.0.0.1:6379[1]> move key1 0
(integer) 1
127.0.0.1:6379[1]> get key1
(nil)
127.0.0.1:6379[1]> select 0
127.0.0.1:6379> get key1
"xixi"
 

#改变键名

127.0.0.1:6379> set name zpy
127.0.0.1:6379> rename name id
127.0.0.1:6379> get name
(nil)
127.0.0.1:6379> get id
"zpy"
 

#设定数据过期时间

127.0.0.1:6379> expire id 3
(integer) 1
127.0.0.1:6379> get id
"zpy"
127.0.0.1:6379> get id
(nil)
 

#删除

127.0.0.1:6379> set name zpy
127.0.0.1:6379> del name
(integer) 1
127.0.0.1:6379> get name
(nil)

#判断key是否存在

127.0.0.1:6379> set key1 hello
OK
127.0.0.1:6379> exists key1
(integer) 1
127.0.0.1:6379> del key1
(integer) 1
127.0.0.1:6379> exists key1
(integer) 0
 

#清空当前库

127.0.0.1:6379> flushdb
OK
127.0.0.1:6379> get key1
(nil)
#清空所有库

127.0.0.1:6379> flushall

五、Redis 主从复制  

5.1、环境配置 

• redis-node1 master：172.25.254.10
• redis-node2 slave：172.25.254.20
• redis-node3 slave：172.25.254.30

注：在配置多台redis时建议用复制的方式节省编译时间 

5.2、配置主从同步 

1.修改mastser节点的配置文件 

这里检测安全模式关没关，然后重启

[root@redis-node1 & node2 & node3 ~]# vim /etc/redis/6379.conf

protected-mode no         #关闭protected模式

[root@redis-node1 &node2 & node3 ~]# /etc/init.d/redis_6379 restart

2.配置slave节点

[root@redis-node2 & node3 utils]# vim /etc/redis/6379.conf

[root@redis-node2 & 3 ~]# /etc/init.d/redis_6379 restart

3.测试

5.3、主从同步过程

• slave节点发送同步亲求到master节点
• slave节点通过master节点的认证开始进行同步
• master节点会开启bgsave进程发送内存rbd到slave节点，在此过程中是异步操作，也就是说 master节点仍然可以进行写入动作
• slave节点收到rdb后首先清空自己的所有数据
• slave节点加载rdb并进行数据恢复
• 在master和slave同步过程中master还会开启新的bgsave进程把没有同步的数据进行缓存
• 然后通过自有的replactionfeedslave函数把未通过内存快照发动到slave的数据一条一条写入到 slave中

六、哨兵--高可用

用主两从来实现Redis的高可用架构

6.1、Redis哨兵

• Sentinel 进程是用于监控redis集群中Master主服务器工作的状态，在Master主服务器发生故障的时候， 可以实现Master和Slave服务器的切换，保证系统的高可用。
• 每个哨兵(Sentinel)进程会向其它哨兵(Sentinel)、Master、Slave定时发送消息，以确认对方是否”活” 着，如果发现对方在指定配置时间(此项可配置)内未得到回应，则暂时认为对方已离线，也就是所谓的” 主观认为宕机” (主观:是每个成员都具有的独自的而且可能相同也可能不同的意识)，英文名称： Subjective Down，简称SDOWN
• 有主观宕机，对应的有客观宕机。当“哨兵群”中的多数Sentinel进程在对Master主服务器做出SDOWN 的 判断，并且通过 SENTINEL is-master-down-by-addr 命令互相交流之后，得出的Master Server下线判 断，这种方式就是“客观宕机”(客观:是不依赖于某种意识而已经实际存在的一切事物)，英文名称是： Objectively Down， 简称 ODOWN
• 通过一定的vote算法，从剩下的slave从服务器节点中，选一台提升为Master服务器节点，然后自动修改 相关配置，并开启故障转移（failover）
• Sentinel 机制可以解决master和slave角色的自动切换问题，但单个 Master 的性能瓶颈问题无法解决,类 似于MySQL中的MHA功能
• Redis Sentinel中的Sentinel节点个数应该为大于等于3且最好为奇数

sentinel中的三个定时任务

• 每10秒每个sentinel对master和slave执行info——发现slave节点 确认主从关系
• 每2秒每个sentinel通过master节点的channel交换信息(pub/sub)——通过sentinel__:hello频道交互，交互对节点的“看法”和自身信息
• 每1秒每个sentinel对其他sentinel和redis执行pi

6.2、哨兵的实验过程

在所有阶段中关闭 protected-mode no

1、编辑配置文件

[root@redis-node1 ~]# cd redis-7.4.0/
[root@redis-node1 redis-7.4.0]# cp sentinel.conf /etc/redis/
[root@redis-node1 redis-7.4.0]# vim /etc/redis/se
[root@redis-node1 redis-7.4.0]# vim /etc/redis/sentinel.conf

protected-mode no         #关闭保护模式

port 26379         #监听端口

daemonize no        #进入不打如后台

pidfile /var/run/redis-sentinel.pid         #sentinel进程pid文件

loglevel notice         #日志级别

sentinel monitor mymaster 172.25.254.10 6379 2         #创建sentinel监控监控master主 机，2表示必须得到2票

sentinel down-after-milliseconds mymaster 10000         #master中断时长，10秒连不上视为 master下线

sentinel parallel-syncs mymaster 1         #发生故障转移后，同时开始同步新 master数据的slave数量

sentinel failover-timeout mymaster 180000         #整个故障切换的超时时间为3分钟

####复制配置文件到其他阶段

[root@redis-node1 redis-7.4.0]# scp /etc/redis/sentinel.conf root@172.25.254.20:/etc/redis/
sentinel.conf
[root@redis-node1 redis-7.4.0]# scp /etc/redis/sentinel.conf root@172.25.254.30:/etc/redis/
sentinel.conf

2、启动服务

注：/etc/redis/sentinel.conf 文件在用哨兵程序调用后会更改其配置文件，如果需要重新做需要删掉文件重新编辑

为避免重新编辑，我们备份一个

[root@redis-node1 redis]# cp sentinel.conf sentinel.conf.bak

[root@redis-node1 redis-7.4.0]# redis-sentinel /etc/redis/sentinel.conf

3、测试：

 

master被down了

 得了2票，就重新选举master

10上线后

[root@redis-node1 ~]# /etc/init.d/redis_6379 start

6.3、在整个架构中可能会出现的问题

问题：

在生产环境中如果master和slave中的网络出现故障，由于哨兵的存在会把master提出去 当网络恢复后，master发现环境发生改变，master就会把自己的身份转换成slave master变成slave后会把网络故障那段时间写入自己中的数据清掉，这样数据就丢失了。

解决：

master在被写入数据时会持续连接slave，master确保有2个slave可以写入我才允许写入 如果slave数量少于2个便拒绝写入

#在matster中设定

127.0.0.1:6379> CONFIG GET min-slaves-to-write
1) "min-slaves-to-write"
2) "0"
127.0.0.1:6379> CONFIG set min-slaves-to-write 2
OK
127.0.0.1:6379> CONFIG GET min-slaves-to-write
1) "min-slaves-to-write"
2) "2"
#如果要永久保存写到配置文件中/etc/redis/6379.conf

七、Redis Cluster（无中心化设计）

7.1、Redis Cluster 工作原理

在哨兵sentinel机制中，可以解决redis高可用问题，即当master故障后可以自动将slave提升为master， 从而可以保证redis服务的正常使用，但是无法解决redis单机写入的瓶颈问题，即单机redis写入性能受 限于单机的内存大小、并发数量、网卡速率等因素。

redis 3.0版本之后推出了无中心架构的redis cluster机制，在无中心的redis集群当中，其每个节点保存 当前节点数据和整个集群状态,每个节点都和其他所有节点连接

7.1.1、Redis Cluster特点如下

1. 所有Redis节点使用(PING机制)互联
2. 集群中某个节点的是否失效，是由整个集群中超过半数的节点监测都失效，才能算真正的失效
3. 客户端不需要proxy即可直接连接redis，应用程序中需要配置有全部的redis服务器IP
4. redis cluster把所有的redis node 平均映射到 0-16383个槽位(slot)上，读写需要到指定的redis node上进行操作，因此有多少个redis node相当于redis 并发扩展了多少倍，每个redis node 承担 16384/N个槽位
5. Redis cluster预先分配16384个(slot)槽位，当需要在redis集群中写入一个key -value的时候，会使 用CRC16(key) mod 16384之后的值，决定将key写入值哪一个槽位从而决定写入哪一个Redis节点 上，从而有效解决单机瓶颈。

7.1.2、Redis cluster 架构

假如三个主节点分别是：A, B, C 三个节点，采用哈希槽 (hash slot)的方式来分配16384个slot 的话它们 三个节点分别承担的slot 区间可以是：

节点A覆盖 0－5460

节点B覆盖 5461－10922

节点C覆盖 10923－16383

7.1.3、Redis cluster 主从架构

7.2、创建redis cluster前提

1.每个redis node节点采用相同的硬件配置、相同的密码、相同的redis版本。

2.每个节点必须开启的参数 cluster-enabled yes #必须开启集群状态，开启后redis进程会有cluster显示 cluster-config-file nodes-6380.conf #此文件有redis cluster集群自动创建和维护，不需要任何手 动操作

3.所有redis服务器必须没有任何数据

4.先启动为单机redis且没有任何key value

7.3、部署redis cluster

我这儿部署是将前面三台的源码安装删除了，然后重新起了三台做的

 [root@redis-node3 ~]# ls
anaconda-ks.cfg  Documents  Music     Public       Templates
Desktop          Downloads  Pictures  redis-7.4.0  Videos
[root@redis-node3 ~]# rm -rf redis-7.4.0/
[root@redis-node3 ~]# cd /etc/init.d/
[root@redis-node3 init.d]# rm -rf redis_6379
[root@redis-node3 etc]# rm -rf redis/
[root@redis-node3 etc]# rm -rf /usr/local/bin/*
[root@redis-node3 ~]# rm -rf /var/lib/redis/
[root@redis-node3 log]# rm -rf /var/log/redis_6379.log

在所有redis主机中

[root@redis-node1 ~]# yum install redis -y
[root@redis-node1 ~]# vim /etc/redis/redis.conf

masterauth "123456"         #集群主从认证

requirepass "123456"         #redis登陆密码 redis-cli 命令连接redis后要 用“auth 密码”进行认证

cluster-enabled yes         #开启cluster集群功能

cluster-config-file nodes-6379.conf         #指定集群配置文件

cluster-node-timeout 15000         #节点加入集群的超时时间单位是ms

[root@redis-node1 ~]# systemctl enable --now redis.service

[root@redis-node1 ~]# redis-cli
127.0.0.1:6379> auth 123456
OK

7.4、redis-cli --cluster 参数说明

[root@redis-node1 ~]# redis-cli --cluster help

Cluster Manager Commands:

create         #创建集群

                --cluster-replicas         #指定master的副本数

check               #检测集群信息

info                   #查看集群信息

fix                     #修复集群

reshard             #在线热迁移集群指定主机的slots数据

rebalance         #平衡各集群主机的slot数量

add-node         #添加主机

del-node          #删除主机

import              #导入外部redis服务器的数据到 当前集群

7.5、创建redis-cluster

[root@redis-node1 ~]# redis-cli --cluster create -a 123456 \
> 172.25.254.10:6379 172.25.254.20:6379 172.25.254.30:6379 \
> 172.25.254.110:6379 172.25.254.120:6379 172.25.254.130:6379 \
> --cluster-replicas 1

配置文件位置

[root@redis-node1 ~]# ll /var/lib/redis/nodes-6379.conf
-rw-r--r--. 1 redis redis 808 Aug 26 23:31 /var/lib/redis/nodes-6379.conf

检测redis集群状态

[root@redis-node1 ~]# redis-cli -a 123456 --cluster info 172.25.254.10:6379

[root@redis-node1 ~]# redis-cli -a 123456 cluster info

#检测集群

[root@redis-node1 ~]# redis-cli -a 123456 --cluster check 172.25.254.10:6379

写入数据

被分配到20的hash槽位上，这里就写入不了

可以在20上写入

7.6、集群扩容

 是自动分配谁是master，谁是slave

 #添加master 

[root@redis-node1 ~]# redis-cli -a 123456 --cluster add-node 172.25.254.40:6379 172.25.254.10:6379
[root@redis-node1 ~]# redis-cli -a 123456 --cluster info 172.25.254.10:6379

#分配槽位 

[root@redis-node1 ~]# redis-cli -a 123456 --cluster reshard 172.25.254.10:6379

分配4096给40的，从所有master中分摊给他

#添加salve

[root@redis-node1 ~]# redis-cli -a 123456 --cluster add-node 172.25.254.140:6379 172.25.254.10:6379 --cluster-slave --cluster-master-id 208791da38b99a73d7606917762a7f31c0f7e7a2

将140给40做slave

40从没有slave，变得有了slave

7.7、clsuter集群维护

• 添加节点的时候是先添加node节点到集群，然后分配槽位
• 删除节点的操作与添加节点的操作正好相反，是先将被删除的Redis node上的槽位迁移到集群中的其他Redis node节点上，然后再将其删除
• 如果一个Redis node节点上的槽位没有被完全迁移，删除该node的时候会提示有数据且无法删除。

1、移除要下线主机的哈希槽位

[root@redis-master2 ~]# redis-cli -a 123456 --cluster reshard 172.25.254.10:6379

将40的槽位给20

第一个id填20的，第二个填40的

2、删除slave/空的master

[root@redis-node1 ~]# redis-cli -a 123456 --cluster del-node 172.25.254.140:6379 3201d2282262b513e86e6d19a3e517da90af1b1d
[root@redis-node1 ~]# redis-cli -a 123456 --cluster del-node 172.25.254.40:6379 208791da38b99a73d7606917762a7f31c0f7e7a2