kubernetes statefulset redis集群部署

redis 模式对比

 

master-slave模式:

主从模式单纯的讲就是多个实例,可以是一主多从也可以是多主多从,主从模式的作用就是备份数据,数据层面的容灾,这样当一个master节点数据丢失的时候(硬件损坏),可以依据slave的数据恢复,

1.另外一个作用就是做读写分离所有读操作都会访问slave节点,减轻master节点的负载。 默认情况下master节点可以进行读和写,slave节点只能进行读操作,写操作被禁止

2.另外不要修改配置让slave节点支持写操作,没有意义,原因一,写入的数据不会被同步到其他节点;原因二,当master节点修改同一条数据后,slave节点的数据会被覆盖掉。

3.slave节点挂了不影响其他slave节点的读和master节点的读和写,重新启动后会将数据从master节点同步过来。

该种模式下,master节点挂了以后,slave不会竞选成为master。需要手动修改slaveof NO ONE

 

 

哨兵模式(sentinel):

1.sentinel模式是建立在主从模式的基础上,如果只有一个Redis节点,sentinel就没有任何意义。

2.当master节点挂了以后,sentinel会在slave中选择一个做为master,并修改它们的配置文件,其他slave的配置文件也会被修改,比如slaveof属性会指向新的master。

3.当master节点重新启动后,它将不再是master,而是作为slave接收新的master节点的同步数据

4.sentinel因为也是一个进程有挂掉的可能,所以sentinel也会启动多个形成一个sentinel集群。

5.当主从模式配置密码时,sentinel也会同步将配置信息修改到配置文件中,不需要担心。

6.一个sentinel或sentinel集群可以管理多个主从Redis。

7.sentinel最好不要和Redis部署在同一台机器,不然Redis的服务器挂了以后,sentinel也挂了。

8.sentinel监控的Redis集群都会定义一个master名字,这个名字代表Redis集群的master Redis。

当使用sentinel模式的时候,客户端就不要直接连接Redis,而是连接sentinel的ip和port,由sentinel来提供具体的可提供服务的Redis实现,这样当master节点挂掉以后,sentinel就会感知并将新的master节点提供给使用者。

Sentinel本身也支持集群,只使用单个sentinel进程来监控redis集群是不可靠的,当sentinel进程宕掉后,sentinel本身也有单点问题。所以有必要将sentinel集群,这样有几个好处:

1.如果只有一个sentinel进程,如果这个进程运行出错,或者是网络堵塞,那么将无法实现redis集群的主备切换(单点问题)。

2.如果有多个sentinel,redis的客户端可以随意地连接任意一个sentinel来获得关于redis集群中的信息。

3.sentinel集群自身也需要多数机制,也就是2个sentinel进程时,挂掉一个另一个就不可用了。

4.当有足够数量的 Sentinel(哨兵)进程(大于等于配置文件指定的值)在指定的时间范围内确认Master主服务器进入了主观下线状态(SDOWN), 则Master主服务器会被标记为客观下线(ODOWN)。

 

Sentinel模式下有个缺陷是slave节点保存的数据都是完整的,也就是说matser收到的数据会并发同步到每个slave里,这样导致占用了大量内存。

redis cluster模式:

官方推荐模式 使用hash slot方式 将16348个hash slot 覆盖到所有节点上 对于存储的每个key值 使用CRC16(KEY)&16348=slot 得到他对应的hash slot 并在访问key时就去找他的hash slot在哪一个节点上 然后由当前访问节点从实际被分配了这个hash slot的节点去取数据 节点之间使用轻量协议通信 减少带宽占用 性能很高 自动实现负载均衡与高可用 自动实现failover  并且支持动态扩展 官方已经玩到可以1000个节点 实现的复杂度低 总之个人比较喜欢这个架构 因为他的去中心化思想免去了proxy的消耗 是全新的思路

 

 

kubernetes redis cluster搭建:

git clone https://github.com/yingjianjian/docker

cd kubernetes-redis-statefulset

docker build -t test@docker.com/redis-4.0.1 .

详细见README.md

  • 1
    点赞
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
Kubernetes (k8s) 是一个容器编排平台,可以轻松地部署、管理和扩展容器化应用程序。Redis 是一个流行的开源内存数据存储系统,可用于缓存、消息传递、队列等多种场景。在 k8s 上部署 Redis 集群需要以下步骤: 1. 创建 Redis 镜像 你可以使用 Dockerfile 创建 Redis 镜像,或者从 Docker Hub 下载 Redis 镜像。例如,可以使用以下命令下载 Redis 镜像: ``` docker pull redis ``` 2. 创建 Redis 配置文件 Redis 集群需要一个配置文件来定义节点和复制策略。可以创建一个 config 文件夹,并在其中创建 redis.conf 文件,配置内容可以参考 Redis 官方文档。 3. 创建 Redis 集群的 YAML 文件 可以使用 k8s 的 YAML 文件定义 Redis 集群。以下是一个示例 YAML 文件: ```yaml apiVersion: apps/v1 kind: StatefulSet metadata: name: redis-cluster spec: serviceName: redis-cluster replicas: 6 selector: matchLabels: app: redis-cluster template: metadata: labels: app: redis-cluster spec: containers: - name: redis image: redis command: - sh args: - -c - | redis-server /config/redis.conf --port $(echo $POD_NAME | cut -d'-' -f2 | cut -d'-' -f1 | sed 's/^0*//'):6379 --cluster-enabled yes --cluster-config-file /data/nodes.conf --cluster-node-timeout 5000 --appendonly yes ports: - containerPort: 6379 name: client - containerPort: 16379 name: gossip volumeMounts: - name: config mountPath: /config - name: data mountPath: /data volumes: - name: config configMap: name: redis-cluster - name: data emptyDir: {} volumeClaimTemplates: - metadata: name: data spec: accessModes: [ "ReadWriteOnce" ] resources: requests: storage: 1Gi --- apiVersion: v1 kind: Service metadata: name: redis-cluster spec: ports: - port: 6379 name: client - port: 16379 name: gossip clusterIP: None selector: app: redis-cluster ``` 这个 YAML 文件定义了一个名为 redis-cluster 的 StatefulSet 和一个名为 redis-cluster 的 Service。StatefulSet 定义了 6 个 Redis 节点,每个节点有一个容器,使用 Redis 镜像,并在容器启动时运行 Redis 命令。每个容器都会挂载 config 文件夹和 data 文件夹,其中 config 文件夹中存放 Redis 配置文件,data 文件夹中存放 Redis 数据。Service 将端口映射到每个容器的端口,同时将 clusterIP 设置为 None,以便其他 Pod 无法通过 Service 访问 Redis 集群。 4. 部署 Redis 集群 使用以下命令部署 Redis 集群: ``` kubectl apply -f redis-cluster.yaml ``` 这将创建一个 redis-cluster 的 StatefulSet 和一个 redis-cluster 的 Service。 5. 验证 Redis 集群 可以使用以下命令验证 Redis 集群是否正常运行: ``` kubectl exec -it redis-cluster-0 -- redis-cli cluster info ``` 这将在第一个 Redis 节点上运行 redis-cli 命令,并输出 Redis 集群的信息。 以上就是在 k8s 上部署 Redis 集群的步骤。需要注意的是,Redis 集群需要至少 3 个节点才能正常运行。
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值