NoSQL之Redis集群

最新推荐文章于 2022-07-08 18:06:31 发布
最新推荐文章于 2022-07-08 18:06:31 发布
阅读量180 收藏 1
点赞数
分类专栏： 笔记及项目 文章标签： nosql redis linux
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_49343462/article/details/111309004
版权

这里写目录标题

问题

  • 单节点Redis服务器带来的问题
    1、单点故障，服务不可用
    2、无法处理大量的并发数据
    3、请求数据丢失—大灾难

  • 解决方法
    1、搭建Redis集群

Redis集群介绍

  • Redis集群是一个提供在多个Redis间节点间共享数据的程序集
  • Redis集群并不支持处理多个keys的命令,因为这需要在不同的节点间移动数据,从而达不到像Redis那样的性能,在高负载的情况下可能会导致不可预料的错误
  • Redis集群通过分区来提供—定程度的可用性,在实际环境中当某个节点宕机或者不可达的情况下可继续处理命令

Redis集群的优势

  • 自动分割数据到不同的节点上
  • 整个集群的部分节点失败或者不可达的情况下能够继续处理命令

Redis集群的实现方法

  • 有客户端分片
  • 代理分片
  • 服务器端分片

Redis-Cluster数据分片

  • Redis 集群没有使用一致性hash,而是引入了哈希槽概念

  • Redis 集群有16384个哈希槽

  • 每个key通过CRC16校验后对16384取模来决定放置槽

  • 集群的每个节点负责一部分哈希槽

  • 以3个节点组成的集群为例
    1、节点A包含0到5500号哈希槽
    2、节点B包含5501到11000号哈希槽
    3、节点C包含11001到16383号哈希槽

  • 支持添加或者删除节点
    1、添加删除节点无需停止服务
    2、例如
    ·如果想新添加个节点D,需要移动节点A,B,C中的部分槽到D上
    ·如果想移除节点A，需要将A中的槽移到B和C节点上，再将没有任何槽的A节点从集群中移除

Redis-Cluster的主从复制模型

  • 集群中具有A，B，C三个节点,如果节点B失败了，整个集群就会因缺少5501-11000这个范围的槽而不可用
  • 为每个节点添加一个从节点A1，B1，C1,整个集群便有三个master节点和三个slave节点组成，在节点B失败后，集群便会选举B1为新的主节点继续服务
  • 当B和B1都失败后，集群将不可用

项目：配置NoSQL数据库群集

准备6台服务器，3台为MSATER，3台为SLAVE

安装依赖包及NoSQL

6台机器都安装NoSQL

[root@server1 ~]# tar zxvf redis-5.0.4.tar.gz
[root@server1 ~]# cd redis-5.0.4/
[root@server1 redis-5.0.4]# make
[root@server1 redis-5.0.4]# make PREFIX=/usr/local/redis install
[root@server1 redis-5.0.4]# ln -s /usr/local/redis/bin/* /usr/local/bin/
[root@server1 ~]# cd redis-5.0.4/utils
[root@server1 utils]# ./install_server.sh

在这里插入图片描述

修改配置文件

修改6台机器

[root@server1 utils]# vim /etc/redis/6379.conf
bind 20.0.0.10  //修改地址为本机ip
cluster-enabled yes  //前面#注释去掉
appendonly yes    //修改
cluster-config-file nodes-6379.conf   //前面#注释去掉
cluster-node-timeout 15000    //前面#注释去掉
cluster-require-full-coverage no     //前面#注释去掉，yes改为no

在这里插入图片描述

选择Server1编辑群集脚本

在这里插入图片描述

[root@server1 ~]# yum -y install ruby rubygems
[root@server1 ~]# gem install redis-3.2.0.gem
[root@server1 ~]# redis-cli --cluster create --cluster-replicas 1 20.0.0.10:6379 20.0.0.11:6379 20.0.0.12:6379 20.0.0.13:6379 20.0.0.14:6379 20.0.0.15:6379
在这里插入图片描述

测试群集

使用server2连接server1并添加信息

[root@server2 ~]# redis-cli -h 20.0.0.10 -p 6379
20.0.0.10:6379> set centos7.6
(error) ERR wrong number of arguments for 'set' command
20.0.0.10:6379> set centos 7.6
OK

在这里插入图片描述

在server1上验证

[root@server1 ~]# redis-cli -h 20.0.0.10 -p 6379
20.0.0.10:6379> get centos
"7.6"

在这里插入图片描述

这时候用server3访问，得出值在server1上

[root@server3 ~]# redis-cli -h 20.0.0.13 -p 6379
20.0.0.13:6379> get centos
(error) MOVED 467 20.0.0.10:6379

在这里插入图片描述

在server1上添加

[root@server1 ~]# redis-cli -h 20.0.0.10 -p 6379 -c
20.0.0.10:6379> set centos 7.5
OK
20.0.0.10:6379> set centos2 7.5
OK

在这里插入图片描述

在server3上验证

[root@server3 ~]# redis-cli -h 20.0.0.13 -p 6379 -c
20.0.0.13:6379> get centos2
-> Redirected to slot [5424] located at 20.0.0.10:6379  //提示信息在server上，并自动切换到server1数据库上的
"7.5"
20.0.0.10:6379> get centos
"7.5"

在这里插入图片描述

于server5上访问效果相同

[root@server5 ~]# redis-cli -h 20.0.0.14 -p 6379 -c
20.0.0.14:6379> get centos2
-> Redirected to slot [5424] located at 20.0.0.10:6379
"7.5"
20.0.0.10:6379>

在这里插入图片描述

群集信息

server2

[root@server2 ~]# redis-cli -h 20.0.0.11 -p 6379 -c
20.0.0.11:6379> cluster info
cluster_state:ok
cluster_slots_assigned:16384
cluster_slots_ok:16384
cluster_slots_pfail:0
cluster_slots_fail:0
cluster_known_nodes:6
cluster_size:3
cluster_current_epoch:6
cluster_my_epoch:2
cluster_stats_messages_ping_sent:1508
cluster_stats_messages_pong_sent:1497
cluster_stats_messages_meet_sent:3
cluster_stats_messages_sent:3008
cluster_stats_messages_ping_received:1493
cluster_stats_messages_pong_received:1511
cluster_stats_messages_meet_received:4
cluster_stats_messages_received:3008
20.0.0.11:6379> 

20.0.0.11:6379> cluster nodes
d89ea9b0d8fe2b9e8c0039d3e3ac4849f4f634c8 20.0.0.10:6379@16379 master - 0 1608188867832 1 connected 0-5460
8326925fd6dc9439e844593d0c89007947261228 20.0.0.14:6379@16379 slave d89ea9b0d8fe2b9e8c0039d3e3ac4849f4f634c8 0 1608188865796 5 connected
1cc07b039bbf40ebcd1f8ff1509e4250a669dedd 20.0.0.13:6379@16379 slave e145f610c3d8f6680d23f5c0a770cf8156c9d2c1 0 1608188866000 3 connected
3e7c17fcde349938293856358d668fcfbb6f1e32 20.0.0.11:6379@16379 myself,master - 0 1608188866000 2 connected 5461-10922
3dba3d90753a81e04da7a9f304570b10cc0826f4 20.0.0.15:6379@16379 slave 3e7c17fcde349938293856358d668fcfbb6f1e32 0 1608188865000 2 connected
e145f610c3d8f6680d23f5c0a770cf8156c9d2c1 20.0.0.12:6379@16379 master - 0 1608188866812 3 connected 10923-16383
20.0.0.11:6379>

同时使用同一数据库互不干涉

server3正在连接数据库

[root@server3 ~]# redis-cli -h 20.0.0.12 -p 6379 -c
20.0.0.12:6379> set k1 1
OK
20.0.0.12:6379>

在这里插入图片描述

server2可以添加数据

20.0.0.11:6379> set k6 6
-> Redirected to slot [325] located at 20.0.0.10:6379
OK
20.0.0.10:6379>

在这里插入图片描述

咕咕咕daisy！
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
NoSQL之Redis主从复制集群部署.pdf
08-18
NoSQL之Redis主从复制集群部署.pdf
Redis群集
Parhoia的博客
12-17 338
Redis群集的搭建 实验环境 用两台服务器模拟6台服务器（添加网卡） 主服务器M1 192.168.13.128 主服务器M2 192.168.13.135 主服务器M3 192.168.13.136 从服务器S1 192.168.13.129 从服务器S2 192.168.13.137 从服务器S3 192.168.13.138 软件版本：redis-5.0.7 1、在两台服...
Redis 主从复制、哨兵、集群
weixin_50355475的博客
02-26 313
Redis 集群一、Redis 集群 一、Redis 集群 1、主从复制：主从复制是高可用Redis的基础，哨兵和集群都是在主从复制基础上实现高可用的。主从复制主要实现了数据的多机备份，以及对于读操作的负载均衡和简单的故障恢复。缺陷：故障恢复无法自动化；写操作无法负载均衡；存储能力受到单机的限制。 2、哨兵：在主从复制的基础上，哨兵实现了自动化的故障恢复。缺陷：写操作无法负载均衡；存储能力受到单机的限制；哨兵无法对从节点进行自动故障转移，在读写分离场景下，从节点故障会导致读服务不可用，需要对从节点做额外的监
nosql数据库redis
08-06
在分布式系统中，Redis提供了主从复制、哨兵（Sentinel）监控和Cluster集群等解决方案，以支持高可用性和水平扩展。主从复制可以实现数据备份，哨兵系统可以监控并自动故障转移，而Redis Cluster则能在多台服务器上...
NoSql之Redis基于Linux开发部署+面试题讲解
06-10
本课程共28节，内容包括nosql基本特点，linux环境下的下载安装与启动，常用命令，...redis事务，jedis操作，主从复制与读写分离，哨兵机制，ruby环境配置，redis集群搭建，集群特性总结，springmvc集成，面试题讲解等。
Linux下Redis集群 搭建教程
01-29
Redis是nosql数据库管理系统，而Ruby是脚本语言，用于执行redis-trib.rb脚本，来创建和管理Redis集群。 二、安装Redis 首先，需要安装Redis。可以使用yum install redis来安装Redis。在安装完成后，需要创建一个主...
第6章 Redis集群环境部署.pptx
最新发布
05-31
详细讲解了Redis集群环境的部署，涵盖了主从复制、哨兵模式以及Redis Cluster集群的构建和配置。本章首先介绍了主从复制的概念、特点、好处以及实现原理，并提供了具体的安装和配置步骤。接着，文档深入探讨了哨兵...
超详细Openstack核心组件——Keystone介绍及部署
热门推荐
咕咕咕daisy！
02-18 1万+
Keystone身份服务 Keystone职能 Keystone (OpenStack ldentityService）是OpenStack中的一个独立的提供安全认证的模块，主要负责openstack用户的身份认证、令牌管理、提供访问资源的服务目录(指引路径)、以及基于用户角色的访问控制。 Keystone提供路径指引服务前提 Keystone类似一个服务总线，或者说是整个Openstack框架的注册表，其他服务通过keystone来注册其服务的Endpoint(服务访问的URL)，任何服务之间相互的
超详细Openstack核心组件——nova介绍及部署
咕咕咕daisy！
02-18 1万+
目录OpenStack-nova组件部署nova组件部署位置计算节点Nova服务配置(CT配置)计算节点配置Nova服务-c1节点配置计算节点-c2（与c1相同）（除了IP地址）controller节点操作总结 OpenStack-nova组件部署 继之前Placement部署之后，继续部署nova nova组件部署位置 控制节点ct ​nova-api（nova主服务） ​nova-scheduler（nova调度服务） ​nova-conductor（nova数据库服务，提供数据库访问） ​nova
k8s-prometheus+grafana+alertmanager监控加邮件告警
咕咕咕daisy！
12-09 6515
目录创建命令空间部署prometheus部署alertmanger邮件告警部署grafana配置grafana监控模板 创建命令空间 [root@k8s-master1 ~]#kubectl create ns ops 部署prometheus prometheus-configmap.yaml apiVersion: v1 kind: ConfigMap metadata: name: prometheus-config namespace: ops data: prometheus.ym
K8S使用NFS动态存储（csi-nfs-driver）
咕咕咕daisy！
12-09 4576
K8S使用NFS动态（csi-nfs-driver）配置nfs服务器k8s-master部署csi-nfs-driver插件测试创建pod，使用local-storage动态创建pvcnfs服务器查看挂载 配置nfs服务器 [root@localhost ~]#yum install nfs-utils rpcbind -y、 [root@localhost ~]#mkdir -p /data/nfs/ [root@localhost ~]#chmod 755 /data/nfs/ [root@localh
K8S使用LOKI实现日志收集
咕咕咕daisy！
07-08 4566
Loki 是 Grafana Labs 团队最新的开源项目，是一个水平可扩展，高可用性，多租户的日志聚合系统。它的设计非常经济高效且易于操作，因为它不会为日志内容编制索引，而是为每个日志流编制一组标签，专门为 Prometheus 和 Kubernetes 用户做了相关优化。Promtail 作为采集器，类比 filebeatLoki 相当于服务端，类比 esLoki 进程包含四种角色：querier 查询器inester 日志存储器query-frontend 前置查询器distributor 写入分发器
超详细Openstack核心组件——Glance介绍及部署
咕咕咕daisy！
02-18 2848
目录项目：OpenStack-Glance组件部署创建数据库实例和数据库用户创建用户、修改配置文件总结 项目：OpenStack-Glance组件部署 创建数据库实例和数据库用户 [root@ct ~]# mysql -u root -p Enter password: Welcome to the MariaDB monitor. Commands end with ; or \g. Your MariaDB connection id is 36 Server version: 10.3.20-Ma
超详细OpenStack介绍及一键化部署
咕咕咕daisy！
01-21 2713
云计算 云计算概述 概念： 狭义的云计算是指IT基础设施的交付和使用模式 广义的云计算是指服务的交付和使用模式 云计算资源 网络资源 存储资源 计算资源 … 云计算的定义 云计算是一个模型，这个模型可以方便地按需访问一个可配置的计算资源（例如，网络、服务器、存储设备、应用程序以及服务）的公共集。这些资源可以被迅速提供并发布，同时最小化管理成本或服务提供商的干涉。云模型由五个基本特征、三个服务模型和四个发布模型组成，如此使以上成为可能。 基本特征 : 按需自助服务 视客户需要，可以从每个服务提供商那里
超详细Openstack核心组件——neutron部署
咕咕咕daisy！
02-19 1901
目录OpenStack-neutron组件部署创建数据库neutron，并进行授权ct控制节点配置c1 节点操作c2节点操作总结 OpenStack-neutron组件部署 继nova部署完成后，继续部署neutron组件 创建数据库neutron，并进行授权 [root@ct ~]# mysql -u root -p Enter password: Welcome to the MariaDB monitor. Commands end with ; or \g. Your MariaDB conne
超详细Openstack核心组件——Dashboard部署
咕咕咕daisy！
02-19 1865
目录OpenStack-Dashboard组件部署c1配置总结 OpenStack-Dashboard组件部署 继neutron部署完成后，继续部署Dashboard组件 因为在CT控制节点已安装httpd服务，而Dashboard控制台也需要httpd支持，所以此处可以在C1节点进行安装httpd c1配置 [root@c1 ~]# yum -y install openstack-dashboard httpd 1. 修改local_setting本地控制台的配置文件 [root@c1 ~]# c
Openstack控制台操作——创建实例类型
咕咕咕daisy！
02-19 1751
同样的方法创建m2、m3实例
Shell编程正则表达式sed
咕咕咕daisy！
11-12 1675
目录定义工作流程常见用法常见的sed命令选项主要包含以下几种常见的操作包含以下几种输出内容带行号输出所有内容 等同于 cat test.txt输出第4行，或者3到5行输出偶数行；奇数行输出1到6行之间的偶数行，3到9行之间的奇数行输出以第6行到结尾之间的偶数行（即以第6行为起始行，重新排序设置）输出包含the的内容输出从第3行开始到第一个包含the的行（是一个区间过程）输出包含the的所在行的行号（等号用来输出行号）输出以PI为开头的内容；以0到9数字为结尾的内容输出包含单词home的行（<>
NoSQL 之Redis集群
06-09
Redis集群是Redis提供的高可用性解决方案，它通过将数据分散到多个节点上来实现数据的可靠性和可扩展性。 Redis集群采用分片技术来实现数据的分散存储，每个节点存储部分数据，而客户端通过集群代理来访问数据。...

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值