linux redis集群安装（详细）

最新推荐文章于 2024-08-01 17:23:57 发布
最新推荐文章于 2024-08-01 17:23:57 发布
阅读量872 收藏 22
点赞数 5
文章标签： redis redis集群 linux
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/qq_35192792/article/details/89161577
版权

在inux中搭建并使用Redis集群。

Redis集群介绍

Redis 集群是一个提供在多个Redis间节点间共享数据的程序集。

Redis集群并不支持处理多个keys的命令,因为这需要在不同的节点间移动数据,从而达不到像Redis那样的性能,在高负载的情况下可能会导致不可预料的错误.

Redis 集群通过分区来提供一定程度的可用性,在实际环境中当某个节点宕机或者不可达的情况下继续处理命令. Redis 集群的优势:

  • 自动分割数据到不同的节点上。
  • 整个集群的部分节点失败或者不可达的情况下能够继续处理命令。

搭建redis集群使用的环境

  • linux ：CentOS 7
  • redis ：redis-5.0.3

我这里将搭建一个3主3从的redis集群，共使用2台机器。

  • 机器1：10.80.9.65
  • 机器2：10.80.9.69

下面开始redis集群的安装搭建

1. redis下载

在根目录下创建文件夹

mkdir app

下载redis（两台机器中都需要下载）

wget http://download.redis.io/releases/redis-5.0.3.tar.gz

3. redis集群搭建

解压redis安装文件

tar -zxvf redis-5.0.3.tar.gz

进入redis目录

cd redis-5.0.3

编译

make

出现以下错误则需要安装gcc

make[3]: gcc: Command not found
make[3]: *** [net.o] Error 127
make[3]: Leaving directory /app/redis-5.0.3/deps/hiredis' make[2]: *** [hiredis] Error 2 make[2]: Leaving directory/app/redis-5.0.3/deps’
make[1]: [persist-settings] Error 2 (ignored)
CC adlist.o
/bin/sh: cc: command not found
make[1]: *** [adlist.o] Error 127
make[1]: Leaving directory `/app/redis-5.0.3/src’
make: *** [all] Error 2

yum -y install gcc

再次make碰到以下错误

zmalloc.h:50:31: fatal error: jemalloc/jemalloc.h: No such file or directory
#include <jemalloc/jemalloc.h>
^
compilation terminated.
make[1]: *** [adlist.o] Error 1
make[1]: Leaving directory `/app/redis-5.0.3/src’
make: *** [all] Error 2

解决：使用 make MALLOC=libc 命令进行编译

创建redis集群目录：

mkdir /usr/local/redis-cluster

进入 redis-cluster 目录

cd /usr/local/redis-cluster

在 10.80.9.65 机器中创建 7001 7002 7003 目录

mkdir 7001 7002 7003

在 10.80.9.69 机器中创建 7004 7005 7006 目录

mkdir 7004 7005 7006

将redis.conf文件复制到 7001 - 7006目录中

redis.conf 修改成以下内容：

#端口7001,7002,7003     
port  7001
#本机ip                                       				 										   
bind 10.80.9.65      
#redis后台运行                         													
daemonize yes           
#pidfile文件对应7001,7002,7003                     												
pidfile /usr/local/redis-cluster/redis-7001.pid       		
#开启集群 				 
cluster-enabled  yes 
#集群的配置  配置文件首次启动自动生成 7000,7001,7002                       										 
cluster-config-file  /usr/local/redis-cluster/nodes-7001.conf  
#请求超时  默认15秒，可自行设置
cluster-node-timeout  15000             
#aof日志开启  有需要就开启，它会每次写操作都记录一条日志  
appendonly  no

7002 - 7006 也是同样的内容，只需修改对应的ip端口等。

以下是我个人的redis.conf的配置

#引入redis公用的配置文件
include /usr/local/redis-cluster/etc/redis-common.conf
port 7001
#redis持久化文件存放路径
dir /data/redis-cluster/7001/
pidfile /usr/local/redis-cluster/7001/redis-7001.pid
logfile /usr/local/redis-cluster/7001/redis-7001.log
cluster-config-file /usr/local/redis-cluster/7001/nodes-7001.conf

redis-common.conf 中的配置，基本都是redis的默认值

bind 10.80.9.65
protected-mode yes
#密码
#masterauth "test123"
#requirepass "test123"
tcp-backlog 511
timeout 0
tcp-keepalive 300
daemonize yes
supervised no
loglevel notice
databases 16
always-show-logo yes
save 900 1
save 300 10
save 60 10000
stop-writes-on-bgsave-error yes
rdbcompression yes
rdbchecksum yes
dbfilename dump.rdb
replica-serve-stale-data yes
replica-read-only yes
repl-diskless-sync no
repl-diskless-sync-delay 5
repl-disable-tcp-nodelay no
replica-priority 100
lazyfree-lazy-eviction no
lazyfree-lazy-expire no
lazyfree-lazy-server-del no
replica-lazy-flush no
appendonly no
appendfilename "appendonly.aof"
appendfsync everysec
no-appendfsync-on-rewrite no
auto-aof-rewrite-percentage 100
auto-aof-rewrite-min-size 64mb
aof-load-truncated yes
aof-use-rdb-preamble yes
lua-time-limit 5000
cluster-enabled yes
cluster-node-timeout 15000
slowlog-log-slower-than 10000
slowlog-max-len 128
latency-monitor-threshold 0
notify-keyspace-events ""
hash-max-ziplist-entries 512
hash-max-ziplist-value 64
list-max-ziplist-size -2
list-compress-depth 0
set-max-intset-entries 512
zset-max-ziplist-entries 128
zset-max-ziplist-value 64
hll-sparse-max-bytes 3000
stream-node-max-bytes 4096
stream-node-max-entries 100
activerehashing yes
client-output-buffer-limit normal 0 0 0
client-output-buffer-limit replica 256mb 64mb 60
client-output-buffer-limit pubsub 32mb 8mb 60
hz 10
dynamic-hz yes
aof-rewrite-incremental-fsync yes
rdb-save-incremental-fsync yes

在这里插入图片描述
在这里插入图片描述
配置文件修改完成后，启动每个节点

机器1：

/app/redis-5.0.3/src/redis-server /usr/local/redis-cluster/7001/redis-7001.conf
/app/redis-5.0.3/src/redis-server /usr/local/redis-cluster/7002/redis-7002.conf
/app/redis-5.0.3/src/redis-server /usr/local/redis-cluster/7003/redis-7003.conf

查看是否启动

ps -ef|grep redis

在这里插入图片描述
机器2：

/app/redis-5.0.3/src/redis-server /usr/local/redis-cluster/7004/redis-7004.conf 
/app/redis-5.0.3/src/redis-server /usr/local/redis-cluster/7005/redis-7005.conf 
/app/redis-5.0.3/src/redis-server /usr/local/redis-cluster/7006/redis-7006.conf

查看是否启动

ps -ef|grep redis

在这里插入图片描述
启动集群

   /app/redis-5.0.3/src/redis-cli --cluster create 10.80.9.65:7001 10.80.9.65:7002 10.80.9.65:7003 10.80.9.69:7004 10.80.9.69:7005 10.80.9.69:7006 --cluster-replicas 1

出现以下错误：
No route to host
清除防火墙策略，正式环境请谨慎操作以下命令

 iptables -F

在这里插入图片描述
Adding replica 10.80.9.69:7005 to 10.80.9.65:7001
Adding replica 10.80.9.65:7003 to 10.80.9.69:7004
Adding replica 10.80.9.69:7006 to 10.80.9.65:7002

主从对应关系，前面是从节点后面是主节点
在这里插入图片描述
这样就已经成功了。

集群的启停

redis 5 提供了关闭集群的工具，在如下目录：

/app/redis-5.0.3/utils/create-cluster

打开此文件修改端口为我们自己的，如下所示：
在这里插入图片描述
在这里插入图片描述
端口PROT设置为7000，NODES为6，工具会自动累加1 生成 7001-7006 六个节点 用于操作。

修改后集群关闭命令如下：

/app/redis-5.0.3/utils/create-cluster/create-cluster stop

启动命令

/app/redis-5.0.3/utils/create-cluster/create-cluster start

也可以自己编写脚本进行启动：
机器1：

 #!/bin/sh
  if [ `ps -ef|grep redis-server|grep -v grep|wc -l` -gt 0 ] ; then
      ps -ef|grep redis-server|grep -v grep|awk '{print $2}'|xargs kill -9
  fi
  /app/redis-5.0.3/src/redis-server /usr/local/redis-cluster/7001/redis-7001.conf
  /app/redis-5.0.3/src/redis-server /usr/local/redis-cluster/7002/redis-7002.conf
  /app/redis-5.0.3/src/redis-server /usr/local/redis-cluster/7003/redis-7003.conf

机器2：

 #!/bin/sh
    if [ `ps -ef|grep redis-server|grep -v grep|wc -l` -gt 0 ] ; then
         ps -ef|grep redis-server|grep -v grep|awk '{print $2}'|xargs kill -9
     fi
    /app/redis-5.0.3/src/redis-server /usr/local/redis-cluster/7004/redis-7004.conf 
    /app/redis-5.0.3/src/redis-server /usr/local/redis-cluster/7005/redis-7005.conf 
    /app/redis-5.0.3/src/redis-server /usr/local/redis-cluster/7006/redis-7006.conf

在这里插入图片描述
将上面内容复制到脚本中，对应机器

vim .startRedis.sh

在这里插入图片描述
在这里插入图片描述

cd $home

在这里插入图片描述

vim .bash_profile

在这里插入图片描述

alias startRedis='sh /usr/local/redis-cluster/.startRedis.sh'

在这里插入图片描述

source .bash_profile

直接输入 startRedis命令就可以启动本台机器上的redis节点
在这里插入图片描述

5. redis集群使用

在第一台机器上连接集群的7002端口的节点，在另外一台连接7006节点，连接方式为 /app/redis-5.0.3/src/redis-cli -h 10.80.9.65 -c -p 7002 ,加参数 -C 可连接到集群，因为上面 redis.conf 将 bind 改为了ip地址，所以 -h 参数不可以省略。
在这里插入图片描述

set hello word

在这里插入图片描述
这个键插入到了7001节点， 7001节点的从节点是10.80.9.69 7005节点，数据也会自动插入到从节点，我们可以验证一下。
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
简单说一下原理

redis cluster在设计的时候，就考虑到了去中心化，去中间件，也就是说，集群中的每个节点都是平等的关系，都是对等的，每个节点都保存各自的数据和整个集群的状态。每个节点都和其他所有节点连接，而且这些连接保持活跃，这样就保证了我们只需要连接集群中的任意一个节点，就可以获取到其他节点的数据。

Redis 集群没有并使用传统的一致性哈希来分配数据，而是采用另外一种叫做哈希槽 (hash slot)的方式来分配的。redis cluster 默认分配了 16384 个slot，当我们set一个key 时，会用CRC16算法来取模得到所属的slot，然后将这个key 分到哈希槽区间的节点上，具体算法就是：CRC16(key) % 16384。所以我们在测试的时候看到set 和 get 的时候，直接跳转到了7001端口的节点。

Redis 集群会把数据存在一个 master 节点，然后在这个 master 和其对应的salve 之间进行数据同步。当读取数据时，也根据一致性哈希算法到对应的 master 节点获取数据。只有当一个master 挂掉之后，才会启动一个对应的 salve 节点，充当 master 。

需要注意的是：必须要3个或以上的主节点，否则在创建集群时会失败，并且当存活的主节点数小于总节点数的一半时，整个集群就无法提供服务了。

fanls_strive
关注
  • 5
    点赞
  • 踩
  • 22
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
在linux环境安装Redis集群
03-16
"在Linux环境安装Redis集群" 标题中的知识点：Redis集群、Linux环境 描述中的知识点：Redis集群、Linux环境 标签中的知识点：Redis、Linux、数据库、缓存 在Linux环境安装Redis集群的知识点： 1. Redis集群的...
centos7 redis-sentinel哨兵模式搭建
sanglimeng的博客
09-27 1750
前言 实际MES项目需要用到redis缓存，单机redis不适合正式环境部署，因此考虑 Redis 服务器集群，实现主从配置和容灾部署，使得主机出现故障时，可自动进行容灾切换，下面就详细讲解一下如何利用 Redis 来实现。 ...
linux 安装redis集群
红桃峰峰 的博客
12-05 3202
单间过程中注意的问题： 1、记得redis.conf中的密码 1)requirepass aidouwenhua123 2)masterauth aidouwenhua123 2、启动集群报错： 1)startcluster.sh: line 1: redis-cli: command not found 解决 https://www.whmblog.cn/cache/69.html ...
Redis Cluster集群配置安装
最新发布
zhangjunli的博客
08-01 945
Redis集群是一种基于数据分片（sharding）的分布式缓存和存储系统。是一个由多个主从节点群组成的分布式服务集群，它具有复制、高可用和分片特性。Redis集群不需要sentinel哨兵也能完成节点移除和故障转移的功能。需要将每个节点设置成集群模式，这种集群模式没有中心节点，可水平扩展，据官方文档称可以线性扩展到上万个节点(官方推荐不超过1000个节点)。redis集群的性能和高可用性均优于之前版本的哨兵模式，且集群配置非常简单。
Linux部署Redis集群
IT
11-07 5850
Redis简介 Redis (REmote DIctionary Server) 是完全开源的，遵守 BSD 协议，是一个高性能的 key-value 数据库。 Redis 与其他 key - value 缓存产品相比有以下三个特点： Redis支持数据持久化，可以将内存中的数据保存在磁盘中，重启时可以再次加载进行使用。 Redis不仅仅支持简单的key-value类型数据，同时还提供list，set，zset，hash等数据结构的存储。 Redis支持数据的备份，即master-slave模式的数据备份
Linux搭建redis集群
Guozr7的博客
11-26 1762
搭建redis集群
集群与分布式
大河向东流的博客
08-24 389
集群与分布式的区别 相同点： 分布式和集群都是需要有很多节点服务器通过网络协同工作完成整体的任务目标。 不同点： 分布式是指将业务系统进行拆分，即分布式的每一个节点都是实现不同的功能。而集群每个节点做的是同一件事情。 简单来说，集群就是很多机器上部署相同的服务，分布式就是很多机器上部署不同的服务 分布式是指将业务系统进行拆分，即分布式的每一个节点都是实现不同的功能。而集群每个节点做的是...
Linux下的redis安装以及redis集群的搭建_基于Redis3.2.1版本
a1035082174的博客
03-28 2593
Linux中部署redis3.2.1版本及遇到的问题
linux安装redis 单机版以及集群
09-27
下面将详细介绍如何在Linux上安装Redis的单机版以及设置Redis集群。 **一、Linux上安装Redis单机版** 1. **更新系统** 在开始安装前，首先确保系统是最新的。对于基于Debian的系统（如Ubuntu），可以使用以下命令...
linux redis集群部署
08-10
### Linux Redis 集群部署详解 #### 一、Redis Cluster 概览 Redis 自 3.0 版本开始支持集群模式(Cluster)，该功能为 Redis 带来了水平扩展的能力，允许用户将数据分布在多个 Redis 实例上，从而提高性能并确保高...
linux Redis集群负载均衡部署完成
05-31
linux redis单个和redis集群部署完成 技术：redis集群 说明包含： redis安装包 Redis集群负载均衡部署帮助文档 Redis集群负载均衡使用帮助文档 Redis集群负载均衡遇到问题解决文档 redis网页资料 linux内网...
linux redis安装及redis集群创建
07-15
在本文中，我们将深入探讨如何在CentOS 6.6操作系统上安装Redis 3.2.5，并且详细讲解如何创建一个Redis集群。Redis是一种内存数据存储系统，常用于数据库、缓存和消息中间件，因其高效性能而备受青睐。 首先，让...
Linux：Redis搭建集群
leen的博客
08-08 4129
RedisCluster实现了对Redis的水平扩容，即启动N个Redis节点，将整个数据库分布存储在这N个节点当中，每个节点存储总数据的1/N。为了使得集群在一部分节点宕机或者无法与集群的大多数节点进行通讯的情况下，仍然可以正常运作，Redis 集群对节点使用了主从复制功能。好了，今天的分享就到此结束了，希望可以对您有帮助！Redis-Cluster采用无中心结构，每个节点保存数据和整个集群状态,每个节点都和其他所有节点连接,用来交换彼此的信息。集群中的每个节点负责处理一部分哈希槽。...........
linux环境redis集群部署-手把手教程(小白必看)
wy13103359239的博客
01-12 1964
按照要求需要搭建redis集群,3主3从,一共3台服务器。
Linux搭建Redis集群
KaoriSamui的博客
06-25 405
使用命令 /usr/local/redis-5.0.8/src/redis-cli --cluster create 服务器IP:port1 服务器IP:port1 服务器IP:port1 服务器IP:port1 服务器IP:port1 服务器IP:port1 --cluster-replicas 1。6.进入/usr/local（redis-5.0.8同级目录），并创建集群文件夹redis_cluster。8.分别复制redis-5.0.8文件夹中的服务端和配置文件到7001-7006中。
linux安装Redis并搭建集群
Yanping-1003
04-25 633
安装redis：不管是安装redis的单机、哨兵还是集群第一步都是安装redis，我这边选择源码编译安装模式下载源码压缩包解压并编译源码启动测试配置redis集群：两台机器配置拥有三主三从共6个服务的redis集群新建集群配置文件redis.conf：这个文件将填写一些集群必要的配置；配置防火墙白名单：将redis集群需要用到的端口加入到ip白名单访问；启动所有redis服务：这里将创建redis用户，并使用redis用户启动redis；集群创建。
在Linux上安装Redis集群(redis-6.2.5)
zhangbeizhen18的博客
06-07 1220
记录：441 场景：在CentOS 7.9操作系统上，使用redis-6.2.5版本，在三台机器上，安装Redis集群。
Redis基于Linux系统的安装与集群搭建
qq_38598769的博客
08-23 520
Redis基于Linux下的单机安装和集群搭建
CentOS上Redis集群安装全攻略
本指南将详细阐述如何在Linux上安装Redis以及设置Redis集群。 首先，我们需要准备一个运行CentOS的服务器，其IP地址为10.0.2.165。在这个服务器上，我们将安装六个Redis节点，以构建一个基本的Redis集群。 ### 1. ...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值