记录Redis集群搭建遇到的坑

最新推荐文章于 2024-07-16 20:31:12 发布
最新推荐文章于 2024-07-16 20:31:12 发布
阅读量2.8k 收藏 5
点赞数
分类专栏： redis 文章标签： redis cluster
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/lhc3636/article/details/80783059
版权

使用redis创建集群遇到的问题

1、redis的安装和ruby环境的安装

Redis的安装

安装tcl包
tar -xzvf tcl8.6.1-src.tar.gz
cd  /usr/local/tcl8.6.1/unix/
./configure  
make && make install
分别再192.168.1.250、192.168.1.251、192.168.1.252安装redis
使用redis-4.0.9.tar.gz（截止2018年6月的最新稳定版）
tar -zxvf redis-4.0.9.tar.gz
cd redis-4.0.9
make && make test && make install

修改redis的配置文件项如下端口根据需要更改
port 7001
cluster-enabled yes
cluster-config-file /etc/redis-cluster/node-7001.conf
cluster-node-timeout 15000
daemonize	yes
pidfile	/var/run/redis_7001.pid
dir /var/redis/7001
logfile /var/log/redis/7001.log
bind 192.168.31.187
appendonly yes

安装ruby环境：

tar -zxvf ruby-2.5.1.tar.gz
cd ruby-2.5.1/
./configure -prefix=/usr/local/ruby 再执行make && make install
配置环境变量在/etc/profile中添加RUBY_HOME=/usr/local/ruby
PATH=PATH:$RUBY_HOME/bin
source /etc/profile 使环境变量生效
redis -v 查看ruby的版本的信息
ruby 2.5.1p57 (2018-03-29 revision 63029) [x86_64-linux]
使用gem安装redis
gem install redis (version 4.0.1)
此时若执行gem install redis 报错如下
ERROR:  Loading command: install (LoadError) cannot load such file -- zlib
ERROR:  While executing gem ... (NoMethodError)    undefined method `invoke_with_build_args' for nil:NilClass
解决办法
cd ruby-2.5.1/ext/zlib/下
yum -y install openssl openssl-devel 更新openssl
ruby extconf.rb
将ruby-2.5.1/ext/zlib/文件夹下的MakeFile 文件尾中的zlib.o:$(top_srcdir)/include/ruby.h 改成 zlib.o: ../../include/ruby.h
再执行make && make install
若gem install 可以使用就不用执行以下
cd ruby-2.5.1/ext/openssl/
将ruby-2.5.1/ext/openssl/文件夹下的MakeFile 文件中所有的$(top_srcdir)/include/ruby.h 改成../../include/ruby.h
再执行make && make install

2、开始创建集群（每台起两个redis）

分别再各个机器上启动redis
redis-server ./redis-4.0.9/conf/7001.conf 
redis-server ./redis-4.0.9/conf/7002.conf

操作命令如下：

redis-trib.rb create --replicas 1 master:7001 master:7002 dbnode:7001 dbnode:7002 sdbnode:7001 sdbnode:7002

报错如下：

Traceback (most recent call last):

        11: from /usr/local/bin/redis-trib.rb:1830:in `<main>'

        10: from /usr/local/bin/redis-trib.rb:1426:in `create_cluster_cmd'

         9: from /usr/local/bin/redis-trib.rb:905:in `flush_nodes_config'

         8: from /usr/local/bin/redis-trib.rb:905:in `each'

         7: from /usr/local/bin/redis-trib.rb:906:in `block in flush_nodes_config'

         6: from /usr/local/bin/redis-trib.rb:212:in `flush_node_config'

         5: from /usr/local/ruby/lib/ruby/gems/2.5.0/gems/redis-4.0.1/lib/redis.rb:2763:in `method_missing'

         4: from /usr/local/ruby/lib/ruby/gems/2.5.0/gems/redis-4.0.1/lib/redis.rb:45:in `synchronize'

         3: from /usr/local/ruby/lib/ruby/2.5.0/monitor.rb:226:in `mon_synchronize'

         2: from /usr/local/ruby/lib/ruby/gems/2.5.0/gems/redis-4.0.1/lib/redis.rb:45:in `block in synchronize'

         1: from /usr/local/ruby/lib/ruby/gems/2.5.0/gems/redis-4.0.1/lib/redis.rb:2764:in `block in method_missing'

/usr/local/ruby/lib/ruby/gems/2.5.0/gems/redis-4.0.1/lib/redis/client.rb:119:in `call': ERR Slot 0 is already busy (Redis::CommandError)

错误提示是

slot插槽被占用了（这是 搭建集群前时，以前redis的旧数据和配置信息没有清理干净。）

解决方案是

用redis-cli 登录到每个节点执行 flushall和cluster reset就可以了。然后重新执行群集脚本命令：

解决方案如下:

[root@master ruby]# redis-cli -h master -p 7001
master:7001> flushall
OK
master:7001> cluster reset
OK
master:7001> quit
[root@master ruby]# redis-cli -h master -p 7002
master:7002> flushall
OK
master:7002> cluster reset
OK
master:7002> quit
[root@master ruby]# redis-cli -h dbnode -p 7002      
dbnode:7002> flushall
OK
dbnode:7002> cluster reset
OK
dbnode:7002> quit
[root@master ruby]# redis-cli -h dbnode -p 7001
dbnode:7001> flushall
OK
dbnode:7001> cluster reset
OK
dbnode:7001> quit
[root@master ruby]# redis-cli -h sdbnode -p 7001
sdbnode:7001> flushall
OK
sdbnode:7001> cluster reset
OK
sdbnode:7001> quit
[root@master ruby]# redis-cli -h sdbnode -p 7002
sdbnode:7002> flushall
OK
sdbnode:7002> cluster reset
OK
sdbnode:7002> quit
[root@master ruby]# redis-trib.rb create --replicas 1 master:7001 master:7002 dbnode:7001 dbnode:7002 sdbnode:7001 sdbnode:7002

报错如下：

>>> Creating cluster

>>> Performing hash slots allocation on 6 nodes...

Using 3 masters:

master:7001

dbnode:7001

sdbnode:7001

Adding replica dbnode:7002 to master:7001

Adding replica sdbnode:7002 to dbnode:7001

Adding replica master:7002 to sdbnode:7001

M: 48cf767378e468531184fccd3d252d0defcf0146 master:7001

   slots:0-5460 (5461 slots) master

S: 5d5ea2e9c3b64cd8f97d7175079ae5ca278a6e65 master:7002

   replicates d67e1480c71280ae2ccb8d481c0118ee9297b737

M: 481792e549a593cacd38fe2a6df72e32076036d4 dbnode:7001

   slots:5461-10922 (5462 slots) master

S: 5ce8a33a39960b2c8f95aaac3734656062b675ba dbnode:7002

   replicates 48cf767378e468531184fccd3d252d0defcf0146

M: d67e1480c71280ae2ccb8d481c0118ee9297b737 sdbnode:7001

   slots:10923-16383 (5461 slots) master

S: 32d718c8a3c87a31bfe466bdb0f84c884ac9773c sdbnode:7002

   replicates 481792e549a593cacd38fe2a6df72e32076036d4

Can I set the above configuration? (type 'yes' to accept): yes

>>> Nodes configuration updated

>>> Assign a different config epoch to each node

>>> Sending CLUSTER MEET messages to join the cluster

Traceback (most recent call last):

        10: from /usr/local/bin/redis-trib.rb:1830:in `<main>'

         9: from /usr/local/bin/redis-trib.rb:1431:in `create_cluster_cmd'

         8: from /usr/local/bin/redis-trib.rb:939:in `join_cluster'

         7: from /usr/local/bin/redis-trib.rb:939:in `each'

         6: from /usr/local/bin/redis-trib.rb:941:in `block in join_cluster'

         5: from /usr/local/ruby/lib/ruby/gems/2.5.0/gems/redis-4.0.1/lib/redis.rb:2763:in `method_missing'

         4: from /usr/local/ruby/lib/ruby/gems/2.5.0/gems/redis-4.0.1/lib/redis.rb:45:in `synchronize'

         3: from /usr/local/ruby/lib/ruby/2.5.0/monitor.rb:226:in `mon_synchronize'

         2: from /usr/local/ruby/lib/ruby/gems/2.5.0/gems/redis-4.0.1/lib/redis.rb:45:in `block in synchronize'

         1: from /usr/local/ruby/lib/ruby/gems/2.5.0/gems/redis-4.0.1/lib/redis.rb:2764:in `block in method_missing'

/usr/local/ruby/lib/ruby/gems/2.5.0/gems/redis-4.0.1/lib/redis/client.rb:119:in `call': ERR Invalid node address specified: master:7001 (Redis::CommandError)>>> Creating cluster

>>> Performing hash slots allocation on 6 nodes...

Using 3 masters:

master:7001

dbnode:7001

sdbnode:7001

Adding replica dbnode:7002 to master:7001

Adding replica sdbnode:7002 to dbnode:7001

Adding replica master:7002 to sdbnode:7001

M: 48cf767378e468531184fccd3d252d0defcf0146 master:7001

   slots:0-5460 (5461 slots) master

S: 5d5ea2e9c3b64cd8f97d7175079ae5ca278a6e65 master:7002

   replicates d67e1480c71280ae2ccb8d481c0118ee9297b737

M: 481792e549a593cacd38fe2a6df72e32076036d4 dbnode:7001

   slots:5461-10922 (5462 slots) master

S: 5ce8a33a39960b2c8f95aaac3734656062b675ba dbnode:7002

   replicates 48cf767378e468531184fccd3d252d0defcf0146

M: d67e1480c71280ae2ccb8d481c0118ee9297b737 sdbnode:7001

   slots:10923-16383 (5461 slots) master

S: 32d718c8a3c87a31bfe466bdb0f84c884ac9773c sdbnode:7002

   replicates 481792e549a593cacd38fe2a6df72e32076036d4

Can I set the above configuration? (type 'yes' to accept): yes

>>> Nodes configuration updated

>>> Assign a different config epoch to each node

>>> Sending CLUSTER MEET messages to join the cluster

Traceback (most recent call last):

        10: from /usr/local/bin/redis-trib.rb:1830:in `<main>'

         9: from /usr/local/bin/redis-trib.rb:1431:in `create_cluster_cmd'

         8: from /usr/local/bin/redis-trib.rb:939:in `join_cluster'

         7: from /usr/local/bin/redis-trib.rb:939:in `each'

         6: from /usr/local/bin/redis-trib.rb:941:in `block in join_cluster'

         5: from /usr/local/ruby/lib/ruby/gems/2.5.0/gems/redis-4.0.1/lib/redis.rb:2763:in `method_missing'

         4: from /usr/local/ruby/lib/ruby/gems/2.5.0/gems/redis-4.0.1/lib/redis.rb:45:in `synchronize'

         3: from /usr/local/ruby/lib/ruby/2.5.0/monitor.rb:226:in `mon_synchronize'

         2: from /usr/local/ruby/lib/ruby/gems/2.5.0/gems/redis-4.0.1/lib/redis.rb:45:in `block in synchronize'

         1: from /usr/local/ruby/lib/ruby/gems/2.5.0/gems/redis-4.0.1/lib/redis.rb:2764:in `block in method_missing'

/usr/local/ruby/lib/ruby/gems/2.5.0/gems/redis-4.0.1/lib/redis/client.rb:119:in `call': ERR Invalid node address specified: master:7001 (Redis::CommandError)

报错原因：不识别hostname

使用创建脚本进行集群创建的时候最好将配置文件redis.conf绑定的IP改为真实的IP不要用hostname

使用命令也不要用hostname

正确命令如下：

redis-trib.rb create --replicas 1 192.168.1.250:7001 192.168.1.250:7002 192.168.1.251:7001 192.168.1.251:7002 192.168.1.252:7001 192.168.1.252:7002

结果如下：

[bigdata@master ~]$ redis-trib.rb create --replicas 1 192.168.1.250:7001 192.168.1.250:7002 192.168.1.251:7001 192.168.1

.251:7002 192.168.1.252:7001 192.168.1.252:7002

>>> Creating cluster

>>> Performing hash slots allocation on 6 nodes...

Using 3 masters:

192.168.1.250:7001

192.168.1.251:7001

192.168.1.252:7001

Adding replica 192.168.1.251:7002 to 192.168.1.250:7001

Adding replica 192.168.1.252:7002 to 192.168.1.251:7001

Adding replica 192.168.1.250:7002 to 192.168.1.252:7001

M: 48cf767378e468531184fccd3d252d0defcf0146 192.168.1.250:7001

   slots:0-5460 (5461 slots) master

S: 5d5ea2e9c3b64cd8f97d7175079ae5ca278a6e65 192.168.1.250:7002

   replicates d67e1480c71280ae2ccb8d481c0118ee9297b737

M: 481792e549a593cacd38fe2a6df72e32076036d4 192.168.1.251:7001

   slots:5461-10922 (5462 slots) master

S: 5ce8a33a39960b2c8f95aaac3734656062b675ba 192.168.1.251:7002

   replicates 48cf767378e468531184fccd3d252d0defcf0146

M: d67e1480c71280ae2ccb8d481c0118ee9297b737 192.168.1.252:7001

   slots:10923-16383 (5461 slots) master

S: 32d718c8a3c87a31bfe466bdb0f84c884ac9773c 192.168.1.252:7002

   replicates 481792e549a593cacd38fe2a6df72e32076036d4

Can I set the above configuration? (type 'yes' to accept): yes

>>> Nodes configuration updated

>>> Assign a different config epoch to each node

>>> Sending CLUSTER MEET messages to join the cluster

Waiting for the cluster to join.....

>>> Performing Cluster Check (using node 192.168.1.250:7001)

M: 48cf767378e468531184fccd3d252d0defcf0146 192.168.1.250:7001

   slots:0-5460 (5461 slots) master

   1 additional replica(s)

M: d67e1480c71280ae2ccb8d481c0118ee9297b737 192.168.1.252:7001

   slots:10923-16383 (5461 slots) master

   1 additional replica(s)

M: 481792e549a593cacd38fe2a6df72e32076036d4 192.168.1.251:7001

   slots:5461-10922 (5462 slots) master

   1 additional replica(s)

S: 32d718c8a3c87a31bfe466bdb0f84c884ac9773c 192.168.1.252:7002

   slots: (0 slots) slave

   replicates 481792e549a593cacd38fe2a6df72e32076036d4

S: 5ce8a33a39960b2c8f95aaac3734656062b675ba 192.168.1.251:7002

   slots: (0 slots) slave

   replicates 48cf767378e468531184fccd3d252d0defcf0146

S: 5d5ea2e9c3b64cd8f97d7175079ae5ca278a6e65 192.168.1.250:7002

   slots: (0 slots) slave

   replicates d67e1480c71280ae2ccb8d481c0118ee9297b737

[OK] All nodes agree about slots configuration.

>>> Check for open slots...

>>> Check slots coverage...

[OK] All 16384 slots covered.

至此集群搭建完成。

lhc3636
关注
专栏目录
Redis集群搭建与高可用方案：Redis集群方案介绍
程序员光剑
09-08 1119
作者：禅与计算机程序设计艺术 1.简介 Redis是一个开源的、高性能的键值存储数据库。Redis提供了多种数据结构，比如字符串(String)，散列(Hash)，列表(List)，集合(Set)，有序集合(Sorted Set)等；同时还提供对事务，LUA脚本，发布/订阅，流(stream)等功能支持
创建集群时，关于BUG：…cannot load such file -- redis (LoadError)的解决方法
SooKie_p的博客
06-18 4384
集群文件配置好后，gem源也是国内，但是还会有一个问题，就是redis的相关依赖。 BUG： Traceback (most recent call last): 2: from /usr/local/bin/redis-trib.rb:25:in `<main>' 1: from /usr/lib/ruby/2.5.0/rubygems/core_ext/kernel_requ...
python问题 Traceback (most recent call last)
热门推荐
weixin_43978056的博客
05-11 127万+
python运行问题Traceback (most recent call last) 出现报错 traceback(most recent call last) ...... ...... importError:No module named lxml 解决方案一般是打开cmd 执行命令pip install xxxx(缺失的包，例如lxml) 当然也有例外的，具体可参考下面的问题及其解决...
【Redis】集群
最新发布
IdealSanX的博客
07-16 3607
奇数个master节点可以在满足选举该条件的基础上节省一个节点，比如三个master节点和四个master节点的集群相比，大家如果都挂了一个master节点都能选举新master节点，如果都挂了两个master节点都没法选举新master节点了，所以奇数的master节点更多的是从节省机器资源角度出发说的。因为新master的选举需要大于半数的集群master节点同意才能选举成功，如果只有两个master节点，当其中一个挂了，是达不到选举新master的条件的。集群会记录节点和槽的对应关系。
redis集群搭建以及问题处理
fairy767190的博客
09-01 510
首先要安装ruby 执行yum install ruby 执行yum install rubygems 执行 ./redis-trib.rb create --replicas 1 192.168.44.130:6379 192.168.44.130:6380 192.168.44.130:6381 192.168.44.130:6389 192.168.44.130:6390 192.168.44.130:6391 此时这里为自己的ip地址 遇到问题 /usr/share/rubygems.
redis集群搭建时遇到的问题：ERR Invalid node address specified: node1:6379 (Redis::CommandError)
bug的博客
06-25 7181
今天在搭建redis集群时遇到以下问题 我的环境： 四台虚拟机，其中两台部署两个redis节点，实现三主三从架构。 各节点的的host文件中已经配置好主机名，网络没问题，并且可以ping通。 遇到的问题： 在搭建完六个节点后，使用命令创建集群时候的错误。 命令：./redis-trib.rb create --replicas 1 node1:6379 node2:6379 node3:6379 node4:6379 node1:6380 1 node2:6380 报错的信息如下图： 解决方案： 将主机名
创建redis集群服务时、提示错误：ERR Invalid node address specified: hadoop01:7001 (Redis::CommandError)
逝唁的博客
01-04 7272
创建redis集群服务时，提示以下错误： /usr/local/rvm/gems/ruby-2.4.5/gems/redis-4.1.0/lib/redis/client.rb:124:in `call': ERR Invalid node address specified: hadoop01:7001 (Redis::CommandError) from /usr/local/rvm/g...
redis集群安装踩过的坑
ahzxj2012的专栏
06-20 2555
redis安装方式一 1.安装gcc命令:yum install -y gcc #安装gcc [root@localhost src]# yum install -y gcc #出现如下信息则安装成功 Installed: gcc.x86_64 0:4.4.7-17.el6 Dependency Installed: cloog-ppl.x86_64 0:0.15.7-1.2.
Redis的集群配置的基本操作和遇到的坑
《两个菜鸟程序员》
06-06 831
Redis的集群配置的基本操作和遇到的坑 今天自己学习了redis的集群的配置，在配置的期间，发现了许多的坑的存在，现在将配置的过程以及具体的问题进行分析 下载并安装redis 首先在redis的官网上面下载最新版本的redis并进行安装 基本的集群的配置 打开redis的目录，配置redis.conf的文件 复制6份这个配置文件 配置其中的一个配置文件，其他的同理 ...
非常详细的redis集群搭建教程
09-26
- 在搭建Redis集群之前，需要确保系统已经安装了`gcc-c++`依赖包。这一步非常重要，因为Redis的安装需要通过编译源码的方式进行。 - 安装命令：`yum install gcc-c++` - 对于内网环境，可能需要预先下载好`gcc`的...
Redis集群方案及Redis3.2本地集群搭建搭建
qq_46073180的博客
01-23 1351
Redis集群方案及本地搭建
Redis集群搭建1
08-08
【Redis集群搭建1】 在IT领域，Redis是一个广泛使用的开源键值对数据库，以其高性能和丰富的数据类型而受到青睐。本篇文章将详细讲解如何搭建一个Redis集群，以及Redis的基础知识和应用场景。 首先，让我们深入...
常用Anaconda安装错误解决办法Traceback (most recent call last):
qq_37765069的博客
02-10 26万+
Anaconda 安装错误的解决办法异常提示解决办法适用 异常提示 Traceback (most recent call last): File"E:\anaconda\lib\site-packages\psutil_pswindows.py", line 63…… …… File"E:\anaconda\lib\site-packages\psutil_pswindows.py", line...
ERROR: Exception: Traceback (most recent call last)的解决方法
inside802的博客
10-20 18万+
在使用pip安装pillow时，总是提示ERROR: Exception: Traceback (most recent call last) 到网上搜了很多方法，包括使用管理员权限，修改pip __main__方法，都不行，后来我想应该就是简单的网速低导致断链的问题吧？pip可能不支持断点续传。后来我按照cmd命令行里提示的下载地址，自己用浏览器下载，然后本地安装whl文件，成功。 下载完成...
错误及解决办法：trackback (most recent call last) File “XXX文件路径” ，line 1, in <module> import pandas as pd
jjddss的专栏
06-13 20万+
最近学习《python 机器学习及实践》（作者范淼、李超），编写运行其第四章的代码。 书中源代码为：（相应的配置为python2..7.13，pandas版本为0.20.2） import pandas as pd train = pd.read_csv('../Datasets/titanic/train.csv') test = pd.read_csv('../Datasets/ti
Linux下Redis集群搭建与测试
一大三千的博客
12-16 7637
集群搭建准备条件一台已经配置好Redis服务的虚拟机，地址为：192.168.2.100：6379克隆6台，使用命令nmtui修改地址分别为：192.168.2.101 192.168.2.102 192.168.2.103 192.168.2.104 192.168.2.105 192.168.2.106 由于集群的容错机制是超过半数的节点认为某节点挂掉就确认挂掉，因此我们搭建的集群最好是奇数
Traceback (most recent call last):异常
zhoubbt的博客
01-02 24万+
今天运行代码，这段代码很有意识，就是有时候会报错，有时候又可以正常运行，看了一下报了这个错Traceback (most recent call last):通常很难出现这样的错误。只能一点点排除： 1.磁盘空间满了。 比如/tmp, /var 或者是/分区满了。 2.文件读写错误，在临时目录里，某些文件被锁，无法读写导致 3.内存不足（这个可能性小），你可以将占用内存多的程序去掉 4.你是
redis集群工具redis-trib制作并打包上传到私有Harbor
xiaxia2022的博客
10-15 473
1. 启动一个ubuntu容器 kubectl run -it ubuntu --image=ubuntu --restart=Never /bin/bash 2. 进入容器，修改源 cat > /etc/apt/sources.list << EOF deb http://mirrors.aliyun.com/ubuntu/ bionic main restricted universe multiverse deb-src http://mirrors.aliyun.com/
Redis集群搭建与架构详解
"Redis集群是Redis自3.0版本引入的一种分布式解决方案，旨在提供高可用性和数据分片功能。Redis集群通过节点间的自动发现、主从选举以及ASK和MOVED转向机制来实现容错和负载均衡。集群中的每个节点都会与其他节点...
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值