搭建单机和集群Redis，测试程序访问集群情况

最新推荐文章于 2023-07-18 16:53:02 发布
最新推荐文章于 2023-07-18 16:53:02 发布
阅读量260 收藏
点赞数
分类专栏： 数据库 文章标签： 集群 Redis
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/u011610826/article/details/79026365
版权

一、搭建单机redis

下载redis3.0.2，编译安装：

wget http://download.redis.io/releases/redis-3.0.2.tar.gz

tar -xvf redis-3.0.2.tar.gz

make

make install

redis安装位置/home/happy/saas_homework/redis/redis-3.0.2

/etc/redis/redis.conf为配置文件

 

参考资料：

Ubuntu下如何安装与运行Redis

http://jingyan.baidu.com/article/bad08e1ee14ae409c85121cf.html

 

二、测试redis中所有数据类型增删改情况

执行redis-server开启redis服务器；

要在python中访问redis，需要执行sudo pip install redis；

编写python程序redis_python_test.py，访问redis，并测试redis中各个数据类型的增改删方式，见python访问redis测试文档.doc

 

三、搭建集群redis：

/etc/redis为redis配置文件;

1.创建集群需要的目录

mkdir -p /usr/local/cluster

cd /usr/local/cluster

mkdir 7000

mkdir 7001

mkdir 7002

mkdir 7003

mkdir 7004

mkdir 7005

2.修改配置文件redis.conf
cp /etc/redis/redis.conf /usr/local/cluster
vi redis.conf
##修改配置文件中的下面选项

pidfile /var/run/redis.7000.pid #个性化

port 7000 #个性化

daemonize yes

cluster-enabled yes

cluster-config-file nodes.7000.conf #个性化

cluster-node-timeout 5000

appendonly yes

appendfilename "appendonly.7000.aof" #个性化

##修改完redis.conf配置文件中的这些配置项之后把这个配置文件分别拷贝到7000/7001/7002/7003/7004/7005目录下面

cp /etc/redis/redis.conf /usr/local/cluster/7000

cp /etc/redis/redis.conf /usr/local/cluster/7001

cp /etc/redis/redis.conf /usr/local/cluster/7002

cp /etc/redis/redis.conf /usr/local/cluster/7003

cp /etc/redis/redis.conf /usr/local/cluster/7004

cp /etc/redis/redis.conf /usr/local/cluster/7005

##注意：拷贝完成之后要修改7001/7002/7003/7004/7005目录下面redis.conf文件中 标注个性化的 参数，分别改为对应的文件夹的名称

3.分别启动这6个redis实例
vi /usr/local/cluster/redis-start.sh
加入以下内容

#!/bin/sh

/usr/local/redis3.0/src/redis-server /usr/local/cluster/7000/redis.conf &

/usr/local/redis3.0/src/redis-server /usr/local/cluster/7001/redis.conf &

/usr/local/redis3.0/src/redis-server /usr/local/cluster/7002/redis.conf &

/usr/local/redis3.0/src/redis-server /usr/local/cluster/7003/redis.conf &

/usr/local/redis3.0/src/redis-server /usr/local/cluster/7004/redis.conf &

/usr/local/redis3.0/src/redis-server /usr/local/cluster/7005/redis.conf &

然后chmod +x /usr/local/cluster/redis-start.sh

/usr/local/cluster/redis-start.sh

##启动之后使用命令查看redis的启动情况ps -ef|grep redis

happy@happy-Lenovo-IdeaPad-Y480:~$ ps -ef|grep redis

 

happy     7453  1984  0 10:29 ?        00:00:26 redis-server *:6379

happy    22668  1984  0 20:02 ?        00:00:00 /home/happy/saas_homework/redis/redis-3.0.2/src/redis-server *:7001 [cluster]                  

happy    22670  1984  0 20:02 ?        00:00:00 /home/happy/saas_homework/redis/redis-3.0.2/src/redis-server *:7002 [cluster]                  

happy    22671  1984  0 20:02 ?        00:00:00 /home/happy/saas_homework/redis/redis-3.0.2/src/redis-server *:7005 [cluster]                  

happy    22672  1984  0 20:02 ?        00:00:00 /home/happy/saas_homework/redis/redis-3.0.2/src/redis-server *:7003 [cluster]                  

happy    22673  1984  0 20:02 ?        00:00:00 /home/happy/saas_homework/redis/redis-3.0.2/src/redis-server *:7000 [cluster]                  

happy    22674  1984  0 20:02 ?        00:00:00 /home/happy/saas_homework/redis/redis-3.0.2/src/redis-server *:7004 [cluster]                  

happy    22745 20727  0 20:02 pts/7    00:00:00 grep --color=auto redis

4.执行redis的创建集群命令创建集群
安装ruby ,因为./redis-trib.rb是执行的ruby的脚本，需要ruby的环境
sudo apt-get install ruby

为了执行 redis-trib.rb 需要安装 sudo gem install redis

happy@happy-Lenovo-IdeaPad-Y480:~$ sudo gem install redis

 

happy@happy-Lenovo-IdeaPad-Y480:~/saas_homework/redis/redis-3.0.2/src$ ./redis-trib.rb  create --replicas 1 127.0.0.1:7000 127.0.0.1:7001 127.0.0.1:7002 127.0.0.1:7003 127.0.0.1:7004 127.0.0.1:7005

>>> Creating cluster

Connecting to node 127.0.0.1:7000: OK

Connecting to node 127.0.0.1:7001: OK

Connecting to node 127.0.0.1:7002: OK

Connecting to node 127.0.0.1:7003: OK

Connecting to node 127.0.0.1:7004: OK

Connecting to node 127.0.0.1:7005: OK

>>> Performing hash slots allocation on 6 nodes...

Using 3 masters:

127.0.0.1:7000

127.0.0.1:7001

127.0.0.1:7002

Adding replica 127.0.0.1:7003 to 127.0.0.1:7000

Adding replica 127.0.0.1:7004 to 127.0.0.1:7001

Adding replica 127.0.0.1:7005 to 127.0.0.1:7002

M: ab6de86c4dcb6191b5df8c351250593feada679e 127.0.0.1:7000

   slots:0-5460 (5461 slots) master

M: 24a6b93a47040ddb32f78ad1d2dffe0ff7cb04f0 127.0.0.1:7001

   slots:5461-10922 (5462 slots) master

M: 69c9c5f9b7a73e12c324a5b74ae528dbf8e0ef70 127.0.0.1:7002

   slots:10923-16383 (5461 slots) master

S: 2ebe9b9eac4a2e65f4ea5d97e975aa796001bffb 127.0.0.1:7003

   replicates ab6de86c4dcb6191b5df8c351250593feada679e

S: f07c95b329139e416d6081497850d3d8be39f3f0 127.0.0.1:7004

   replicates 24a6b93a47040ddb32f78ad1d2dffe0ff7cb04f0

S: f1dc13b835038fe92eaafe385f7af4061927b9a3 127.0.0.1:7005

   replicates 69c9c5f9b7a73e12c324a5b74ae528dbf8e0ef70

Can I set the above configuration? (type 'yes' to accept): yes

>>> Nodes configuration updated

>>> Assign a different config epoch to each node

>>> Sending CLUSTER MEET messages to join the cluster

Waiting for the cluster to join....

>>> Performing Cluster Check (using node 127.0.0.1:7000)

M: ab6de86c4dcb6191b5df8c351250593feada679e 127.0.0.1:7000

   slots:0-5460 (5461 slots) master

M: 24a6b93a47040ddb32f78ad1d2dffe0ff7cb04f0 127.0.0.1:7001

   slots:5461-10922 (5462 slots) master

M: 69c9c5f9b7a73e12c324a5b74ae528dbf8e0ef70 127.0.0.1:7002

   slots:10923-16383 (5461 slots) master

M: 2ebe9b9eac4a2e65f4ea5d97e975aa796001bffb 127.0.0.1:7003

   slots: (0 slots) master

   replicates ab6de86c4dcb6191b5df8c351250593feada679e

M: f07c95b329139e416d6081497850d3d8be39f3f0 127.0.0.1:7004

   slots: (0 slots) master

   replicates 24a6b93a47040ddb32f78ad1d2dffe0ff7cb04f0

M: f1dc13b835038fe92eaafe385f7af4061927b9a3 127.0.0.1:7005

   slots: (0 slots) master

   replicates 69c9c5f9b7a73e12c324a5b74ae528dbf8e0ef70

[OK] All nodes agree about slots configuration.

>>> Check for open slots...

>>> Check slots coverage...

[OK] All 16384 slots covered.

 

四、测试程序访问集群情况：

1.查看集群目前状况

happy@happy-Lenovo-IdeaPad-Y480:~/saas_homework/redis/redis-3.0.2/src$ redis-cli -c -p 7000

127.0.0.1:7000> cluster info

cluster_state:ok

cluster_slots_assigned:16384

cluster_slots_ok:16384

cluster_slots_pfail:0

cluster_slots_fail:0

cluster_known_nodes:6

cluster_size:3

cluster_current_epoch:6

cluster_my_epoch:1

cluster_stats_messages_sent:4232

cluster_stats_messages_received:4232

2.测试存值取值：每一次操作过后可能就跳到别的里面了，通过Redirected to slot。

127.0.0.1:7000> set foo bar

-> Redirected to slot [12182] located at 127.0.0.1:7002

OK

127.0.0.1:7002> set hello world

-> Redirected to slot [866] located at 127.0.0.1:7000

OK

127.0.0.1:7000> get hello

"world"

127.0.0.1:7000> set name John

-> Redirected to slot [5798] located at 127.0.0.1:7001

OK

3.检查集群状态

happy@happy-Lenovo-IdeaPad-Y480:~/saas_homework/redis/redis-3.0.2/src$ ./redis-trib.rb check 127.0.0.1:7000

Connecting to node 127.0.0.1:7000: OK

Connecting to node 127.0.0.1:7005: OK

Connecting to node 127.0.0.1:7004: OK

Connecting to node 127.0.0.1:7001: OK

Connecting to node 127.0.0.1:7002: OK

Connecting to node 127.0.0.1:7003: OK

>>> Performing Cluster Check (using node 127.0.0.1:7000)

M: ab6de86c4dcb6191b5df8c351250593feada679e 127.0.0.1:7000

   slots:0-5460 (5461 slots) master

   1 additional replica(s)

S: f1dc13b835038fe92eaafe385f7af4061927b9a3 127.0.0.1:7005

   slots: (0 slots) slave

   replicates 69c9c5f9b7a73e12c324a5b74ae528dbf8e0ef70

S: f07c95b329139e416d6081497850d3d8be39f3f0 127.0.0.1:7004

   slots: (0 slots) slave

   replicates 24a6b93a47040ddb32f78ad1d2dffe0ff7cb04f0

M: 24a6b93a47040ddb32f78ad1d2dffe0ff7cb04f0 127.0.0.1:7001

   slots:5461-10922 (5462 slots) master

   1 additional replica(s)

M: 69c9c5f9b7a73e12c324a5b74ae528dbf8e0ef70 127.0.0.1:7002

   slots:10923-16383 (5461 slots) master

   1 additional replica(s)

S: 2ebe9b9eac4a2e65f4ea5d97e975aa796001bffb 127.0.0.1:7003

   slots: (0 slots) slave

   replicates ab6de86c4dcb6191b5df8c351250593feada679e

[OK] All nodes agree about slots configuration.

>>> Check for open slots...

>>> Check slots coverage...

[OK] All 16384 slots covered.

4.打印集群主节点和从节点信息

happy@happy-Lenovo-IdeaPad-Y480:~/saas_homework/redis/redis-3.0.2/src$ ./redis-cli -p 7000 cluster nodes | grep master

ab6de86c4dcb6191b5df8c351250593feada679e 127.0.0.1:7000 myself,master - 0 0 1 connected 0-5460

24a6b93a47040ddb32f78ad1d2dffe0ff7cb04f0 127.0.0.1:7001 master - 0 1493469441474 2 connected 5461-10922

69c9c5f9b7a73e12c324a5b74ae528dbf8e0ef70 127.0.0.1:7002 master - 0 1493469443475 3 connected 10923-16383

happy@happy-Lenovo-IdeaPad-Y480:~/saas_homework/redis/redis-3.0.2/src$ ./redis-cli -p 7000 cluster nodes | grep slave

f1dc13b835038fe92eaafe385f7af4061927b9a3 127.0.0.1:7005 slave 69c9c5f9b7a73e12c324a5b74ae528dbf8e0ef70 0 1493469452492 6 connected

 

f07c95b329139e416d6081497850d3d8be39f3f0 127.0.0.1:7004 slave 24a6b93a47040ddb32f78ad1d2dffe0ff7cb04f0 0 1493469453491 5 connected

 

2ebe9b9eac4a2e65f4ea5d97e975aa796001bffb 127.0.0.1:7003 slave ab6de86c4dcb6191b5df8c351250593feada679e 0 1493469452492 4 connected

5.重新分片

happy@happy-Lenovo-IdeaPad-Y480:~/saas_homework/redis/redis-3.0.2/src$ ./redis-trib.rb reshard 127.0.0.1:7000

Connecting to node 127.0.0.1:7000: OK

Connecting to node 127.0.0.1:7005: OK

Connecting to node 127.0.0.1:7004: OK

Connecting to node 127.0.0.1:7001: OK

Connecting to node 127.0.0.1:7002: OK

Connecting to node 127.0.0.1:7003: OK

>>> Performing Cluster Check (using node 127.0.0.1:7000)

M: ab6de86c4dcb6191b5df8c351250593feada679e 127.0.0.1:7000

   slots:0-5460 (5461 slots) master

   1 additional replica(s)

S: f1dc13b835038fe92eaafe385f7af4061927b9a3 127.0.0.1:7005

   slots: (0 slots) slave

   replicates 69c9c5f9b7a73e12c324a5b74ae528dbf8e0ef70

S: f07c95b329139e416d6081497850d3d8be39f3f0 127.0.0.1:7004

   slots: (0 slots) slave

   replicates 24a6b93a47040ddb32f78ad1d2dffe0ff7cb04f0

M: 24a6b93a47040ddb32f78ad1d2dffe0ff7cb04f0 127.0.0.1:7001

   slots:5461-10922 (5462 slots) master

   1 additional replica(s)

......

[OK] All nodes agree about slots configuration.

>>> Check for open slots...

>>> Check slots coverage...

[OK] All 16384 slots covered.

6.使用python访问redis集群，代码见redis_python_cluster.py：

sudo pip install redis-py-cluster

from rediscluster import StrictRedisCluster
import sys
def redis_cluster():
    redis_nodes =  [{'host':'127.0.0.1','port':7000},
                    {'host':'127.0.0.1','port':7001},
                    {'host':'127.0.0.1','port':7002},
                    {'host':'127.0.0.1','port':7003},
                    {'host':'127.0.0.1','port':7004},
                    {'host':'127.0.0.1','port':7005}
                   ]
    try:
        redisconn = StrictRedisCluster(startup_nodes=redis_nodes)
    except Exception,e:
        print "Connect Error!"
        sys.exit(1)
    redisconn.set('name','John')
    print "name is: ", redisconn.get('name')
    print "hello ", redisconn.get('hello')
redis_cluster()

运行结果：

name is:  John

hello  world

其中hello的值为前面第2步存入的值‘world’

 

参考资料：Ubuntu 15.10下Redis集群部署文档

http://www.linuxidc.com/Linux/2016-06/132340.htm

Ubuntu下搭建Redis集群

http://blog.csdn.net/u012810317/article/details/51272432

用python操作Redis集群

http://blog.csdn.net/bitcarmanlee/article/details/51852126

通过对python访问redis和redis集群的搭建，深入学习集群的工作原理。

HappyBearZzz
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
java代码访问redis集群
zhangbeizhen18的博客
10-22 968
本例环境: jdk 1.7 Redis-x64-3.2.100环境搭建可参考如下: redis集群环境搭建-(redis-cluster)(windows版本) : https://blog.csdn.net/zhangbeizhen18/article/details/102668554 1.本例代码下载地址 ht...
多线程实现资源共享的问题学习与总结
weixin_34029949的博客
02-24 163
我么知道Java传统多线程的实现有两种方法,继承Thread类或者实现Runnable即可.线程启动时调用start()方法. 实现Runnable接口相比继承Thread类有如下好处: 1.避免单继承的局限,一个类可以同时实现多个接口 2.适合资源的共享.   实现多线程模拟售票点卖票来说明实现Runnable即可可以达到资源共享的目的. 使用继承Thread类的多线程售票实现 ...
java代码连接redis集群
卜可的博客
04-13 2577
public static void main(String[] args) { Set<HostAndPort> nodes = new HashSet<>(); nodes.add(new HostAndPort("192.168.0.107", 6380)); nodes.add(new HostAndPort("192.168.0.107",...
【Redis】Redis 数据库 安装、配置、访问 ( Redis 简介 | 下载 Redis 安装包 | 安装 Redis 数据库 | 命令行访问 Redis | 使用可视化工具访问 Redis )
热门推荐
让 学习 成为一种 习惯 ( 韩曙亮 の 技术博客 )
02-11 1万+
一、Redis 数据库简介、 二、Redis 数据库操作场景实例、 三、下载 Redis 安装包、 1、Windows 安装包下载、 2、Linux 安装包下载、 四、Windows 中安装 Redis、 五、Windows 中配置 Redis、 1、配置访问密码、 2、重启 Redis 服务、 六、命令行访问 Redis、 1、打开 Redis 客户端、 2、验证 Redis 访问密码、 3、保存键值对数据、 4、查询键值对数据、 5、退出 Redis 客户端、 七、使用可视化工具访问 Redis 数据库
如何实现高可用的redis集群(方案介绍)
houzhyan-博客
04-26 4713
原文:点击打开链接 Redis因具有丰富的数据结构和超高的性能以及简单的协议，使其能够很好的作为数据库的上游缓存层。但在大规模的Redis使用过程中，会受限于多个方面：单机内存有限、带宽压力、单点问题、不能动态扩容等。   基于以上，Redis集群方案显得尤为重要。通常有3个途径：官方Redis Cluster；通过Proxy分片；客户端分片(Smart Client)。
详解CentOS 6.5搭建Redis3.2.8单机分布式集群
09-09
在本文中，我们将深入探讨如何在CentOS 6.5操作系统上搭建Redis 3.2.8的单机分布式集群。这个过程对于那些希望利用Redis的高性能存储能力并实现数据冗余和高可用性的系统管理员和开发者来说至关重要。Redis是一个...
redis集群搭建.docx
12-24
在搭建Redis集群时，首先确保所有节点都能互相通信，且防火墙设置允许6379至6384端口的通信。在Linux环境下，关闭防火墙的命令是`systemctl stop firewalld.service`和`systemctl disable firewalld.service`。 ...
redis单机/集群搭建部署及应用
01-19
介绍了redis单机、集群的搭建，以及Spring项目中如何使用Jedis、JedisCluster进行redis操作
搭建springboot与redis集群关联操作.doc
05-27
本文档主要讲解如何搭建 Spring Boot 与 Redis 集群的关联操作，包括搭建 Redis 集群、Spring Boot 配置调用 Redis、实例代码操作和运行结果展示。同时，也会涉及到 Redis 的三种模式：单机模式、哨兵模式和集群模式...
Redis 集群搭建和简单使用教程
09-09
通过以上步骤，你可以成功搭建起一个基本的Redis集群，并开始利用其强大的分布式功能来优化你的应用程序。在实际应用中，还需要考虑集群的扩展性、监控、备份和恢复策略，以确保系统的稳定性和可靠性。
Python连接redis集群方法
最新发布
一样学一点
07-18 1913
【代码】Python连接redis集群方法。
Redis-21Redis集群模式-Centos6.5上3台主机3主3从的配置及通过代码访问集群
小工匠
10-14 1万+
文章目录概述 概述 前面几篇博文介绍了 Redis主从 、 Redis哨兵模式 ， 现在我们来了解下更加牛逼的Redis集群模式。 集群的主要目的是解决可扩展性。 在Redis3.0之前（3.0版本开始支持集群功能）主要是通过客户端分片、代理协助分片(Twemproxy)、查询路由、预分片、一致性哈希、客户端代理/转发等方式来支持。 Redis集群通过Hash槽、查询路由、节点互联的混合模式、保证...
SpringBoot:访问Redis集群
amadeus_liu2的博客
02-05 769
boot
Redis集群（Cluster）
qq_46370017的博客
08-16 1万+
Redis 集群实现了对Redis的水平扩容，即启动N个redis节点，将整个数据库分布存储在这N个节点中，每个节点存储总数据的1/N。Redis 集群通过分区来提供一定程度的可用性： 即使集群中有一部分节点失效或者无法进行通讯， 集群也可以继续处理命令请求。搭建和后期维护都很不方便，因此引入了无中心化集群！答案是重启6379服务器，6379角色变为6389的从机，上位主机后的6389服务器依然是主机。再次思考：如果集群中某台主机挂掉之后，此主机的所有从机也都挂掉了（如下图），整个集还能正常提供服务吗？..
Redis集群版搭建完毕以后进入集群测试是否成功
LDF_WICIQI的博客
09-20 2263
1.启动redis ./startup.sh 2.进入集群版客户端 ./redis01/bin/redis-cli -p 7001 -c 3.添加测试数据 set name lee get name del name
【Redis】搭建集群与如何使用Jedis连接集群
qq_35029429的博客
12-16 2517
1.redis-cluster架构图 架构细节: (1)所有的redis节点彼此互联(PING-PONG机制),内部使用二进制协议优化传输速度和带宽. (2)节点的fail是通过集群中超过半数的节点检测失效时才生效. (3)客户端与redis节点直连,不需要中间proxy层.客户端不需要连接集群所有节点,连接集群中任何一个可用节点即可 (4)redis-cluster把所有的物理节点...
Python连接redis集群
Beyond_F4的博客
06-20 5180
#coding:utf-8 import json from rediscluster import StrictRedisCluster import sys import time def redis_cluster(): li=[] redis_nodes = [{'host':'10.10.100.20','port':20011}, ...
分布式和集群的区别
moxuan_zh的博客
01-17 3605
分布式：是指把一个系统拆分成若干个子业务，分布在不同的服务器上。通过多个子业务协同作业完成系统功能。mvc设计模式就是分布式开发的体现。 例如：一家银行，有银行行长，大厅经理，信用卡部门经理，出纳经理，这就是分布式的，行长和各部门经理，各自负责自己的业务。所有人的业务集合成一家银行门店的所有业务。 集群：是指把同一子业务部署在多个服务器上集群处理。 例如：在上面银行的例子中，在信用卡部门多个

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值