redis原理及集群主从配置

最新推荐文章于 2024-04-30 17:25:22 发布
最新推荐文章于 2024-04-30 17:25:22 发布
阅读量169 收藏
点赞数
分类专栏： 数据库 文章标签： redis linux
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/lhz33177/article/details/91647070
版权

redis原理及集群主从配置

分类: linux运维技术,redis

标签: redis

一、简介

　　存储系统背景

　　　　存储系统有三类：
　　　　RDBMS
　　　　　　oracle，dh2，postgresql，mysql，sql server
　　　　NoSQL:
　　　　　　KV NoSQL：redis,memcached
　　　　　　列式Column Family NoSQL: HBase，每一行每一字段可以保留n份，也是按照字段存储
　　　　　　文档Documentation NoSQL: MongoDB
　　　　　　图式Graph NoSQL: Neo4j

　　　　NewSQL
　　　　　　aerospike，foundationDB，rethinkDB...

　　1、什么是redis

　　　　redis是一个开源的使用ANSI C 语言编写、支持网络、可基于内存即可持久化的日志型，key-value数据库（是一个key-value存储系统），支持多种语言的API

　　　　它是一个高级key-value数据库，跟memcached类似，但是redis的数据可以持久化，并且支持数据类型更丰富，同时还支持服务端的计算集合的并、交、和补集等，支持多种排序功能。　　

　　　　　　

　　2、特点： 　　　　

　　　　常用来和memcache做比较，但redis是nosql，基于key-value（键值）的数据结构的存储，可以存储键值，字典，图表
　　　　完全工作在内存中，数据保存在内存，性能不错，数据周期性备份到硬盘，(持久化)的单线程服务器
　　　　可以通过lua脚本扩展
　　　　支持sentinel主从架构高可用
　　　　分布式 　

　

　　3、性能

　　　　虽然是单线程，kv是一个单纯简单的存储cpu通常不会形成瓶颈的，官方测试50个并发请求10w次，写的速度是110000次/s，读的速度是81000次/s，读写大小为256bytes的字符串；　

 

　　4、持久化persistence

 

　　　　RDB: snapshot，二进制格式；按事先定制的策略，周期性地将数据保存至磁盘；数据文件默认为dump.rdb; 
　　　　　　客户端也可显式使用SAVA或BGSAVE命令启动快照保存机制；
　　　　　　SAVE: 同步，在主线程中保存快照；此时会阻塞所有客户端请求；
　　　　　　BGSAVE：异步，
　　　　AOF：Append Only File
　　　　　　记录每一次写操作至指定的文件尾部实现持久化；当redis重启时，可通过重新执行文件中的命令在内存重建数据库；
　　　　　　BGREWRITEAOF：AOF文件重写；
　　　　　　不会读取正在使用AOF文件，而通过将内存中的数据以命令的方式保存到临时文件中，完成之后替换原来的AOF文件；

　　5、是一个数据结构服务器它支持的value类型有：

 

　　　　String字符串, List链表, Hash哈希, Set集合, Sorted Set有序集合, Bitmap, HyperLoglog

　　　　

　　　　Strings:
　　　　　　SET key value [EX #] [NX|XX]
　　　　　　GET
　　　　　　INCR
　　　　　　DECR
　　　　　　EXIST

　　　　Lists:
　　　　　　LPUSH
　　　　　　RPUSH
　　　　　　LPOP
　　　　　　RPOP
　　　　　　LINDEX
　　　　　　LSET

　　　　Sets:
　　　　　　SADD
　　　　　　SINTER
　　　　　　SUNION
　　　　　　SPOP
　　　　　　SISMEMBER

　　　　Sorted Sets:
　　　　　　ZADD
　　　　　　ZRANGE
　　　　　　ZCARD
　　　　　　ZRANK

　　　　Hashes:
　　　　　　HSET
　　　　　　HSETNX
　　　　　　HGET
　　　　　　HKEYS
　　　　　　HVALS
　　　　　　HDEL

　　　　Bitmaps, HyperLogLog

 

　　6、守护进程

　　　　监听端口为6379/tcp

　　7、数据库对比

 

　　　　常见数据库功能对比

名称数据库类型数据存储选项操作类型备注
redis内存存储，nosql数据库支持字符串、列表、集合、散列标、有序集合增、删、修改、更新支持分布式存储，主从同步及高可用，单线程
memcached内存缓存数据库键值之间得映射增、删、修改、更新支持多线程
mysql典型关系数据库，RDBMS数据库由多表组成，每张表包含多行增、删、修改、更新支持ACID性质
postgresql典型关系数据库，RDBMS数据库由多表组成，每张表包含多行增、删、修改、更新支持ACID性质
mongodb硬盘存储，nosql数据库数据库包含多个表增、删、修改、更新主从复制，分片，副本集、空间索引

　　

 

　

 

 

 

 

 

　　

 

　　8、简述和memcached之间的对比

　　　　redis不仅仅支持简单的kv类型数据，还支持list，set，hash等数据结构

　　　　redis支持数据备份

　　　　redis支持数据持久化，可以将内存中的数据保持在磁盘中，重启的时候可以在加载使用

　　　　集群，memcache不支持集群，多台memcache 共处

　　9、redis的master/slave复制：

　　　　　　支持一个master多个slave

　　　　　　slave可以介绍其他slave的链接来替代他链接master

　　　　　　复制在master是非阻塞的，在slave是阻塞的

　　　　　　复制被利用来提供扩展性，在slave端只提供查询功能及数据的冗余

　　　　　

　　10、应用场景

　　　　缓存（数据查询，短连接、新闻内容、商品内容等）

　　　　分布式集群架构中session分离

　　　　聊天室在线好友列表

　　　　任务队列（秒杀、抢购、12306）

　　　　应用排行

　　　　网站访问统计

　　　　数据统计

为了解决高并发、高可用、高可扩展，大数据存储等一系列问题而产生的数据库解决方案

 

 

 

二、主从复制工作机制

 　　redis持久化解决了redis服务重启后能够将硬盘的持久化数据恢复到内存中，但当redis服务器硬盘坏掉就会导致数据丢失，为了避免这种单点故障就有了主从复制工作机制

　　一主多从结构

　　主从复制不会阻塞master，在同步数据时，master可以继续处理client请求

　　一个redis即可以是主也可以是从

 

三、多实例redis配置

　　1、下载软件及安装源

　　　　http://download.redis.io/releases/redis-5.0.4.tar.gz

　　　　如果源码安装下载源码

　　　　如果yum安装请配置源

　　　　　　rpm -ivh http://dl.fedoraproject.org/pub/epel/epel-release-latest-7.noarch.rpm

　　2、安装有两种安装方式

　　　　1）、yum安装

　　　　　　直接yum install redis

　　　　　　systemctl enable redis

　　　　　　systemctl start redis

 

Dependencies Resolved    #一些依赖

====================================================================================================================
 Package                    Arch                     Version                           Repository              Size
====================================================================================================================
Installing:
 redis                      x86_64                   3.2.12-2.el7                      epel                   544 k
Installing for dependencies:
 jemalloc                   x86_64                   3.6.0-1.el7                       epel                   105 k

Transaction Summary
====================================================================================================================
Install  1 Package (+1 Dependent package)





Complete!
[root@web1 ~]# systemctl start redis
[root@web1 ~]# systemctl enable redis
Created symlink from /etc/systemd/system/multi-user.target.wants/redis.service to /usr/lib/systemd/system/redis.service.

[root@web1 ~]# netstat -untlp
Active Internet connections (only servers)
Proto Recv-Q Send-Q Local Address           Foreign Address         State       PID/Program name    
tcp        0      0 127.0.0.1:6379          0.0.0.0:*               LISTEN      2570/redis-server 1 
tcp        0      0 0.0.0.0:111             0.0.0.0:*               LISTEN      1/systemd           
tcp        0      0 0.0.0.0:80              0.0.0.0:*               LISTEN      2050/nginx: master  
tcp        0      0 192.168.122.1:53        0.0.0.0:*               LISTEN      2176/dnsmasq        
tcp        0      0 0.0.0.0:22              0.0.0.0:*               LISTEN      875/sshd            
tcp        0      0 127.0.0.1:631           0.0.0.0:*               LISTEN      879/cupsd           
tcp        0      0 127.0.0.1:25            0.0.0.0:*               LISTEN      2035/master         
tcp6       0      0 :::111                  :::*                    LISTEN      1/systemd           
tcp6       0      0 :::80                   :::*                    LISTEN      2050/nginx: master  
tcp6       0      0 :::22                   :::*                    LISTEN      875/sshd            
tcp6       0      0 ::1:631                 :::*                    LISTEN      879/cupsd           
tcp6       0      0 ::1:25                  :::*                    LISTEN      2035/master         
udp        0      0 0.0.0.0:5353            0.0.0.0:*                           574/avahi-daemon: r 
udp        0      0 127.0.0.1:323           0.0.0.0:*                           2334/chronyd        
udp        0      0 0.0.0.0:52822           0.0.0.0:*                           574/avahi-daemon: r 
udp        0      0 192.168.122.1:53        0.0.0.0:*                           2176/dnsmasq        
udp        0      0 0.0.0.0:67              0.0.0.0:*                           2176/dnsmasq        
udp        0      0 0.0.0.0:177             0.0.0.0:*                           890/lightdm         
udp6       0      0 ::1:323                 :::*                                2334/chronyd        
udp6       0      0 :::177                  :::*                                890/lightdm         
[root@web1 ~]#

 

　　　　2）、编译安装

　　　　　　解压-->编译-->copy-->启动

　　　　　

　　　这次编译安装一个新版本

　　　　　　mkdir /data

　　　　　　cd /data

　　　　　　#上传下载的包到此目录

　　　　　　　　redis-5.0.4.tar.gz

　　　　　　tar redis-5.0.4.tar.gz
　　　　　　cd rredis-5.0.4
　　　　　　make

 

　　3、编译安装及启动

　　　　1）创建文件夹及拷贝关键文件

　    mkdir /data/redis2

　　　cp redis.conf /data/redis2

　　　cp src/redis-server /data/redis2

　　　cd /data/redis2/

　　　　2）编辑配置文件

　　　　　因为有#号开的行可以先过滤掉

　　　　　　sed -ri '/#|^$/d' redis.conf

　　　　　开始编辑配置文件，修改下面几项

　　　　　  vim redis.conf　　　

port 6380　　　　　　//监听端口
appendonly no  yes //日志开关，不是包报错的日志，是二进制，记录数据变化
pidfile /var/run/redis_6380.pid　　//pid名字
logfile "/data/redis2/redis.log" //log日志
daemonize yes  //后台启动　　　
dbfilename dump.rbd　　//持久化数据文件　　　　　

　　　　3）启动

　　　　　　标红的就是一个yum安装的实例，一个编译安装的实例，这个就是多实例了

[root@web1 redis2]# ./redis-server ./redis.conf 
[root@web1 redis2]# netstat -tunlp
Active Internet connections (only servers)
Proto Recv-Q Send-Q Local Address           Foreign Address         State       PID/Program name    
tcp        0      0 127.0.0.1:6379          0.0.0.0:*               LISTEN      2570/redis-server 1 
tcp        0      0 192.168.216.51:6380     0.0.0.0:*               LISTEN      15434/./redis-serve 
tcp        0      0 0.0.0.0:111             0.0.0.0:*               LISTEN      1/systemd           
tcp        0      0 0.0.0.0:80              0.0.0.0:*               LISTEN      2050/nginx: master  
tcp        0      0 192.168.122.1:53        0.0.0.0:*               LISTEN      2176/dnsmasq        
tcp        0      0 0.0.0.0:22              0.0.0.0:*               LISTEN      875/sshd            
tcp        0      0 127.0.0.1:631           0.0.0.0:*               LISTEN      879/cupsd           
tcp        0      0 127.0.0.1:25            0.0.0.0:*               LISTEN      2035/master         
tcp6       0      0 :::111                  :::*                    LISTEN      1/systemd           
tcp6       0      0 :::80                   :::*                    LISTEN      2050/nginx: master  
tcp6       0      0 :::22                   :::*                    LISTEN      875/sshd            
tcp6       0      0 ::1:631                 :::*                    LISTEN      879/cupsd           
tcp6       0      0 ::1:25                  :::*                    LISTEN      2035/master         
udp        0      0 0.0.0.0:5353            0.0.0.0:*                           574/avahi-daemon: r 
udp        0      0 127.0.0.1:323           0.0.0.0:*                           2334/chronyd        
udp        0      0 0.0.0.0:52822           0.0.0.0:*                           574/avahi-daemon: r 
udp        0      0 192.168.122.1:53        0.0.0.0:*                           2176/dnsmasq        
udp        0      0 0.0.0.0:67              0.0.0.0:*                           2176/dnsmasq        
udp        0      0 0.0.0.0:177             0.0.0.0:*                           890/lightdm         
udp6       0      0 ::1:323                 :::*                                2334/chronyd        
udp6       0      0 :::177                  :::*                                890/lightdm         
[root@web1 redis2]#

 

 

 

　　　　4）变量，赋值取值，正常关闭，非正常的关闭

[root@web1 redis2]# redis-cli -h 192.168.216.51 -p 6380 
192.168.216.51:6380> 
192.168.216.51:6380> 
192.168.216.51:6380> 
192.168.216.51:6380> set home zxg  //赋值
OK192.168.216.51:6380> get home　　　　//取值
"zxg"
192.168.216.51:6380> get abc 123
(error) ERR wrong number of arguments for 'get' command
192.168.216.51:6380> set abc 123 
OK
192.168.216.51:6380> get abc
"123"192.168.216.51:6380> KEYS *　　　　//查看所有的key
1) "abc"
2) "home"
192.168.216.51:6380> 
192.168.216.51:6380> SHUTDOWN　　//正常关闭，非正常关闭就是kill了

 

　　　

　　　　

四、主从配置

　　1、配置从服务器

　　　redis主从配置非常简单，只需要把从服务器改一个配置即可

　　　vim redis.conf

 

slaveof 192.168.216.51 6379

　　2、启动服务

[root@web2 ~]# systemctl start redis
[root@web2 ~]# systemctl enable redis

　　3、查看主从状态测试结果

[root@web1 redis2]# redis-cli -h 192.168.216.51 -p 6379
192.168.216.51:6379>  info replication 
# Replication
role:master
connected_slaves:1
slave0:ip=192.168.216.52,port=6379,state=online,offset=99,lag=0
master_repl_offset:99
repl_backlog_active:1
repl_backlog_size:1048576
repl_backlog_first_byte_offset:2
repl_backlog_histlen:98
192.168.216.51:6379>

 

127.0.0.1:6379> info replication
# Replication
role:slave
master_host:192.168.216.51
master_port:6379
master_link_status:up
master_last_io_seconds_ago:3
master_sync_in_progress:0
slave_repl_offset:253
slave_priority:100
slave_read_only:1
connected_slaves:0
master_repl_offset:0
repl_backlog_active:0
repl_backlog_size:1048576
repl_backlog_first_byte_offset:0
repl_backlog_histlen:0
127.0.0.1:6379>

注意1：从服务器只读

　　　　

　　　　master新建key test zxg

192.168.216.51:6379> set test zxg
OK
192.168.216.51:6379> get test
"zxg"
192.168.216.51:6379>

　　　　slave查看有没有值

127.0.0.1:6379> get test
"zxg"
127.0.0.1:6379>

 

复制的温柔
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
Redis主从复制和集群配置
08-21
Redis主从复制和集群配置说明
Redis集群-Redis安装、Redis主从复制、哨兵、Redis集群
12-25
Redis集群-Redis安装、Redis主从复制、哨兵、Redis集群
REDIS主从配置
2302_78534730的博客
08-08 1039
Redis的主从配置是指在Redis集群中，将一个Redis节点配置为主节点（master），其他节点配置为从节点（slave），主节点负责写操作和部分读操作，从节点负责读操作。主从配置的作用主要有以下几点：提高读写性能：主节点负责写操作，从节点负责读操作，实现了读写分离，有效提高了系统的读写性能。从节点可以接受主节点的复制数据，这样读操作可以在从节点上执行，减轻了主节点的负载。提高可用性：主节点故障时，从节点可以接替主节点的角色，继续提供服务。
[转载]无法不对你残酷
匆匆 人生
04-21 1371
 作者/安宁（《中国青年报》2005年12月18日）　弟弟第一次到北京读大学的时候，与我是同样的年龄。在父母的眼里，17岁，只不过是个孩子，而且，又是没出过县城连火车也没有见过的农村少年。母亲便打电话给我，说要不你回来接他吧，实在是不放心，那么大的北京，走丢了怎么办？我想起这么多年来，一个人走过的路，很坚决地便拒绝掉了。我说有什么不放心的，一个男孩子，连路都不会走，考上大学有什么用？！ 
FC 魔天童子 金手指
暮然回首，那人却在灯火阑珊处
03-07 2万+
0540-1-14-HP減らない 0541-1-2F-使いのHP減らない 0074-1-99-REST99回 0075-2-9999-お金最大 007D-1-10-無敵(穴に落ちたりしたらOFF) 009A-1-0-いぬぶえ所持 0099-1-0-てんけんじゅっぽう(ひのもと)所持 009B-1-0-鏡所持 0079-1-1-きそくほうじゅ(かっとびぐつ)所持 0762-1-14
javaScript快速入门之运算符
qq_42992704的博客
03-22 2万+
一元运算符 自增和自减运算符 逻辑运算符 赋值运算符关系 相等运算符 条件运算符运算符的优先级运算符的优先级
Redis—主从配置
xiayping的博客
08-03 3392
Redis主从配置参数详解
[转贴].net中即时消息发送的实现
蜗牛档案室
03-27 2万+
用了我一下午的时间终于写完并整理好了利用.net来发送即时消息的材料（当然了，还有上午的数据库设计：）    数据库设计：info表：id fromstu_id tostu_id content term   其中id是主键，fromstu_id是发送信息的用户的学号（这是和我做的学友录连在一起的），tostu_id是接受信息的用户的学号，content是消息的内容，term是判断是否为新消息。
❤️撸完这个springboot项目，我对boot轻车熟路！【源码+视频都开源】【强烈建议收藏】❤️
热门推荐
程序员springmeng
09-02 7万+
上次给大家分享了一个springboot+vue的校园招聘系统，视频教程加项目源码，都是开源的，应该说很香了，今天再给大家分享一个不错的springboot的项目。 老规矩，开源，开源，开源！！！ 金九银十来了，小伙伴们，冲啊！前面已经整理了很多的面试题，拿去学习吧！ 1，❤️爆肝！整理了一周的Spring面试大全【含答案】，吊打Java面试官【建议收藏】！❤️ 2，❤️肝完了，一天掌握数据结构和算法面试题，吊打面试官，建议收藏❤️ 3，❤️集合很简单？开什么玩笑？肝了一周，全是精华，
Linux-固定usb转网口名称
Paper_Love的博客
11-02 7482
udev 是一个用户空间系统，它使操作系统管理员能够为事件注册用户空间处理程序。udev 守护程序接收的事件主要由 （Linux） 内核生成，以响应与外围设备相关的物理事件。因此，udev的主要目的是对外设检测和热插拔采取行动，包括将控制权返回给内核的操作，udev 可提供所需的基础结构来动态维护 /dev 目录中的设备节点文件和符号链接。udev 规则提供了将外部工具插入内核设备事件处理的方式。
redis教程及主从配置和集群搭建
03-15
零基础，快速掌握redis基本知识，学会主从配置，及其集群搭建。
redis工作原理及单机主从集群版安装使用说明书
02-18
一、redis简介、优势、Redis和其他key-value存储有什么不同 二、redis下载安装 三、redis主从模式 1. 什么是主从复制 2.... 3. 主从复制的意义 4. 复制原理 5. redis主从复制配置 ...五、redis集群配置说明
redis6.2主从集群自动化配置脚本
04-01
附件包含redis6.2软件和自动化配置脚本，在主节点运行redis-m.sh，在从节点运行./redis-s.sh masterip,默认是6主6从，可以通过修改脚本配置修改主从节点数量，另外运行前请修改脚本中网卡名称，脚本默认网卡名为ens...
go语言 go-redis watch实例
xiao_xiao_w的博客
04-25 311
讲一下对watch的理解在redis中watch是通过加了乐观锁的方法先获取事务执行前key值，如果在开始执行事务时检测到由于并发key被其他客户端修改了，就会终止事务如果用go-redis实现就是这样的其中watch即使对key值的监听，fn回调函数相当于如果key没有发生修改要执行的事务逻辑。
《Redis使用手册之有序集合》
最新发布
one大白(●—●)的博客
04-30 765
命令接受的分值范围与ZRANGEBYSCORE命令和ZCOUNT命令接受的分值范围一样，都默认为闭区间分值范围，但用户可以使用(符号定义闭区间，或者使用+inf和-inf表示正无限分值或负无限分值。处理不存在的键或者不存在的成员，ZINCRBY命令将直接把给定的成员添加到有序集合中，并把给定的增量设置为该成员的分值，效果相当于执行ZADD命令。在使用WEIGHTS选项时，用户需要为每个给定的有序集合分别设置一个权重，命令会将这个权重与成员的分值相乘，得出成员的新分值，然后进行聚合计算；
Linux系统安装Redis7（详细版）
weixin_43154319的博客
04-27 854
gcc是linux下的一个编译程序，是C程序的编译工具。GCC(GNU Compiler Collection) 是 GNU(GNU’s Not Unix) 计划提供的编译器家族，它能够支持 C, C++, Objective-C, Fortran, Java 和 Ada 等等程序设计语言前端，同时能够运行在 x86, x86-64, IA-64, PowerPC, SPARC和Alpha 等等几乎目前所有的硬件平台上。
【Redis 开发】缓存穿透解决
weixin_62513677的博客
04-25 465
当数据库中查询无果的时候，我们在对应的缓存中写入一个null，在下一次访问的时候就不会到达数据库，由缓存返回一个null。首先通过布隆过滤器，如果没有数据就拒绝访问，底层时间通过数据库中的数据通过哈希算法算出哈希值存到布隆过滤器中。缓存穿透是指客户端请求的数据在缓存中和数据库中都不存在，这样缓存就永远不会生效，这些请求都会打到数据库。可能造成短期的不一致 （我在数据库插入一条数据，但是对应的缓存中存的是null）在服务层判断数据库的时候加入缓存空对象方面的技术。优点：内存占用少，没有多余的key。
【限流】基于springboot（拦截器） + redis（执行lua脚本）实现注解限流
qq_43209531的博客
04-30 196
基于springboot（拦截器） + redis（执行lua脚本）实现注解限流
【redis】Redis数据类型(一)——String类型(包含redis通用命令)
低调做人，低调编码，神码都是浮云
04-26 1421
redis基本数据类型之string类型详解
redis创建集群主从关系语句
04-17
可以使用以下语句来创建 redis 集群主从关系： 1. 首先，在所有的 Redis 实例中，找到一个实例作为主节点，在其 redis.conf 配置文件中增加以下条目： ``` port 6379 daemonize yes pidfile /var/run/redis_6379....

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值