Redis&memcache

最新推荐文章于 2022-04-30 16:24:41 发布
最新推荐文章于 2022-04-30 16:24:41 发布
阅读量548 收藏
点赞数
分类专栏： mysql 面试问题 文章标签： redis memcached 数据库
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/weixin_46018506/article/details/122433440
版权

目录

一. Memcached

服务架构：

原理：

 1.安装

 编译安装的memcached启动方法

编译安装的memcached开机启动

2.修改配置文件

3.启动

4.测试

 1.使用memcached的原始命令

二.redis

特点：

1.安装

安装redis

 开机启动

测试

**2.redis持久化**

方式:        RDB        AOF

如何选择方式？

配置持久化

3.redis主从

主从 – 用法

主从 – 同步原理

环境:

192.168.31.212        master

192.168.31.213        slave1

192.168.31.214        slave2

测试

4.redis-sentinel

sentinel介绍

工作方式

 主观下线和客观下线 

1. 每台机器上修改redis主配置文件设置：

3.每台机器启动服务：

4.关闭主服务器，观察从服务器改变状态 

redis有哪些好处

redis相比memcached有哪些优势

redis常见性能问题和解决方案

redis集群的工作原理

      

  许多Web应用都将数据保存到 RDBMS中，应用服务器从中读取数据并在浏览器中显示。 但随着数据量的增大、访问的集中，就会出现RDBMS的负担加重、数据库响应恶化、 网站显示延迟等重大影响。Memcached/redis是高性能的分布式内存缓存服务器,通过缓存数据库查询结果，减少数据库访问次数，以提高动态Web等应用的速度、 提高可扩展性。

        RDBMS即关系数据库管理系统(Relational Database Management System)

NOSQL名词解释：Not Only SQL 以键值对的方式存储数据

一. Memcached

服务架构：

原理：

        1.检查用户请求的数据是缓存中是否有存在，如果有存在的话，只需要直接把请求的数据返回，无需查询数据库。
        2.如果请求的数据在缓存中找不到，这时候再去查询数据库。返回请求数据的同时，把数据存储到缓存中一份。
        3.保持缓存的“新鲜性”，每当数据发生变化的时候（比如，数据有被修改，或被删除的情况下），要同步的更新缓存信息，确保用户不会在缓存取到旧的数据。

 1.安装

yum install memcached -y

 编译安装的memcached启动方法

# /usr/local/memcached/bin/memcached -u memcached -p 11211 -m 1500 -c 1024

编译安装的memcached开机启动

1.把启动命令写到rc.local里面

chmod a+x /etc/rc.d/rc.local
echo '/usr/local/memcached/bin/memcached -u memcached -p 11211 -m 1500 -c 1024' >> /etc/rc.d/rc.local
systemctl enable  rc-local

2.编写shell启动脚本

#! /bin/sh
# chkconfig: - 55 45
# description: The memcached daemon is a network memory cache service.
# processname: memcached
# config: /etc/sysconfig/memcached
# Source function library - for other linux
#. /etc/rc.d/init.d/functions
# Source function library - for SUSE linux

. /lib/lsb/init-functions
PORT=11211
USER=root
#最大连接数，根据实际需求修改
MAXCONN=1024
#最大内存量，单位M
CACHESIZE=128
OPTIONS=""

if [ -f /etc/sysconfig/memcached ];then
. /etc/sysconfig/memcached
fi

# Check that networking is up.
if [ "$NETWORKING" = "no" ]
then
exit 0
fi

RETVAL=0
prog="memcached"

start () {
echo -n $"Starting $prog: "
# insure that /usr/local/memcached has proper permissions
chown $USER /usr/local/memcached

/usr/local/memcached/bin/memcached -d -p $PORT -u $USER -m $CACHESIZE -c $MAXCONN -P /usr/local/memcached/memcached.pid $OPTIONS

RETVAL=$?

echo
[ $RETVAL -eq 0 ] && touch /var/lock/subsys/memcached
}

stop () {
echo -n $"Stopping $prog: "
killproc memcached
RETVAL=$?
echo
if [ $RETVAL -eq 0 ] ; then
rm -f /var/lock/subsys/memcached
rm -f /usr/local/memcached/memcached.pid
fi
}

restart () {
stop
start
}

# See how we were called.
case "$1" in

start)
start
;;
stop)
stop
;;
status)
status memcached
;;
restart|reload)
restart
;;
condrestart)
[ -f /var/lock/subsys/memcached ] && restart || :
;;
*)
echo $"Usage: $0 {start|stop|status|restart|reload|condrestart}"
exit 1
esac

exit $?

2.修改配置文件

vim  /etc/sysconfig/memcached 
PORT="11211"                 //同台机编译安装多个memcached，多实例
USER="memcached"
MAXCONN="1024"
CACHESIZE="1500"            //单位是 MB
OPTIONS=""                  //监听的网络地址

3.启动

systemctl start memcached.service 
 ps aux | grep memcache

4.测试

 1.使用memcached的原始命令

yum install telnet
telnet  127.0.0.1  11211
    set name 0 900 5   //设置名称为name的key
    why
    get name
    why

二.redis

特点：

丰富的数据结构
支持持久化
支持事务        众所周知，事务是指“一个完整的动作，要么全部执行，要么什么也没有做”。
支持主从

1.安装

安装redis

wget http://download.redis.io/releases/redis-4.0.9.tar.gz -O /redis-4.0.9.tar.gz
cd  /
tar xzf redis-4.0.9.tar.gz
cd /redis-4.0.9/
make

 开机启动

mkdir  /etc/redis
cp   /redis-4.0.9/redis.conf  /etc/redis/6379.conf
cp /redis-4.0.9/utils/redis_init_script   /etc/init.d/redis

vim /etc/init.d/redis  更改文件路径，&放到后台静默执行

EXEC=/redis-4.0.9/src/redis-server
CLIEXEC=/redis-4.0.9/src/redis-cli
$EXEC $CONF &
chmod 777 /etc/init.d/redis
chkconfig --add redis
chkconfig  redis  on
systemctl daemon-reload
systemctl start redis

测试

 /redis-4.0.9/src/redis-cli

127.0.0.1:6379> set name why

OK

127.0.0.1:6379> get name

"why"

**2.redis持久化**

        开启持久化功能后，重启redis后，数据会自动通过持久化文件恢复！！

方式:        RDB        AOF

RDB(Redis databases)：RDB，是在不同的时间点，将redis存储的数据生成快照并存储到磁盘等介质上；

特点：

周期性
不影响数据写入        RDB会启动子进程，备份所有数据。当前进程，继续提供数据的读写。当备份完成，才替换老的备份文件。
高效                        一次性还原所有数据
完整性较差                故障点到上一次备份，之间的数据无法恢复。

AOF（append only  file）

AOF，则是换了一个角度来实现持久化，那就是将redis执行过的所有写指令（每秒钟）记录在日志中，在下次redis重新启动时，只要把这些写指令从前到后再重复执行一遍，就可以实现数据恢复了。

特点：

实时性
完整性较好
体积大        记录数据的指令，删除数据的指令都会被记录下来。

如何选择方式？

缓存
    不用开启任何的持久化方式
双开
    因RDB数据不实时，但同时使用两者时服务器只会找AOF文件,所以RDB留作万一的手段。

配置持久化

RDB默认开启        rdbcompression yes

AOF默认关闭        appendonly no

3.redis主从

主从 – 用法

像MySQL一样，redis是支持主从同步的，而且也支持一主多从以及多级从结构。

主从结构，一是为了纯粹的冗余备份，二是为了提升读性能，比如很消耗性能的SORT就可以由从服务器来承担。

redis的主从同步是异步进行的，这意味着主从同步不会影响主逻辑，也不会降低redis的处理性能。

主从架构中，可以考虑关闭主服务器的数据持久化功能，只让从服务器进行持久化，这样可以提高主服务器的处理性能。

在主从架构中，从服务器通常被设置为只读模式，这样可以避免从服务器的数据被误修改。但是从服务器仍然可以接受CONFIG等指令，所以还是不应该将从服务器直接暴露到不安全的网络环境中。如果必须如此，那可以考虑给重要指令进行重命名，来避免命令被外人误执行。

主从 – 同步原理

从服务器会向主服务器发出SYNC指令，当主服务器接到此命令后，就会调用BGSAVE指令来创建一个子进程专门进行数据持久化工作，也就是将主服务器的数据写入RDB文件中。在数据持久化期间，主服务器将执行的写指令都缓存在内存中。

在BGSAVE指令执行完成后，主服务器会将持久化好的RDB文件发送给从服务器，从服务器接到此文件后会将其存储到磁盘上，然后再将其读取到内存中。这个动作完成后，主服务器会将这段时间缓存的写指令再以redis协议的格式发送给从服务器。

另外，要说的一点是，即使有多个从服务器同时发来SYNC指令，主服务器也只会执行一次BGSAVE，然后把持久化好的RDB文件发给多个下游。在redis2.8版本之前，如果从服务器与主服务器因某些原因断开连接的话，都会进行一次主从之间的全量的数据同步；而在2.8版本之后，redis支持了效率更高的增量同步策略，这大大降低了连接断开的恢复成本。

主服务器会在内存中维护一个缓冲区，缓冲区中存储着将要发给从服务器的内容。从服务器在与主服务器出现网络瞬断之后，从服务器会尝试再次与主服务器连接，一旦连接成功，从服务器就会把“希望同步的主服务器ID”和“希望请求的数据的偏移位置（replication offset）”发送出去。主服务器接收到这样的同步请求后，首先会验证主服务器ID是否和自己的ID匹配，其次会检查“请求的偏移位置”是否存在于自己的缓冲区中，如果两者都满足的话，主服务器就会向从服务器发送增量内容。

增量同步功能，需要服务器端支持全新的PSYNC指令。这个指令，只有在redis-2.8之后才具有。

环境:

192.168.31.212        master

192.168.31.213        slave1

192.168.31.214        slave2

192.168.31.212        master

 vim /etc/redis/6379.conf

bind 0.0.0.0
protected-mode no

systemctl restart redis

192.168.31.213        slave1

 vim /etc/redis/6379.conf

slaveof 192.168.31.212  6379
bind 0.0.0.0
protected-mode no

systemctl restart redis

192.168.31.214        slave2

 vim /etc/redis/6379.conf

slaveof 192.168.31.212  6379
bind 0.0.0.0
protected-mode no

systemctl restart redis

测试

数据一致性

        master1记录键值对
        slave1查询数据，验证数据一致性

服务状态

        /redis-4.0.9/src/redis-cli        登录redis客户端

        info replication        查看复制状态

4.redis-sentinel

sentinel介绍

是Redis官方推荐的高可用性(HA)解决方案。实际上这意味着你可以使用Sentinel模式创建一个可以不用人为干预而应对各种故障的Redis部署。
作用：
 1)：Master状态检测
 2)：如果Master异常，则会进行Master-Slave切换，将其中一个Slave作为Master，将之前的Master作为Slave
 3)：Master-Slave切换后，master_redis.conf、slave_redis.conf和sentinel.conf的内容都会发生改变，即master_redis.conf中会多一行slaveof的配置，sentinel.conf的监控目标会随之调换

工作方式

1)：每个Sentinel以每秒钟一次的频率向它所知的Master，Slave以及其他 Sentinel 实例发送一个 PING 命令

 2)：如果一个实例（instance）距离最后一次有效回复 PING 命令的时间超过 down-after-milliseconds 选项所指定的值， 则这个实例会被 Sentinel 标记为主观下线。

 3)：如果一个Master被标记为主观下线，则正在监视这个Master的所有 Sentinel 要以每秒一次的频率确认Master的确进入了主观下线状态。

 4)：当有足够数量的 Sentinel（大于等于配置文件指定的值）在指定的时间范围内确认Master的确进入了主观下线状态， 则Master会被标记为客观下线

 主观下线和客观下线 

主观下线：Subjectively Down，简称 SDOWN，指的是当前 Sentinel 实例对某个redis服务器做出的下线判断。
 客观下线：Objectively Down， 简称 ODOWN，指的是多个 Sentinel 实例在对Master Server做出 SDOWN  判断，并且通过 SENTINEL is-master-down-by-addr 命令互相交流之后，得出的Master  Server下线判断，然后开启failover

1. 每台机器上修改redis主配置文件设置：

bind 0.0.0.0（略）

2.每台机器上修改sentinel配置文件：

添加如下配置

vim /redis-4.0.9/sentinel.conf

sentinel monitor mymaster 192.168.31.212 6379 2
sentinel down-after-milliseconds mymaster 3000
sentinel failover-timeout mymaster 10000
protected-mode no

当集群中有2个sentinel认为master死了时，才能真正认为该master已经不可用了。

如果在down-after-millisecondes毫秒内，没有收到有效的回复，则会判定该节点为主观下线。

若sentinel在该配置值内未能完成failover(故障转移)操作（即故障时master/slave自动切换），则认为本次failover失败。

3.每台机器启动服务：

 /redis-4.0.9/src/redis-sentinel sentinel.conf

4.关闭主服务器，观察从服务器改变状态 

停掉master，并在新的master上面查看信息

        /redis-4.0.9/src/redis-cli

        info replication

redis有哪些好处

(1) 速度快，因为数据存在内存中，类似于HashMap，HashMap的优势就是查找和操作的时间复杂度都是O(1)
(2) 支持丰富数据类型，支持string，list，set，sorted set，hash
(3) 支持事务，操作都是原子性，所谓的原子性就是对数据的更改要么全部执行，要么全部不执行
(4) 丰富的特性：可用于缓存，消息，按key设置过期时间，过期后将会自动删除

redis相比memcached有哪些优势

(1) memcached所有的值均是简单的字符串，redis作为其替代者，支持更为丰富的数据类型
(2) redis可以持久化其数据

redis常见性能问题和解决方案

(1) Master最好不要做任何持久化工作，如RDB内存快照和AOF日志文件
(2) 如果数据比较重要，某个Slave开启AOF备份数据，策略设置为每秒同步一次
(3) 为了主从复制的速度和连接的稳定性，Master和Slave最好在同一个局域网内
(4) 尽量避免在压力很大的主库上增加从库
(5) 主从复制不要用树状结构，用单向链表结构更为稳定，即：Master（写） <- Slave1（读） <- Slave2（读） <- Slave3（读）...
这样的结构方便解决单点故障问题，实现Slave对Master的替换。如果Master挂了，可以立刻启用Slave1做Master，其他不变。

redis集群的工作原理

主多从+哨兵模式（keelalived）

why_upup
关注
  • 0
    点赞
  • 踩
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
memcached入门指南（二）memcached的启动
灾变之刃的博客
02-13 3227
安装好memcached之后进入memcahed安装目录cd memcached-1.5.4执行./memcached -h命令后可以看到所有的启动参数及其说明在这里我们启动只需要几个常用参数./memcached -d -l 192.168.42.25 -p 11200 -m 1024 -u xpy其中-d让服务在后台运行，-l指定ip，-p指定服务的端口号，-m指定运行内存，-u指定启动的用户...
redis和memcached的区别（总结）
weixin_44137255的博客
05-24 881
这里就存在一个I/O线程池的问题。Redis 只会缓存所有的key的信息，如果Redis发现内存的使用量超过了某一个阀值，将触发swap的操作，Redis根据“swappability = age*log(size_in_memory)”计算出哪些key对应的value需要swap到磁盘。同时由于Redis将内存中的数据swap到磁盘中的时候，提供服务的主线程和进行swap操作的子线程会共享这部分内存，所以如果更新需要swap的数据，Redis将阻塞这个操作，直到子线程完成swap操作后才可以进行修改。
面试宝典：Redis和Memcache对比及选择
hughjin
04-25 2799
Redis和Memcache对比及选择 简介 Memcached：⼀款完全开源、⾼性能的、分布式的内存系统； Redis：⼀个开源的、Key-Value 型、基于内存运⾏并⽀持持久化的 NoSQL 数据库； Memcached 更侧重于⾼性能内存/缓存系统，⽽ Redis 则⽀持持久化，主打数据库功能，兼可作缓存系统（性能也很⾼）。 参数与功能对比表 对比参数 Redis Memcached 类型 数据存储在内存中；非关系型数据库 数据存储在内存中；key-value形式； 支持的数据存
Redis和Memcache的区别总结
04-26
1、Redis和Memcache都是将数据存放在内存中，都是内存数据库。不过memcache还可用于缓存其他东西，例如图片、视频等等； 2、Redis不仅仅支持简单的k/v类型的数据，同时还提供list，set，hash等数据结构的存储； 3、虚拟内存--Redis当物理内存用完时，可以将一些很久没用到的value 交换到磁盘； 4、过期策略--memcache在set时就指定，例如set key1 0 0 8,即永不过期。Redis可以通过例如expire 设定，例如expire name 10； 5、分布式--设定memcache集群，利用magent做一主多从;redis可以做一主多从。都可以一主一从； 6、存储数据安全--memcache挂掉后，数据没了；redis可以定期保存到磁盘（持久化）； 7、灾难恢复--memcache挂掉后，数据不可恢复; redis数据丢失后可以通过aof恢复； 8、Redis支持数据的备份，即master-slave模式的数据备份；
linux下memcached的启动/结束的方式
yang576017120的专栏
03-28 246
当前项目中，linux下memcached的启动/结束的方式 默认情况下memcached安装到/usr/local/bin下。 进入安装目录，启动memcached:/usr/local/memcached/bin/memcached -d -c 10240 -m 1024 -u root 获取运行状态：echo stats | nc localhost 11211(可以查看出pid)  ...
redis&memcache;所需扩展包
08-10
各系统版本安装redis以及memcache时对应所需要的扩展包
Overlord是哔哩哔哩基于Go语言编写的memcache和redis&cluster
最新发布
05-24
Overlord是哔哩哔哩基于Go语言编写的memcache和redis&cluster的代理及集群管理功能，致力于提供自动化高可用的缓存服务解决方案。 Go语言（也称为Golang）是由Google开发的一种静态强类型、编译型的编程语言。它...
Redis、Memcache、MongoDB区别
11-01
1、里面包含Redis、MongoDB、Memcache相关的学习文档 2、对这三者有比较详细的应用场景告之，并描述出了三者之间区别 3、提供JAVA连接Redis常见问题的解决方案 4、对MongoDB的特性有专门文档作描述 5、对于新手而言...
Redis和Memcache对比与如何选择
09-08
我这段时间在用redis，感觉挺方便的，但比较疑惑在选择内存数据库的时候到底什么时候选择redis，什么时候选择memcache，然后就查到下面对应的资料，是来自redis作者的说法（stackoverflow上面）
linux系统下memcached启动正常但程序无法连接的问题解决
dearbaba_8520的博客
05-12 228
linux系统下memcached启动正常但程序无法连接的问题解决
Memcached服务端自动启动
weixin_30457551的博客
09-11 206
经测试，要使得Memcached能够提供session共享服务，必须启动Memcached服务端为系统服务。本人较为初级，一般都是按向导安装的。所以，要将其设为自动启动的服务也就困难了。 上网搜索了一下，结果，得到以下一些结果，做个记录： 1、最傻的做法 通常：启动Memcache的服务器端的命令为：# /usr/local/bin/memcached -d -m 10 -u r...
memcached linux 配置文件,Linux系统中memcache安装和配置（自启动）过程
weixin_39945531的博客
04-29 76
memcache 是一个高性能的分布式的内存对象缓存系统，通过在内存中维护一张统一的、巨大的 Hash 表，它能够用来存储各种格式的数据，包括图像、视频、文件及数据库检索的结果等。简单地说就是将数据调用到内存中，然后从内存中读取，从而大大提高读取速度。大家需要注意，memcache 有两个软件：memcache-3.0.8 是 memcache 模块，也就是客户端；memcached-1.4.17...
memcached---安装、启动和关闭
黄星的专栏
12-07 1439
安装 yum install -y libmemcached libmemcached-devel find / -name memcached.h wget http://pecl.php.net/get/memcached-2.2.0.tgz tar -zxvf memcached-2.2.0.tgz cd memcached-2.2.0 /usr/local/php5.6/bin/ph
Redis与Memcache的区别
显波的博客
04-16 819
从网络上看的几篇文章，手工记录一下，加强认知：参考地址：https://blog.csdn.net/chaoluo001/article/details/70740307https://blog.csdn.net/hhjianlong/article/details/73928653https://www.zhihu.com/question/19829601共同点：   Memcache和Red...
redis与memcache
珞羽飘凌个人博客
12-19 444
什么是memcache? Memcache是一个高性能，分布式内存对象缓存系统，通过在内存中缓存一个巨大的hash表，他能够存储包括图像，文件，索引，sql语句结果等数据，可以理解为它是一个为提升读取效率的数据容器，先将数据从数据库提取到内存中，然后在内存中读取，从而提升读取效率 什么是redis? Redis 是一个开源（BSD许可）的，内存中的数据结构存储系统，它可以用作数据库、缓存和消息中间...
Redis和Memcache的区别
ZT云的博客
06-08 1892
概述 Redis和Memcache都是基于内存的数据存储系统。Memcached是高性能分布式内存缓存服务；Redis是一个开源的key-value存储系统。与Memcached类似，Redis将大部分数据存储在内存中，支持的数据类型包括：字符串、哈希 表、链表、等数据类型的相关操作。下面我们来进行来看一下redis和memcached的区别： Redis的作者Salvatore Sanfilippo曾经对这两种基于内存的数据存储系统进行过比较： Redis支持服务器端的数据操作：Redis相比Memcac
缓存技术之Redis和Memcache的区别以及对比
spring3776的博客
04-30 1067
Redis 区别： 1） Redis和Memcache都是将数据存放在内存中，都是内存数据库。不过memcache还可用于缓存其他东西，例如图片、视频等等。 2）Redis不仅仅支持简单的k/v类型的数据，同时还提供list，set，hash等数据结构的存储。 3）虚拟内存–Redis当物理内存用完时，可以将一些很久没用到的value 交换到磁盘 4）过期策略–memcache在set时就指定，例如set key1 0 0 8,即永不过期。Redis可以通过例如expire 设定，例如expire nam.
redis 主从+哨兵+VIP 部署
weixin_44781213的博客
05-25 1152
1. 环境准备(例) 1.1 本机环境 centos7.4 x86_64 redis 3.2.5 1.2 redis环境 名称 ip port 网卡名 备注 Redis_1 192.168.56.108 6380 enp0s8 主 Redis_2 192.168.56.109 6380 enp0s8 从 Redis_3 192.168.56.110 6380 enp0s8 从 Redis-Sentinel_1 192.168.56.108 26380 enp0s8 Re
redis 和 memcache
06-10
Redis和Memcached都是内存缓存系统，它们都可以用来加速应用程序的性能，但是它们在一些方面有所不同。 Redis是一个开源的，高性能的键值存储系统，支持多种数据结构，包括字符串、哈希表、列表、集合、有序集合等。除了内存缓存外，Redis还支持将数据持久化到磁盘中。Redis还具有分布式功能，可以通过分片将数据存储在多个节点上。 Memcached是一个开源的分布式内存对象缓存系统，主要用于提升Web应用程序的性能。Memcached将数据存储在内存中，并使用LRU（最近最少使用）算法从内存中淘汰不常用的数据。Memcached只支持字符串作为键和值，不支持复杂数据结构。 总的来说，如果需要支持复杂数据结构和持久化功能，或者需要分布式缓存，那么Redis可能更适合；如果只需要简单的键值对缓存，并且希望使用更少的内存，那么Memcached可能更适合。但是实际上，两者的选择取决于具体的应用场景和需求。

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值