Memcached&Redis构建缓存服务器的图文解释

1、前言

	许多web应用都将数据保存到关系数据库中（RDBMS），应用服务器从中读取数据并在浏览器中显示，但随着数据的增大、访问的集中，就会出现RDBMS的负担加重，数据库相应恶化，网站显示延迟等重大影响。memcached/redis是高性能的分布式内存缓存服务器，通过缓存数据库查询结果，减少数据库访问次数，以提高动态web等应用的速度、提高可扩展性。
	RDBMS是关系数据库管理系统（Relational Database Management System）
	（1）简介
				nosql产品：redis  MongoDB   memcached 
				nosql 名词：非关系型数据库
				以键值的方式存储数据  （key--value）的形式
				缓存数据库
	（2）nosql的优缺点：
				优点:
				- 高可扩展性
				- 分布式计算
				- 低成本
				- 架构的灵活性
				- 没有复杂的关系

				缺点:
				- 没有标准化
				- 有限的查询功能（到目前为止）
				- 最终一致是不直观的程序
		缓存服务器的作用：加快访问速度，缓解数据库压力
（3）关系型数据库与非关系型数据库的区别

1.首先了解一下 什么是关系型数据库？
关系型数据库最典型的数据结构是表，由二维表及其之间的联系所组成的一个数据组
织。
优点：
1、易于维护：都是使用表结构，格式一致；
2、使用方便：SQL语言通用，可用于复杂查询；
3、复杂操作：支持SQL，可用于一个表以及多个表之间非常复杂的查询。
缺点：
1、读写性能比较差，尤其是海量数据的高效率读写；
2、固定的表结构，灵活度稍欠；
3、高并发读写需求，传统关系型数据库来说，硬盘I/O是一个很大的瓶颈

二 非关系型数据库
什么非关系型数据库呢？

非关系型数据是一种数据结构化存储方法的集合，可以是文档或者键值对等

优点：
1、格式灵活：存储数据的格式可以是key,value形式、文档形式、图片形式等等，文档形式、图片形式等等，使用灵活，应用场景广泛，而关系型数据库则只支持基础类型。
2、速度快：nosql可以使用硬盘或者随机存储器作为载体，而关系型数据库只能使用硬盘；
3、高扩展性；
4、成本低：nosql数据库部署简单，基本都是开源软件。

缺点：
1、不提供sql支持，学习和使用成本较高；
2、无事务处理；
3、数据结构相对复杂，复杂查询方面稍欠。

2、memcached

	memcached的特点

1.内置内存存储方式-----------为了提高性能，memcached中保存的数据都存储在memcache内置的内存存储空间中。由于数据仅存在于内存中，重启操作系统会导致全部数据消失
2.简单key/value存储---------------服务器不关心数据本身的意义及结构，只要是可序列化数据即可。存储项由“键、过期时间、可选的标志及数据”四个部分组成；

2 服务框架

原理： 1、检查客户端的请求数据是否在memcached中，如有，直接把请求数据返回，不再对数据库进行任何操作，路径操作为①②③⑦。
2、如果请求的数据不在memcached中，就去查数据库，把从数据库中获取的数据返回给客户端，同时把数据缓存一份到memcached中（memcached客户端不负责，需要程序明确实现），路径操作为①②④⑤⑦⑥。

3.保持缓存的“新鲜性”，每当数据发生变化的时候（比如，数据有被修改，或被删除的情况下），要同步更新的缓存信息，确保用户不会在缓存取到旧的数据。
安装memcached：
memcache能存放多少数据，取决于服务器本身的内存有多大。






退出 quit
扩展:安装php支持memcached的扩展模块:
[root@memcached ~]# rpm -Uvh https://mirror.webtatic.com/yum/el7/epel-release.rpm
[root@memcached ~]# rpm -Uvh https://mirror.webtatic.com/yum/el7/webtatic-release.rpm
[root@memcached ~]# yum install php70w.x86_64 php70w-cli.x86_64 php70w-common.x86_64 php70w-gd.x86_64 php70w-ldap.x86_64 php70w-mbstring.x86_64 php70w-mcrypt.x86_64 php70w-mysql.x86_64 php70w-pdo.x86_64 php70w-devel zlib-devel php70w-fpm make gcc zlib-devel libmemcached-devel git libmemcached php70w-pecl-memcached -y

3、Redis服务

1、介绍

redis是一个开源的、使用C语言编写的、支持网络交互的、可基于内存也可持久化的Key-Value数据库

**redis的官网：**redis.io
注:域名后缀io属于国家域名，是british Indian Ocean territory，即英属印度洋领地

1、redis的特点:
1.丰富的数据结构 -----String,list,set,hash等数据结构的存储
2.支持持久化
3.支持事务 ---------------事务是指“一个完整的动作，要么全部执行，要么什么也没有做”。
4.支持主从
2、区别
redis和memcache比较
1).Redis不仅仅支持简单的k/v类型的数据,同时还提供了list,set,zset,hash等数据结构的存储
2).Redis支持master-slave(主-从)模式应用
3).Redis支持数据的持久化

4、安装Redis

wget http://download.redis.io/releases/redis-4.0.9.tar.gz 下载redis
tar -xzvf redis-4.0.9.tar.gz -C /usr/local 解压redis并指定解压位置
mv /usr/local/redis-4.0.9 /usr/local/redis 修改名称，方便记忆
vim /usr/local/redis/redis.conf 修改配置文件
bind 0.0.0.0　　#只监听内网IP 内网所有的用户都可以访问
daemonize yes　　　　　#开启后台模式将on改为yes
port 6379 #端口号
dir 　/usr/local/redis 　#本地数据库存放持久化数据的目录该目录-----需要存在

上面写入的内容
[Unit]
Description=Redis
After=network.target
[Service]
ExecStart=/data/application/redis/src/redis-server /data/application/redis/redis.conf --daemonize no
ExecStop=/data/application/redis/src/redis-cli -h 127.0.0.1 -p 6379 shutdown
[Install]
WantedBy=multi-user.target

参数详解:
• [Unit] 表示这是基础信息
• Description 是描述
• After 是在那个服务后面启动，一般是网络服务启动后启动

• [Service] 表示这里是服务信息
• ExecStart 是启动服务的命令
• ExecStop 是停止服务的指令

• [Install] 表示这是是安装相关信息
• WantedBy 是以哪种方式启动：multi-user.target表明当系统以多用户方式（默认的运行级别）启动时，这个服务需要被自动运行。
[root@localhost redis]# systemctl daemon-reload
[root@localhost redis]# systemctl start redis.service

./redis-cli #redis的客户端
./redis-server #redis的服务端
./redis-check-aof #用于修复出问题的AOF文件
./redis-sentinel #用于集群管理

5、数据持久化

一、redis提供了两种持久化的方式，分别是RDB（Redis DataBase）和AOF（Append Only File）。

RDB（Redis DataBase）：是在不同的时间点，将redis存储的数据生成快照并存储到磁盘等介质上；
特点:
1.周期性
2.不影响数据写入 #RDB会启动子进程，备份所有数据。当前进程，继续提供数据的读写。当备份完成，才替换老的备份文件。
3.高效 #一次性还原所有数据

4.完整性较差 #故障点到上一次备份，之间的数据无法恢复。

AOF（Append Only File）则是换了一个角度来实现持久化，那就是将redis执行过的所有写指令记录下来，在下次redis重新启动时，只要把这些写指令从前到后再重复执行一遍，就可以实现数据恢复了。
特点:
1.实时性
2.完整性较好

3.体积大 #记录数据的指令，删除数据的指令都会被记录下来

二、RDB和AOF两种方式也可以同时使用，在这种情况下，如果redis重启的话，则会优先采用AOF方式来进行数据恢复，这是因为AOF方式的数据恢复完整度更高。
三、如何选择方式？
缓存：不用开启任何持久方式
双开:因RDB数据不实时，但同时使用两者时服务器只会找AOF文件,所以RDB留作以防万一的手段。
官方的建议是两个同时使用。这样可以提供更可靠的持久化方案。
写入速度快 ------------AOF
写入速度慢 ------------RDB
持久化配置文件





注意:每次快照持久化都是将内存数据完整写入到磁盘一次，如果数据量大的话，而且写操作比较多，必然会引起大量的磁盘io操作，可能会严重影响性能。

6、redis主从配置

在192.168.37.128上
vim /etc/hosts
redis-master----192.168.37.128
redis-slave-1-----192.168.37.131
redis-slave-2-----192.168.37.132
1.首先三台服务器将redis部署完成。
2.编辑master的redis配置文件:
[root@redis-master redis]# vim redis.conf
bind 0.0.0.0　　#只监听内网IP
daemonize yes　　　　　#开启后台模式将on改为yes
port 6379 #端口号
dir /usr/local/redis/data　#本地数据库存放持久化数据的目录该目录-----需要存在
protected-mode no
vim /lib/systemed/system/redis.service
[Unit]
Description=Redis
After=network.target

[Service]
ExecStart=/data/application/redis/src/redis-server /data/application/redis/redis.conf --daemonize no
ExecStop=/data/application/redis/src/redis-cli -h 127.0.0.1 -p 6379 shutdown

[Install]
WantedBy=multi-user.target
3.启动主节点redis服务
systemctl daemon-reload
systemctl start redis.service
4.修改slave1和slave2的配置文件：
bind 0.0.0.0　　#只监听内网IP
daemonize yes　　　　　#开启后台模式将on改为yes
port 6379 #端口号
dir /usr/local/redis/data　#本地数据库存放持久化数据的目录该目录-----需要存在
protected-mode no
slaveof 192.168.37.128 6379
vim /lib/systemed/system/redis.service
[Unit]
Description=Redis
After=network.target

[Service]
ExecStart=/data/application/redis/src/redis-server /data/application/redis/redis.conf --daemonize no
ExecStop=/data/application/redis/src/redis-cli -h 127.0.0.1 -p 6379 shutdown

[Install]
WantedBy=multi-user.target
8.重启三台redis
[root@redis-master redis]# systemctl restart redis.service
[root@redis-slave-1 ~]# systemctl restart redis.service
[root@redis-slave-2 ~]# systemctl restart redis.service

7.redis-sentinel—哨兵模式

1、哨兵简介:Redis Sentinel

Sentinel(哨兵)是用于监控redis集群中Master状态的工具，其已经被集成在redis2.4+的版本中是Redis官方推荐的高可用性(HA)解决方案。

2、作用

1)：Master状态检测
2)：如果Master异常，则会进行Master-Slave切换，将其中一个Slave作为Master，将之前的Master作为Slave
3)：Master-Slave切换后，sentinel.conf的监控目标会随之调换

3、工作模式

1)：每个Sentinel以每秒钟一次的频率向它所知的Master，Slave以及其他 Sentinel 实例发送一个 PING 命令

2)：如果一个实例（instance）距离最后一次有效回复 PING 命令的时间超过 down-after-milliseconds 选项所指定的值， 则这个实例会被 Sentinel 标记为主观下线。

3)：如果一个Master被标记为主观下线，则正在监视这个Master的所有 Sentinel 要以每秒一次的频率确认Master的确进入了主观下线状态。

4)：当有足够数量的 Sentinel（大于等于配置文件指定的值）在指定的时间范围内确认Master的确进入了主观下线状态， 则Master会被标记为客观下线 。

4、主观下线和客观下线

主观下线：Subjectively Down，简称 SDOWN，指的是当前 一个Sentinel 实例对某个redis服务器做出的下线判断。
客观下线：Objectively Down， 简称 ODOWN，指的是多个 Sentinel 实例在对Master Server做出 SDOWN 判断，并且通过 SENTINEL is-master-down-by-addr 命令互相交流之后，得出的Master Server下线判断，然后开启failover
vim /usr/local/redis/sentinel.conf



每个服务器都是这样的配合，最简单的方法就是使用scp，
然后重启master 192.168.37.128
./src/redis-sentinel sentinel.conf &