缓存加速CDN——Redis配置与优化

最新推荐文章于 2024-04-04 05:53:14 发布
最新推荐文章于 2024-04-04 05:53:14 发布
阅读量844 收藏 1
点赞数
分类专栏： 缓存加速CDN 文章标签： redis 关系型数据库 非关系型数据库 RDB持久化 AOF持久化
版权声明：本文为博主原创文章，遵循 CC 4.0 BY-SA 版权协议，转载请附上原文出处链接和本声明。
本文链接：https://blog.csdn.net/m0_47161295/article/details/108472548
版权

这里写目录标题

1. 关系数据库和非关系数据库

1.1 关系数据库与非关系型数据库

1.1.1 关系型数据库

  • 一个结构化的数据库，创建在关系模型基础上
  • 一般面向于记录
  • 包括 Oracle、 MySQL、 SQL Server. Microsoft Access、 DB2等

1.1.2 非关系型数据库

  • 除了主流的关系型数据库外的数据库，都认为是非关系型
  • 包括Redis、 MongBD、Hbase、 CouhDB等

1.2 非关系型数据库产生背景

  • High performance——对数据库高并发读写需求
  • Huge Storage——对海量数据高效存储与访问需求
  • High Scalability && High Availability——对数据库高可扩展性与高可用性需求

2. Redis安装部署

2.1 Redis简介

  • Redis基于内存运行并支持持久化
  • 采用key-value (键值对)的存储形式
  • 优点
    - 具有极高的数据读写速度
    - 支持丰富的数据类型
    - 支持数据的持久化
    - 原子性
    - 支持数据备份

2.2 操作步骤

在这里插入图片描述

2.3 编译安装Redis

[root@localhost src]# tar xvzf redis4.0.9.tar.gzg
[root@localhost src]# cd redis-4.0.9/
[root@localhost redis- 4.0.9]# make
[root@localhost redis-4.0.9]# make PREFIx=/s/localredis install
I [root@localhost ~]# In -s /usrlocalredis/bin/ /usrl/local/bin/

在这里插入图片描述
在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

在这里插入图片描述

2.4 设置Redis相关配置文件

[root@localhost redis]# cd /uslocal/src/redis 4.0.9/utils/
[root@localhost utils]# ./install server.sh
Welcome to the redis service installer
This script will help you easily set up a running redis server
Please select the redis port for this instance: [6379]
Selecting default: 6379
Please select the redis config file name [/etc/redis/6379.conf]
Selected default - /etc/redis/6379.conf
Please select the redis log file name [varl/log/redis_ 6379.l0og]
Selected default - /var/log/redis_ 6379.log
Please select the data directory for this instance [var/lib/redis/6379]
Selected default - /var/lib/redis/6379
Please select the redis executable path 0 /sr/local/redis/bin/redis-server

在这里插入图片描述

在这里插入图片描述
在这里插入图片描述

2.5 Redis进程控制

[root@localhost utils]# /etc/init.d/redis_ 6379 status
Redis is running (5436)
[root@localhost utils]# /etc/init.d/redis_ 6379 stop
Stopping...
Redis stopped
[root@localhost utils]# /etc/init.d/redis_ 6379 start
Starting Redis server...
[root@localhost utils]# /etc/init.d/redis_ 6379 restart
Stopping...
Redis stopped
Starting Redis server...

在这里插入图片描述在这里插入图片描述

在这里插入图片描述

2.6 Redis配置文件

配置参数(/etc/redis/6379.conf)

bind:监听的主机地址
port: 端口
daemonize yes:启用守护进程
pidfile:指定PID文件
loglevel notice:日志级别
logfile:指定日志文件

3. Redis数据库常用命令

3.1 redis-cli命令行工具

连接本地数据库
[root@localhost utils]# /us/localredis/bin/redis-cli
127.0.0.1:6379>
D
连接远程数据库
[root@localhost utils]# redis-cli -h 192. 168.10.161 -p 6379
192.168. 10.161:6379>

在这里插入图片描述
在这里插入图片描述

3.2 redis-cli命令行工具

获取命令帮助

help @<group>:获取<group>中的命令列表
help <command>:获取某个命令的帮助
help <tab>:获取可能帮助的主题列表

在这里插入图片描述
在这里插入图片描述

3.3 redis-cli命令行工具

  • set:存放数据
  • get:获取数据
[root@localhost ~]# /usr/local/redis/bin/redis-cli
127.0.0.1:6379> set teacher zhanglong
OK
127.0.0.1:6379> get teacher
"zhanglong"

在这里插入图片描述
在这里插入图片描述

3.4 key相关命令

●keys:获取符合规则的键值列表
●exists: 判断键值是否存在
●del:删除当前数据库的指定key
●type: 获取key对应的value值类型
●rename(覆盖) 1 renamenx (不覆盖) :对已有的key进行
重命名
●dbsize:查看当前数据库中key的数目
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

3.5 redis-benchmark测试工具

-h:指定服务器主机名
-p:指定服务器端口
-C: 指定并发连接数
-n:指定请求数
-d:以字节的形式指定SET/GET值的数据大小
-q:强制退出Redis,仅显示query/sec值
  • 向IP地址为192.168.10.161、端口为6379的Redis服务器发送100个并发连接与100000个请求测试性能
 [root@localhost ~]# /s/lacal/edisbin/redis benchmark -h 192.168.10.161 -P 6379 -C 100 -n 100000
  • 测试存取大小为100字节的数据包的性能
[root@localhost ~]# /usrlocal/redis/bin/redis-benchmark -h 192. 168.10.161 -p 6379 -q -d 100

在这里插入图片描述

5. Redis多数据库操作

  • Redis支持多数据库，默认支持16个数据库，0-15命名
  • 多数据库相互独立，互不干扰
  • 多数据库常用命令
    - 多数据库间切换
    - 多数据库间移动数据
    - 清除数据库内数据
    在这里插入图片描述
    在这里插入图片描述
    在这里插入图片描述
    哈希结构
    在这里插入图片描述
    在这里插入图片描述

在这里插入图片描述

6. Redis持久化

6.1 持久化概述

  • Redis是运行在内存中，内存中的数据断电丢失
  • 为了能够重用Redis数据，或者防止系统故障，需要将Redis中的数据写入到磁盘空间中，即持久化

6.2 持久化分类

  • RDB方式:创建快照的方式获取某-时刻Redis中所有数据的副本
  • AOF方式:将执行的写命令写到文件的末尾，以日志的方式来记录数据的变化

6.3 Redis的默认持久化方式

6.4 默认文件名dump.rdb在这里插入图片描述

6.5 触发条件

  • 在指定的时间间隔内，执行指定次数的写操作(配置文件控制)
  • 执行save或者是bgsave (异步)命令
  • 执行flushall命令,清空数据库所有数据
  • 执行shutdown命令,保证服务器正常关闭且不丢失任何数据

6.6 优缺点

  • 适合大规模的数据恢复
  • 如果业务对数据完整性和一致性要求不高，RDB是很好的选择
  • 数据的完整性和一致性不高
  • 备份时占用内存

RDB缺点 快照只是基于一个时间点，还是会有数据丢失的风险
AOF缺点 恢复工作量大
RDB+AOF

6.7 RDB持久化

  • 通过RDB文件恢复数据
  • 将dump.rdb文件拷贝到redis的安装目录的bin目录下，重启redis服务即可
    配置文件选项
vim /etc/redis/6379.conf       // 900秒之内至少-次写操作、300秒之内至少发生10次写操作，60秒之内发生至少10000次写操作，只要满足其一都会触发快照操作，注释所有的save项表示关闭RDB
save 900 1
save 300 10
save 60 10000
dbfilename dump.rdb           // RDB文件名称
dir /var/ib/redis/6379         //    RDB文件路径
rdbcompression yes            // 是否进行压缩

6.8 AOF持久化

Redis默认不开启

弥补RDB的不足(数据的不一致性)

采用日志的形式来记录每个写操作,并追加到文件中

Redis重启会根据日志文件的内容将写指令从前到后执行一次以完成数据的恢复工作

根据AOF文件恢复数据

      -  将appendonly.aof文件拷贝到Redis的安装目录的bin目录下，重启Redis服务即可

配置文件选项
vim /etc/redis/6379.conf
appendonly yes                   开启AOF持久化
appendfilename "appendonly.aof "           AOF文件名称
# appendfsync always                        always:同步持文化.每次发生数据变化会立刻写入磁盘
appendfsync everysec                        everysec:默认推荐，每秒异步记录一次(默认值)
# appendfsync no                            no:不同步，交给操作系统决定如何同步
aof-load-truncated yes                   忽略最后一条可能存在问题的招令

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

AOF的重写机制

  • AOF的工作原理是将写操作追加到文件中，文件的冗余内容会越来越多
  • 当AOF文件的大小超过所设定的阈值时，Redis就会对AOF文件的内容压缩

AOF重写的原理

  • Redis会fork出一条新进程，读取内存中的数据(并没有读取旧文件)，并重新写到一个临时文件中，最后替换旧的aof文件

AOF的重写配置

vim /etc/redis/6379.conf
#在日志进行BGREWRITEAOF时，如果设置为yes表示新写操作不进
行同步fsync,只是暂存在缓冲区里，避免造成磁盘I0操作冲突，等重
写完成后在写入。Redis中默认为no
no-appendfsync-on-rewrite no
#当前AOF文件大小是上次日志重写时AOF文件大小两倍时，发生
BGREWRITEAOF操作
auto-aof-rewrite-percentage 100
#当前AOF文件执行BGREWRITEAOF命令的最小值，避免刚开始启动
Reids时由于文件尺寸较小导致频繁的BGREWRITEAOF
auto-aof-rewrite-min-size 64mb

在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

7. Redis性能管理

7.1 查看Redis内存使用

[root@master1 ~]# /usrlocalredis/bin/redis-cli
127.0.0.1:6379> info memory
# Memory                      内存使用总量
used memory:2650536
used memory_ human:2.53M
used_ memory_ rss:12120064
used memory_ rSs_ human:11 .56M
used memory_ peak:2650536
used memory_ peak human:2,53M
used memory_ peak perc: 100.00%
used memory_ overhead:2573336
used memory_ startup:1458272
used memory_ dataset:77200
used_ memory dataset perc:6 48%
total system memory: 1912078336
otal system_ memory. human:1.78G
used memory_ lua:37888
used memory. Tua_ human:37.00K
maxmemory:0
maxmemory human:0B
maxmemory_ policy:noeviction
mem_ fragmentation_ ratio:4.57          内存碎片率
mem allocator:jemallc 4.0.3
active_ _defrag. running:0
lazyfree pending. objects:0

7.2 内存碎片率

  • 操系统分配的内存值used_ memory_ rss除以Redis使用的内存值used_ memory计算得出
  • 内存碎片是由操作系统低效的分配回收物理内存导致的
    - 不连续的物理内存分配
  • 跟踪内存碎片率对理解Redis实例的资源性能是非常重要的
    - 内存碎片率稍大于1是合理的，这个值表示内存碎片率比较低
    - 内存碎片率超过1.5，说明Redis消耗了实际需要物理内存的150%，其中50%是内存碎片率
    - 内存碎片率低于1的，说明Redis内存分配超出了物理内存,操作系统正在进行内存交换

7.3 内存使用率

  • redis实例的内存使用率超过可用最大内存，操作系统将开始进行内存与swap空间交换
  • 避免内存交换
    - 针对缓存数据大小选择
    - 尽可能的使用Hash数据结构
    - 设置key的过期时间

7.4 回收key

  • 保证合理分配redis有限的内存资源
  • 当达到设置的最大阀值时，需选择-种key的回收策略
    - 默认情况下回收策略是禁止删除
    - redis.conf配置文件中修改maxmemory-policy属性值
    - volatile-lru: 使用LRU算法从已设置过期时间的数据集合中淘汰数据
    - voltil-t: 从已设置过期时间的数据集合中挑选即将过期的数据淘汰
    - volatile-random: 从已设置过期时间的数据集合中随机挑选数据淘汰
    - allkeys-lru: 使用L RU算法从所有数据集合中淘汰数据
    - allkeys-random: 从数据集合中任意选择数据淘汰
    - no-enviction: 禁止淘汰数据

在这里插入图片描述

提笔写春秋
关注
  • 0
    点赞
  • 踩
  • 1
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
专栏目录
redis缓存(CDN，redis安装)
weixin_45697293的博客
03-29 377
文章目录CDNredisredis介绍redis安装windows 安装 redispython 连接方式 CDN 上一章 CDN 主要优势 提前对静态内容进行预缓存，避免大量的请求回源，导致主站网络带宽被打满而导致数据无法更新， CDN 可以将数据根据访问的热度不同而进行不同级别的缓存，例如访问量最高的资源访问 CDN 边缘节点的内存，其次的放在 SSD 或者 SATA，再其次的放在云存储，这样兼顾了速度与成本。缓存-缓存到最快的地方如内存，缓存的数据准确命中率高，访问速度就快 调度准确-将用户调度到最
Redis简介、常用命令及优化
tefuiryy的博客
03-01 3003
Redis简介、常用命令及优化一、关系型数据库与非关系型数据库概述1、关系型数据库2、非关系型数据库二、关系数据库与非关系型数据库区别1、数据储存方式不同2、扩展方式不同3、对事务性的支持不同三、非关系型数据库四、Redis简介1、Redis 优点五、Redis 安装部署 一、关系型数据库与非关系型数据库概述 1、关系型数据库 （1）关系型数据库是一个结构化的数据库，创建在关系模型（二维表格模型）基础上，一般面向于记录。 （2）SQL 语句（标准数据查询语言）就是一种基于关系型数据库的语言，用于执行对关系型
缓存：redis、内存、cdn缓存的使用
u014551778的博客
09-17 809
CDN CDN用于静态资源（包括HTML、CSS、JS、图片等） 静态资源更新策略：路径中带资源版本号: https://xxx.xx/xx/{version}/xxx.js 版本上线前刷新CDN，注意cdn最终地址是否和代码中一致。 内存缓存 用于存放热点数据，比如配置、预置热点数据，如果是可变数据，在对一致性要求不高时使用。 定时任务更新，对于实时性要求不高可采用 订阅通知更新，实时性要求高可采用 需要评估内存资源消耗，和淘汰策略。常用LRU、配合caffeine可以用LFU。 .
redis+lua+nginx打造CDN云加速
12-02 789
大辉谈-用redis和CDN实现百万并发架构
何辉
11-06 995
今天准备给大家讲讲我在工作中遇到的困难以及经过各种实践到认知再实践最终实现目标的过程之一: 我是如何思考动静分离架构并最终实现的 先来说说需求, 我之前所在的团队的商业方向是做电商平台saas,类似于有赞和微盟, 电商saas顾名思义, 它是电商+saas,意思就是普通的电商那一套不够,还得加上saas:) 现在不是要双十一了么? 他们都想搞私域的双十一直播,平时的那点流量一下子蹿了十几倍甚至几十倍, 怎么应对? 啊! 动静分离! 团队的研发小伙伴们和问过的朋友以及CEO特意请的顾问都这么说. o..
redis缓存(CDN，redis安装)，nginx优化面试
最新发布
m0_60567881的博客
04-04 730
很多人感叹“学习无用”，实际上之所以产生无用论，是因为自己想要的与自己所学的匹配不上，这也就意味着自己学得远远不够。无论是学习还是工作，都应该有主动性，所以如果拥有大厂梦，那么就要自己努力去实现它。最后祝愿各位身体健康，顺利拿到心仪的offer！由于文章的篇幅有限，所以这次的蚂蚁金服和京东面试题答案整理在了PDF文档里一个人可以走的很快，但一群人才能走的更远。如果你从事以下工作或对以下感兴趣，欢迎戳这里加入程序员的圈子，让我们一起学习成长！
Web系统大规模并发——电商秒杀与抢购
06-10
8. **前端优化**：使用CDN加速静态资源的加载，使用Ajax实现页面异步加载，减少用户等待时间。还可以通过预加载、预渲染等技术提升用户体验。 9. **监控与报警**：利用Prometheus、ELK栈等工具进行系统性能监控，...
看透 Spring MVC 源代码分析与实践 —— 网站基础知识.docx
11-23
详解 Spring MVC 源代码分析与实践 —— 网站基础知识 本文将从网站架构、网络传输、数据库优化、缓存、页面静态化、分布式数据库、NoSQL 和 Hadoop、高并发解决方案、应用和静态资源分离、CDN 底层优化等方面对 ...
基础-Web应用的性能优化思路——找到瓶颈【转】.pdf
09-16
优化网络传输可能受限于用户和服务器的网络条件，可以通过提升服务器带宽或使用CDN来改善，但这成本较高。如果网络问题解决，但服务器处理速度慢，如页面生成耗时100毫秒，就需寻找应用内部的性能瓶颈。 根据经验，...
PHP论文格式化系统——前台的设计与实现(源代码+论文).rar
06-04
例如，通过使用缓存技术（如Redis或Memcached）来减少数据库查询次数，提升响应速度；使用CDN服务加速静态资源的加载，提高用户访问速度。 总结来说，本PHP论文格式化系统实现了用户友好的前端界面，结合PHP后端...
大流量Web系统的性能优化实践.
04-04
1. **数据库优化**：通过索引优化、查询语句优化、读写分离、数据库缓存（如Redis）等方式，提高数据库访问效率。 2. **负载均衡**：使用负载均衡器分配请求到多个服务器，防止单点过载，保证系统高可用性。 3. **...
缓存与cdn缓存
Mar.三月
08-05 171
昨天团队被cdn缓存坑了一晚上，这个我还真不懂，有时间我抽空研究下！
获取新概念IndexDB、Redis、CDN、node.js、WebGL
zhaoge's blog
03-12 359
IndexDB的意思是前端的DB Redis的名称是远程字典服务——Remote Dictionary Server，是一种数据结构服务器key-value对数据进行存储 CDN的名称是内容分发网络——Content Delivery Network
BAT三家的CDN情况究竟如何
yueguanyun的专栏
04-18 2466
BAT三家的CDN情况究竟如何 转自：http://it.enorth.com.cn/system/2017/04/14/031727998.shtml 最后简要总结一下BAT三家CDN网络加速的情况：在费用上腾讯云最实用，在加速节点上腾讯云和阿里云都很多，但腾讯云略多一些、总带宽也更高;特色功能三家都有，但腾讯云和阿里云相对较多，而在速度上腾讯云在电信和移动有优势，阿里云在联通有优势
CDN与缓存加速有什么区别?
Marvel__Dead 胡艺宝的博客
11-28 5483
对于cdn加速可能网站的经营者们都不是陌生，它是内容分发网络，通过在网络各处放置节点服务器所构成的在现有的互联网基础之上的一层虚拟网络。CDN系统能够根据到用户的距离和响应时间等综合信息将用户的请求重新导向离用户最近的服务节点上，主要目标对象是ICP。但缓存加速就有很多站长都不是很了解，CDN与缓存加速有什么区别呢？缓存加速是个产品或系统，简称Cache产品，通过侦测用户的请求提取热门资源，然后下载
缓存加速解决：NoSQL之Redis配置与优化
Gengchenchen的博客
02-23 2469
文章目录一、关系数据库与非关系型数据库（一）、关系型数据库（二）、非关系型数据库（三）、关系型数据库和非关系型数据库区别（四）、非关系型数据库产生背景二、Redis简介（一）、Redis 具有以下几个优点三、部署步骤（一）、Redis安装部署（二）、Redis命令工具（三）、redis-cli 命令行工具（四）、redis-benchmark 测试工具（五）、Redis数据库常用命令（六）、Redis 多数据库常用命令四、Redis 高可用五、Redis持久化六、RDB持久化1.触发条件2.执行流程3.启动
NoSQL之Redis配置与优化
chengu04的博客
09-08 333
文章目录一、Redis简介二、Redis部署2.1Redis安装2.2Redis配置文件部分参数介绍三、Redis数据库常用命令3.1连接数据库3.2获取命令帮助3.3存放/获取数据3.4key相关命令3.5redis-benchmark测试工具（压测）四、Redis多数库操作五、Redis持久化5.1RDB持久化5.2AOF持久化六、Redis性能管理6.1查看Redis内存使用6.2内存碎片率介绍6.3内存使用率介绍6.4如何回收key 一、Redis简介 ●Redis基于内存运行并支持持久化（内存运行
redis设置hostname_Redis的Spring Boot：管道操作
weixin_33647940的博客
01-25 1494
介绍Redis是一个内存数据存储，可以用作NoSQL数据库，缓存或典型的消息代理。它使用ANSI C编写，可编译为效率极高的机器代码，并且能够将数据存储为键值对，从而使内存中缓存成为Redis有吸引力的用例，此外还可以将数据持久保存到磁盘中。在本文中，我们将使用管道技术允许Spring Boot应用程序以非阻塞方式将多个请求发送到Redis服务器。Redis中流水线的用例Redis基于客户端/服务...
七牛融合CDN实践.pptx
12-11
七牛融合CDN实践

“相关推荐”对你有帮助么？

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

个

红包个数最小为10个

元

红包金额最低5元

当前余额3.43元 前往充值 >
需支付：10.00元
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付元
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明：

1.余额是钱包充值的虚拟货币，按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载，可以购买VIP、付费专栏及课程。

余额充值