超实用缓存优化小窍门，轻松上手

巧手打字通-一起来打字

已于 2024-09-27 10:22:32 修改

阅读量472

点赞数 12

文章标签：缓存 spring java 性能优化后端 redis

于 2024-09-27 10:18:29 首次发布

本文链接：https://blog.csdn.net/liuhqs/article/details/142443477

版权

专业在线打字练习软件-巧手打字通，只输出有价值的知识。

一缓存应用面临的挑战

在提供核心服务时，缓存机制已成为确保高性能、低延迟的基石。

然而，缓存的使用会面临两大难题：

如何管理缓存空间的增长：随着数据的不断累积，缓存所需的空间会逐步扩大，这直接关系到成本的上升。
如何保障缓存服务的稳定性：这是至关重要的，因为任何不稳定都可能对服务性能造成重大影响。

那么，究竟哪些因素可能导致缓存服务变得不稳定呢？我们可以从以下两个关键维度进行深入分析：

并发访问量（QPS，即每秒查询率）：这个指标反映了系统处理请求的速度。当并发访问量超过系统处理能力时，就会对缓存服务造成压力，可能导致响应变慢甚至服务中断。
读写流量（IO出入流量）：这代表了数据在网络中的传输速度。单机CPU的处理能力和网络接口的带宽，都有其物理上限，一旦达到这些上限，缓存服务的稳定性就会受到威胁。

下面就以QPS指标优化和IO出入流量优化两个维度展开探讨，如何更好的使用缓存？

二 QPS指标优化

缓存能够达成高性能表现，主要得益于两个核心因素：
一是它大部分场景是直接在内存中操作，避免了磁盘I/O等复杂且耗时的业务逻辑处理；
二是它运用了非阻塞I/O和I/O多路复用的技术特性，极大地提升了数据处理效率和并发能力。

缓存的所有命令都是由主线程串行处理的。那么，我们该如何有效提升缓存的QPS（每秒查询率）指标呢？

下面给出一些应对策略：

水平扩展

增加服务器数量，构建缓存集群，支持横向扩容。这样做可以显著提升CPU处理能力和网络带宽，从而使整个缓存系统的性能倍增。

提升命令执行效率

确保命令的快速周转是关键。如果一组命令能够迅速执行，每秒支持高达5万条的吞吐量，那么缓存的性能将非常出色。相反，如果某个命令执行缓慢，甚至一秒钟都无法完成，那么这一秒内的吞吐量将大幅下降，导致后续所有等待的命令都出现延迟。

避免使用低效命令

像keys、hgetall这类资源消耗大的命令应尽量避免使用，因为它们可能导致性能瓶颈。

均衡数据分布

确保缓存集群中的数据分布均匀，包括空间占用和访问流量，以防止资源过度集中在某些节点上。

处理大值对象

对于大的数据集合（如Set、List、Hash），应尽量避免直接使用，或者通过分页等技术手段进行分割处理，以减少单次操作的负担。

分离业务缓存

如果需要使用缓存来实现消息队列等功能，建议为这些特定用途单独申请一个缓存集群，与常规业务数据隔离开来，以避免相互影响。

数据压缩

对缓存中的数据进行压缩，不仅可以减少存储空间的使用，还能提高内核数据拷贝和网络传输的效率，从而进一步提升整体性能。

三 IO出入流量优化

为了更有效地管理IO出入流量，可以从流量均衡和数据压缩两个方向入手。

流量均衡策略

通过实施一系列流量均衡策略，可以缓解缓存热点问题和突发流量压力：

利用本地JVM二级缓存

减少对主缓存的访问压力，通过本地缓存快速响应常见查询。

主从分片与读写分离

通过数据分片技术分散读写请求，读写分离则能进一步减轻主库负担，提升整体性能。

数据过期策略离散化

避免大量数据同时过期导致的集中写操作，通过分散过期时间，平滑写流量。

根据使用场景搭建和调整集群

针对不同的业务场景，灵活搭建或拆分缓存集群，以达到最佳的负载均衡效果。

数据压缩策略

数据压缩是减少IO流量的有效手段：

清理无用缓存数据

定期检查和清理不再需要的缓存数据，避免占用宝贵的缓存空间和带宽。这是减少缓存占用空间的主要手段之一，往往会取得不错的效果。

key前缀缩写

对缓存键进行适当缩写，减少数据存储和传输量，同时保持唯一性和可读性。特别存储的是数字类型的值时，key的长度很容易比value值本身还要大。

数字格式压缩

将十进制数字转换为十六进制等更紧凑的格式存储，特别是在数值较大时，这种转换能显著减少数据量。下文会给出具体应用实例。

JSON对象优化

对于存储在缓存中的JSON对象，可以通过缩写属性名称、移除不必要的属性等方式来减小数据体积。

// 以jackson为例，通过注解可以很方便的实现属性名缩写
public class SkuKey implements Serializable {
    @JsonProperty(value = "sn")
    private Long stationNo;
    @JsonProperty(value = "si")
    private Long skuId;
}