数据库与缓存一致性方案

在实践过程中,由于操作缓存与操作数据库不是原子性的,非常有可能出现执行失败,导致数据库与缓存不一致。或者在高并发的系统中,同时对同一条数据进行读写操作,在数据库层面并发的读写并不能保证先后顺序,也就是说后发出的读请求很可能先完成(读出脏数据),脏数据又入了缓存,缓存与数据库中的数据不一致出现了。我们从几个方案来探究如何保证数据库与缓存的一致性:

1,先更新数据库,再更新缓存

(1)这个方案的代价有时是比较高的。每次修改数据库的时候,都要将其对应的缓存一份。但对于某些系统写数据库场景比较多,读数据库场景比较少,有大量的冷数据基本不会读到缓存,而缓存却频繁的被更新,浪费系统性能。

(2)在并发情况下也会有问题,A先请求更新,B后请求更新,可能由于网络的原因,A比较慢最后完成了缓存更新,就会导致缓存出现了脏数据的情况

(3)先更新数据库,但缓存更新失败也会造成不一致

2,先更新数据库,再删除缓存

(1)这个方案相比1方案来说,可以大大降低缓存服务器的开销,删除缓存不需要重新做复杂计算。而且通过懒加载的思想,只有当他需要被使用的时候(读取数据的时候)才更新缓存

(2)和方案1(3)一样的问题,先更新数据库,但缓存可能删除失败,会导致数据库中是新数据,缓存中是旧数据,数据就出现了不一致。

(3)这个方案也有并发问题,A先请求查询,查询到旧值,在A更新缓存之前,B请求更新将旧值更新为新值,删除缓存,这时A才更新缓存,但A是将之前查询到的旧值更新到缓存,导致不一致。

3,先删除缓存,再更新数据库

(1)这个方案很好解决了1(1)和 2(2)的问题,如果数据库更新失败了,那么数据库中是旧数据,缓存中是空的,那么数据不会不一致。

(2)但是并发的情况也会出现问题,比如:①请求A进行写操作,删除缓存  ②请求B查询发现缓存不存在   ③请求B去数据库查询得到旧值   ④请求B将旧值写入缓存   ⑤请求A将新值写入数据库,这时候就会出现不一致。

(3)针对第(2)种情况的问题,可以采用延时双删的策略,即休眠x秒,再次删除缓存,但万一删除失败就GG了

4,先删除缓存,再更新数据库+读写串行化

(1)如果并发量较小的情况下,完全可以采用第3种方案

(2)高并发的情况下,可以采用先删除缓存,再更新数据库+读写串行化的策略,这里采用队列的方式,具体做法:

        ①  有N个队列,通过hash算法取模hash(key)%N 将同一条数据的读写操作放到某个队列种,这样使得读写串行化,使的读写顺序执行,避免了并发问题

       然而这个方案也会有缺点:① 如果写操作较多,读请求长时阻塞超时,会去请求数据库 ② 热点数据的路由问题,会使某个队列积压太多请求,导致请求的倾斜

总结:

上面说的几种方案,都是比较常见的,但都有优缺点。通常,并发量不高,采用3方案,高并发量采用4方案。内存队列也会影响性能以及增加系统的复杂度。缓存和数据库的数据更新是不可能达到100%的一致性。我们只能根据相应的场景和所需要付出的代价来采取一些措施,降低数据不一致的问题出现的概率,在数据一致性和性能之间取得一个权衡,具体场景具体使用。

 

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
在现有省、市港口信息化系统进行有效整合基础上,借鉴新 一代的感知-传输-应用技术体系,实现对码头、船舶、货物、重 大危险源、危险货物装卸过程、航管航运等管理要素的全面感知、 有效传输和按需定制服务,为行政管理人员和相关单位及人员提 供高效的管理辅助,并为公众提供便捷、实时的水运信息服务。 建立信息整合、交换和共享机制,建立健全信息化管理支撑 体系,以及相关标准规范和安全保障体系;按照“绿色循环低碳” 交通的要求,搭建高效、弹性、高可扩展性的基于虚拟技术的信 息基础设施,支撑信息平台低成本运行,实现电子政务建设和服务模式的转变。 实现以感知港口、感知船舶、感知货物为手段,以港航智能 分析、科学决策、高效服务为目的和核心理念,构建“智慧港口”的发展体系。 结合“智慧港口”相关业务工作特点及信息化现状的实际情况,本项目具体建设目标为: 一张图(即GIS 地理信息服务平台) 在建设岸线、港口、港区、码头、泊位等港口主要基础资源图层上,建设GIS 地理信息服务平台,在此基础上依次接入和叠加规划建设、经营、安全、航管等相关业务应用专题数据,并叠 加动态数据,如 AIS/GPS/移动平台数据,逐步建成航运管理处 "一张图"。系统支持扩展框架,方便未来更多应用资源的逐步整合。 现场执法监管系统 基于港口(航管)执法基地建设规划,依托统一的执法区域 管理和数字化监控平台,通过加强对辖区内的监控,结合移动平 台,形成完整的多维路径和信息追踪,真正到问题能发现、事态能控制、突发问题能解决。 运行监测和辅助决策系统 对区域港口与航运业务日常所需填报及监测的数据经过科 学归纳及分析,采用统一平台,消除重复的填报数据,进行企业 输入和自动录入,并进行系统智能判断,避免填入错误的数据, 输入的数据经过智能组合,自动生成各业务部门所需的数据报 表,包括字段、格式,都可以根据需要进行定制,同时满足扩展 性需要,当有新的业务监测数据表需要产生时,系统将分析新的 需求,将所需字段融合进入日常监测和决策辅助平台的统一平台中,并生成新的所需业务数据监测及决策表。 综合指挥调度系统 建设以港航应急指挥中心为枢纽,以各级管理部门和经营港 口企业为节点,快速调度、信息共享的通信网络,满足应急处置中所需要的信息采集、指挥调度和过程监控等通信保障任务。 设计思路 根据项目的建设目标和“智慧港口”信息化平台的总体框架、 设计思路、建设内容及保障措施,围绕业务协同、信息共享,充 分考虑各航运(港政)管理处内部管理的需求,平台采用“全面 整合、重点补充、突出共享、逐步完善”策略,加强重点区域或 运输通道交通基础设施、运载装备、运行环境的监测监控,完善 运行协调、应急处置通信手段,促进跨区域、跨部门信息共享和业务协同。 以“统筹协调、综合监管”为目标,以提供综合、动态、实 时、准确、实用的安全畅通和应急数据共享为核心,围绕“保畅通、抓安全、促应急"等实际需求来建设智慧港口信息化平台。 系统充分整合和利用航运管理处现有相关信息资源,以地理 信息技术、网络视频技术、互联网技术、移动通信技术、云计算 技术为支撑,结合航运管理处专网与行业数据交换平台,构建航 运管理处与各部门之间智慧、畅通、安全、高效、绿色低碳的智 慧港口信息化平台。 系统充分考虑航运管理处安全法规及安全职责今后的变化 与发展趋势,应用目前主流的、成熟的应用技术,内联外引,优势互补,使系统建设具备良好的开放性、扩展性、可维护性。

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值