25 Redis的缓存中的数据和数据库中的不一致问题_redis缓存和数据库不一致解决-程序员宅基地

技术标签: Redis  缓存  数据库  redis  


前言

Redis 缓存经常会遇到有 4 个方面:

  1. 缓存中的数据和数据库中的不一致;
  2. 缓存雪崩;
  3. 缓存击穿;
  4. 缓存穿透。

只要我们使用 Redis 缓存,就会面对缓存和数据库间的一致性保证问题。如果数据不一致,业务应用从缓存中读取的数据就不是最新数据。比如,把电商商品的库存信息缓存在 Redis 中,如果库存信息不对,那么业务层下单操作就可能出错。

一、缓存和数据库的数据不一致是如何发生的?

数据一致性包含两种情况:

  1. 缓存中有数据,缓存的数据值需要和数据库中的值相同;
  2. 缓存中本身没有数据,数据库中的值必须是最新值。

不符合这两种情况的就属于缓存和数据库的数据不一致问题了。当缓存的读写模式不同时,缓存数据不一致的发生情况不一样,应对方法也会有所不同,根据是否接收写请求,把缓存分成读写缓存只读缓存

读写缓存:

如果要对数据进行增删改,就需要在缓存中进行,根据采取的写回策略,决定是否同步写回到数据库中:

  • 同步直写策略:写缓存时也同步写数据库,缓存和数据库中的数据一致;要想保证缓存和数据库中的数据一致,就要采用同步直写策略。需要同时更新缓存和数据库。所以要在业务应用中使用事务机制,来保证缓存和数据库的更新具有原子性,两者要不一起更新,要不都不更新返回错误信息,进行重试。否则就无法实现同步直写。
  • 异步写回策略:写缓存时不同步写数据库,等到数据从缓存中淘汰时再写回数据库。 如果数据还没有写回数据库,缓存就发生了故障,数据库就没有最新的数据了。 对数据一致性的要求可能不是那么高,比如,缓存的是电商商品的非关键属性或者短视频的创建或修改时间等,可以使用异步写回策略。

只读缓存:

如果有数据新增,会直接写入数据库; 而有数据删改时,把只读缓存中的数据标记为无效。应用后续再访问这些增删改的数据时,因为缓存中没有相应的数据,就会发生缓存缺失。应用再从数据库中把数据读入缓存,这样后续再访问数据时,就能够直接从缓存中读取了。

Tomcat 向 MySQL 中写入和删改数据,如下图:
在这里插入图片描述
Tomcat 上运行的应用,无论是新增(Insert 操作)、修改(Update 操 作)、还是删除(Delete 操作)数据 X,都会直接在数据库中增改删。如果应用执行的是修改或删除操作,还会删除缓存的数据 X。

新增数据和删改数据的数据不一致的情况:

  1. 新增数据 :数据会直接写到数据库中,不用对缓存做任何操作,缓存中本身就没有新增数据,而数据库中是最新值,符合一致性的第 2 种情况,缓存和数据库的数据是一致的。
  2. 删改数据 :应用既要更新数据库,也要在缓存中删除数据。这两个操作如果无法保证原子性,就会出现数据不一致问题了。
    应用先删除缓存,再更新数据库: 如果缓存删除成功,但是数据库更新失败,应用再访问数据时,缓存中没有数据,就会发生缓存缺失。应用再访问数据库,但是数据库中的值为旧值,应用就访问到旧值了。
    在这里插入图片描述
    应用把数据 X 的值从 10 更新为 3,先在 Redis 缓存中删除了 X 的缓存值,但是更新数据库却失败了。如果有其他并发的请求访问 X,会发现 Redis 中缓存缺失, 请求就会访问数据库,读到的却是旧值 10。
    如果先更新数据库,再删除缓存中的值: 如果应用先完成了数据库的更新,但是在删除缓存时失败了,数据库中的值是新值,而缓存中的是旧值。如果有其他的并发请求来访问数据,按照正常的缓存访问流程,就会先在缓存中查询读到旧值了。
    在这里插入图片描述
    应用要把数据 X 的值从 10 更新为 3,先成功更新了数据库,然后在 Redis 缓存中删除 X 的缓存,但是这个操作却失败了,数据库中 X 的新值为 3,Redis 中的 X 的缓存值为 10。如果有其他客户端也发送请求访问 X,会先在 Redis 中查询,发现缓存读到的却是旧值 10。
    在更新数据库和删除缓存值的过程中,无论这两个操作的执行顺序谁先谁后,只要有一个操作失败了,导致客户端读取到旧值。
    在这里插入图片描述

二、解决Redis 和数据库数据不一致的方法

重试机制:

把要删除的缓存值或者是要更新的数据库值暂存到消息队列中。

  • 如果没有能够成功地删除缓存值或者是更新数据库值时,可以从消息队列中重新读取这些值,然后再次进行删除或更新。
  • 如果能够成功地删除或更新,要把这些值从消息队列中去除,以免重复操作,保证数据库和缓存的数据一致了。否则的话还需要再次进行重试。 如果重试超过的一定次数,还是没有成功,就需要向业务层发送报错信息了。先更新数据库,再删除缓存值时,如果缓存删除失败,再次重试后删除成功的情况:
    在这里插入图片描述

刚刚说的是在更新数据库和删除缓存值的过程中,其中一个操作失败的情况,实际上即使这两个操作第一次执行时都没有失败,当有大量并发请求时,应用还是有可能读到不一致的数据。

情况一:先删除缓存,再更新数据库。

假设线程 A 删除缓存值后,还没有来得及更新数据库(比如说有网络延迟),线程 B 就开始读取数据了,线程 B 会发现缓存缺失,去数据库读取。这会带来两个问题:

  1. 线程 B 读取到了旧值;
  2. 线程 B 是在缓存缺失的情况下读取的数据库,还会把旧值写入缓存,会导致其他线程从缓存中读到旧值。

等到线程 B 从数据库读取完数据、更新了缓存后,线程 A 才开始更新数据库,此时缓存中的数据是旧值,而数据库中的是最新值,两者就不一致了。
在这里插入图片描述

延迟双删: 在线程 A 更新完数据库值以后,让它先 sleep 一小段时间,再进行一次缓存删除操作。为了让线程 B 能够先从数据库读取数据,再把缺失的数据写入缓存,然后线程 A 再进行删除。所以线程 A sleep 的时间,就需要大于线程 B 读取数据再写入缓存的时间。在业务程序运行的时候, 统计下线程读数据和写缓存的操作时间,以此为基础来进行估算sleep时间。 其它线程读取数据时,会发现缓存缺失,会从数据库中读取最新值。

延迟双删方案的伪代码示例:

redis.delKey(X) 
db.update(X) 
Thread.sleep(N) 
redis.delKey(X) 

情况二:先更新数据库值,再删除缓存值。

如果线程 A 删除了数据库中的值,但还没来得及删除缓存值,线程 B 就开始读取数据了,线程 B 查询缓存时,发现缓存命中,会直接从缓存中读取旧值。如果其他线程并发读缓存的请求不多,就不会有很多请求读取到旧值。而且线程 A 一般也会很快删除缓存值,其他线程再次读取时,会发生缓存缺失,进而从数据库中读取最新值。所以这种情况对业务的影响较小。

在这里插入图片描述
缓存和数据库的数据不一致一般是由两个原因导致:

  1. 删除缓存值或更新数据库失败而导致数据不一致,可以使用重试机制确保删除或更新操作成功。
  2. 在删除缓存值、更新数据库的这两步操作中,有其他线程的并发读操作,导致其他线程读取到旧值,应对方案是延迟双删。

总结

Redis 缓存和数据库 不一致的问题,可以分成读写缓存和只读缓存两种情况进行分析:

  1. 读写缓存:如果我们采用同步写回策略,可以保证缓存和数据库中的数据一 致。
  2. 只读缓存:
    在这里插入图片描述
    在大多数业务场景下,会把 Redis 作为只读缓存使用。既可以先删除缓存值再更新数据库,也可以先更新数据库再删除缓存。

建议优先使用先更新数据库再删除缓存的方法,原因有两个:

  1. 先删除缓存值再更新数据库,有可能导致请求因缓存缺失而访问数据库,给数据库带来压力;
  2. 如果业务应用中读取数据库和写缓存的时间不好估算,那么延迟双删中的等待时间就不好设置。

先更新数据库再删除缓存需要注意:如果业务层要求必须读取一致的数据,就需要在更新数据库时,先在 Redis 缓存客户端暂存并发读请 求,等数据库更新完、缓存值删除后,再读取数据从而保证数据一致性。

版权声明:本文为博主原创文章,遵循 CC 4.0 BY-SA 版权协议,转载请附上原文出处链接和本声明。
本文链接:https://blog.csdn.net/weixin_38333368/article/details/121870549

智能推荐

SpringBoot日常:引入外部jar包_springboot引入外部jar包-程序员宅基地

文章浏览阅读3.5k次,点赞3次,收藏19次。我们开发中经常会遇到这样的场景,对接外部的应用接口,对方给了一个sdk,也就是一个jar包文件,此时需要引入即可调用封装好的方法。_springboot引入外部jar包

ORA-39511: Start of CRS resource for instance '215' failed with error:[CRS-2672: Attempting to star-程序员宅基地

文章浏览阅读3.6k次。2020/03/27 21:00:39 CLSRSC-184: Configuration of ASM failed2020/03/27 21:00:40 CLSRSC-258: Failed to configure and start ASMDied at /u01/app/19.0.0/grid/crs/install/crsinstall.pm line 2482.ORA-..._ora-39511: start of crs resource for instance '215' failed with error:[crs-2

W25Q64(模拟SPI)读写数据的简单应用-程序员宅基地

文章浏览阅读3.4k次,点赞45次,收藏55次。对 W25Q64 的使用可以总结如下:初始化:在开始使用 W25Q64 之前,需要通过 SPI 总线初始化芯片,并确保硬件连接正确。读操作:可以使用读取数据函数从指定地址读取数据,并将数据存储到指定的缓冲区中。写操作:可以使用页写函数向指定地址写入数据。需要考虑到写入字节数大于 256 字节和不大于 256 字节的两种情况,以及在写入数据之前需要先执行写使能操作,并在写操作完成后等待芯片忙碌状态结束。其他操作:除了读写操作外,W25Q64 还支持擦除、写使能、禁止写等其他操作,根据具体需求进_w25q64

《Android Studio开发实战 从零基础到App上线(第2版)》出版后记_android studio开发实战:从零基础到app上线 第二版 pdf-程序员宅基地

文章浏览阅读2.8w次,点赞16次,收藏61次。2015年11月23日,鄙人在csdn发表了第一篇技术文章,掐指一算距今已有三年。遥想当年开写博客,只是为了总结经验同时分享出来,后来机缘巧合受到出版社编辑邀请并出了书,完全是无心插柳的结果。当初写作《Android Studio开发实战:从零基础到App上线》第一版前后花了一年多的时间,经过三审三校于2017年6月正式上市,其实这本书出来之时没能赶上好时候,从2017年开始App学习热潮被人工智..._android studio开发实战:从零基础到app上线 第二版 pdf

Ubuntu 22.04.2 安装notepad++_ubuntu安装notepad-程序员宅基地

文章浏览阅读2.8k次。习惯了使用notepad++,就知道它的好,尤其是当前文件过滤搜索,下文记录下ubuntu安装的心得。_ubuntu安装notepad

ACM-ICPC算法汇总【基础篇】_acm-icpc基本算法pdf-程序员宅基地

文章浏览阅读6.9k次,点赞44次,收藏326次。本篇博客包含ACM,NOIP所涉及的基础算法,涵盖七个模块:基础算法,数据结构,搜索与图论,STL,数学知识(数论),动态规划,贪心。涵盖内容范围较为全面,是面向初学者的算法汇总,第八个章节是所涉及的算法板子,可以直接使用。因为是面向算法竞赛,本文的所有设计算法都是用C++进行实现的,不提供其他语言的代码,共涉及106道算法题目,以题代讲,在题目中理解算法的内涵。_acm-icpc基本算法pdf

随便推点

读取项目Resources资源目录下文件的方式_linux addresourcelocations 读取resources下的文件-程序员宅基地

文章浏览阅读1.1k次。Spring下读取项目Resources资源目录下文件的方式尝试了很多读取resource资源文件的方式,很多读取不到或者是读取配置文件的形式。以下两种方式,方式一用于通过启动jar方式时读取,方式二是本地IDE启动时读取。import org.springframework.core.io.ClassPathResource;import org.springframework.util.ResourceUtils;/** * 读取resources文件 * @param xmlPath _linux addresourcelocations 读取resources下的文件

大数据冷热分离方案_冷热数据分离方案-程序员宅基地

文章浏览阅读1.2k次,点赞33次,收藏7次。冷热数据方案_冷热数据分离方案

Tessent scan &ATPG (4) 额外的fault model‘_atpg bridge fault-程序员宅基地

文章浏览阅读4.7k次,点赞6次,收藏54次。可测试性的几个指标test coverage检测到的fault 占所有可测fault 的百分比(DT +(PD * posedet_credit))/TEfault coverage检测到的fault 占所有test pattern设置测试的fault 的比重同等对待 untestable fault和 undetected fault(DT +(PD * posedet_credit))/FUATPG Effectiveness ATPG 的效率的衡量反应的是 ATPG tools 对于_atpg bridge fault

加载一个Driver驱动_&keyword=%e6%af%94%e4%ba%9a%e8%bf%aa%e9%92%a5%e5%8-程序员宅基地

文章浏览阅读258次。http://yingxiao.baidu.com/new/home/search/search?keyword=%E5%BB%B6%E5%BA%86%E5%8E%BF%E6%80%8E%E4%B9%88%E5%BC%80%E7%9C%9F%E7%A5%A8%E2%96%A0%E2%95%8B%E8%96%87he3315822%E2%96%A0%E5%BB%B6%E5%BA%86%E5%8E%BF%E6%80%8E%E4%B9%88%E5%BC%80%E7%9C%9F%E7%A5%A8bsjhttp:/_&keyword=%e6%af%94%e4%ba%9a%e8%bf%aa%e9%92%a5%e5%8c%99%e5%a5%97&price=30

初中计算机硬件设备说课稿,初中信息技术《计算机硬件系统》说课稿-程序员宅基地

文章浏览阅读119次。初中信息技术《计算机硬件系统》说课稿各位领导、老师们:大家好!我说课的题目是:计算机的硬件系统。本课选自初中一年级信息技术的第一章第七课。下面就我在实施本课时的教学思想和教学思路进行简单地阐述:一、教材分析及处理1.教材内容的地位和使用这节课是初中信息技术教材第一章第七课的内容,在教材中这一课叫“计算机的硬件系统”,教学对象为初中一年级学生。本课针对初中生的现有知识水平和接受能力,对计算机的硬件进..._初中信息技术计算机硬件说课稿

SpringSecurity整合JWT实现认证和授权_本文主要讲解mall通过整合springsecurity和jwt实现后台用户的登录和授权功能,同时-程序员宅基地

文章浏览阅读5.4k次,点赞10次,收藏58次。SpringSecurity整合JWT实现认证和授权文章目录SpringSecurity整合JWT实现认证和授权前言一、SpringSecurity介绍和架构分析及使用流程二、使用步骤1.引入库2.读入数据总结前言本文主要讲解l通过整合SpringSecurity和JWT实现后台用户的登录和授权功能,使用到的技术有nacos,dubbo,SpringSecurity,redis.一、SpringSecurity介绍和架构分析及使用流程SpringSecurity是一个安全框架,支持自定义需求。_本文主要讲解mall通过整合springsecurity和jwt实现后台用户的登录和授权功能,同时

推荐文章

热门文章

相关标签