Redis核心技术与实战【学习笔记】 - 16.Redis 缓存异常:缓存和数据库不一致

news2025/2/5 4:47:16

概述

只要使用 Redis 缓存,就必须面对缓存和数据库的一致性问题。 重要的是,如果数据不一致,那么业务应用从缓存中读取的数据就不是最新数据,这会导致严重的问题。比如说,我们把电商商品的库存信息缓存在 Redis 中,如果库存信息不对,那么业务下单操作就可能出错。


1.缓存和数据库的数据不一致是如何发生的?

“数据的一致性”包含了两种情况:

  • 缓存中有数据,那么,缓存的数据值需要和数据库中的值相同
  • 缓存中没有数据,那么,数据库中的值必须是最新的

不符合这两种情况的,就属于缓存和数据库的数据不一致问题了。不过,当缓存的读写模式不同时,缓存数据不一致的发生情况不一样,应对的方法也不同,所以先按照缓存的读写模式,来分别了解不同模式下的缓存不一致情况。

在《 14.Redis 旁路缓存的工作原理及如何选择应用系统的缓存类型 》中讲过,可以把缓存分成读写缓存和只读缓存。

对于读写缓存来说,如果要对数据进行增删改,就需要在缓存中进行,同时还要根据采取的写回策略,决定是否同步写回到数据库中。

  • 同步直接策略:写缓存时,也同步写数据库,缓存和数据库中的数据一致。
  • 异步写回策略:写缓存时不同步写数据库,等到数据从缓存中淘汰时,再写回数据库。

使用异步写回策略时,如果数据还没有写回数据库,缓存就发生了故障,那么,数据库就没有最新的数据了。

所以,对于读写缓存来说,要想保证缓存和数据库中的数据一致,就要采用同步直写策略

需要注意的是,如果采用这种策略,就要同时更新缓存和数据库。所以,我们要在业务中使用事务机制,来保证缓存和数据库的更新具有原子性,也就是说,两者要不一起更新,不要一起不更新,返回错误信息,进行重试。

当然,在有些场景下,我们对数据一致性的要求可能不是那么高,比如说缓存的是电商商品的非关键属性或者短视频的创建或修改时间,那么我们可以使用异步写回策略

再说说只读缓存。对于只读缓存来说,如果有数据新增,会直接写入数据库;而数据删改时,只需要把缓存中的数据标记为无效,这样一来,业务系统后续访问这些增删改的数据时,就会发生缓存缺失。此时,应用再从数据库中把数据读入缓存,这样后续再访问数据时,就能直接从缓存中读取了。

以 Tomcat 向 MySQL 中写入和删改数据为例,来几十下,数据增删改操作是如何进行的:
在这里插入图片描述
从图中可以看出,Tomcat 上运行的应用,物理是新增、修改、还是删除数据 X,都会直接在数据库中进行。当然,如果应用执行的是修改或删除操作,还是删除缓存的数据 X。

那么,这个过程中会不会出现数据不一致的情况呢?考虑到新增和删改数据的情况不一样,所以分开来进行讲解。

A.新增数据
如果是新增数据,数据会直接写道数据库中,不用对缓存做任何操作,此时,缓存中本身就没有新增数据,而数据库中有最新值,这种情况和服一致性的第 2 种情况,所以,缓存和数据此时是一致的。

B.删改数据
如果发生了删改操作,应用既要更新数据库,也要在缓存中删除数据。这两个操作如何无法保证原子性,就会出现数据不一致的问题了。

假设先删除缓存,再更新数据库,如果缓存删除成功,但是数据库更新失败,那么应用再访问数据时,缓冲中没有数据,然后再访问数据库,但是数据库中的值为旧值,应用就访问到旧值了。

  • 应用要把数据 X 的值从 10 更新为 3,现在 Redis 缓存中删除了 X 的值。但是更新数据库确失败了。
  • 如果此时有其他的并发请求访问 X,会发现 Redis 中缓存缺失。
  • 紧接着,请求就会访问数据库,读到的却是旧值 10。
    在这里插入图片描述

如果先更新数据库,再删除缓存中的值,是不是可以解决这个问题呢?

如果应用完成了数据库的更新,但是在删除缓存时失败了,那么数据库中的值是最新的,而缓存中是旧值,这肯定是不一致的。这个时候,如果有其他的请求来访问数据,就会在缓存中查询,读取到旧值了。

  • 应用要把数据 X 的值从 10 更新为 3,先更新成功了数据库
  • 然后在 Redis 缓存中删除 X 的缓存,但是这个操作失败了。此时,数据库中 X 的值为 3,Redis 中的 X 的缓存值为 10,出现了不一致的情况
  • 如果刚刚此时有其他客户端也发送请求访问 X,会先在 Redis 中查询,该客户端会发现缓存命中,但是读到的却是旧值 10。
    在这里插入图片描述
    从上面的分析,可以得出结论:在更新数据库和删除缓存的过程中,无论两个操作的执行顺序谁先水后,只要有一个操作失败了,就会导致客户端读取到旧值。
不同情况潜在问题
先删除缓存值,后更新数据库数据库更新失败,缓存删除成功。导致请求再次访问缓存时,发现缓存缺失,再读数据库时,从数据库中读到旧值
先更新数据库,后删除缓存值缓存删除失败,导致请求再次访问缓存时,发现缓存命中,从缓存中读取到旧值

问题发生的原因我们知道了,那该怎么解决?

2.如何解决数据不一致问题?

可以把要删除的缓存值或者要更新的数据库值暂存到消息队列中。当应用没有成功地删除缓存值或者是更新数据库值时,可以从消息队列中取这些值,然后再次进行删除或更新操作。如果成功地删除或更新,就要把这些值从消息队列中去除,以免重复操作。此时,也就可以保证数据库和缓存的数据一致了。否则的话,还要进行重试。如果重试超过一定次数,还是没有成功,我们就需要向业务层发送报错信息。

下图显示了先更新数据库,再删除缓存值时,如果缓存删除失败,再次重试后删除成功的情况。
在这里插入图片描述
刚刚说的是在更新数据库和删除缓存值的过程中,其中一个操作失败的情况。

实际上,即使这两个操作第一次执行都成功,当有大量并发请求时,应该还是有可能读到不一致的数据的

同样,按照不同的删除和更新顺序,我们的解决办法也有所不同:

情况一:先删除缓存,在更新数据库
假设线程 A 删除缓存值后,还没有来得及更新数据库(比如网络延迟),线程 B 就开始读取数据。

时间线程A线程B问题
T1删除缓存X的缓存值
T21.读取数据X,缓存缺失,从数据库中读取X,读到旧值;
2.把数据 X 写入缓存
1.线程 A 尚未更新数据库的值,导致线程B读取到旧值;
2.线程B把旧值写入缓存,导致其他线程可能读到旧值
T3更新数据库中的X缓存中是旧值,数据库中是新值,两者不一致

这该怎么办?

在线程 A 更新完数据库的值后,我们可以让他先 sleep 一小段时间,再进行一次缓存删除操作

之所以要加上 sleep的这段时间,就是为了让线程 B 能够先从数据库读取数据,再把缺失的数据写入缓存,然后线程 A 再进行删除。所以,线程 A sleep 的时间,就需要大于线程 B 读取数据再写入缓存的时间。

这个时间该如何确定?建议你在业务程序运行的时候,统计下线程读数据和写数据的操作时间,以此为基础来进行估算。

这样一来,其他线程读取数据时,会发现缓存缺失,就会从数据库中读取最新值。因为这个方案会在第一次删除缓存值后,延迟一段时间再次删除,所以我们也把它叫做“延迟双删”。

下面是一段延迟双删的伪代码示例:

redisCache.delKey(X);
db.update(X);
Thread.sleep(N);
redisCache.delKey(X);

情况二:先更新数据库值,再删除缓存值

如果线程 A 删除了数据库中的值,但是还没有来得及删除缓存值,线程 B 就开始读取数据了,此时线程 B 查询缓存时,发现缓存命中,就会直接从缓存中读取旧值。不过,在这种情况下,如果其他线程并发读缓存的请求不多,,那么就不会有很多请求读到旧值。而且,线程 A 一般也会很快删除缓存值,这样一来,其他线程再次读取时,就会发生缓存缺失,进而从数据库中读取最新值。所以,这种情况对业务的影响较小。

时间线程A线程B问题
T1删除数据库中的数据X
T2读取数据 X,缓存命中
从缓存读取 X,读取到旧值
线程A尚未删除缓存值,导致线程B读到缓存的旧值
T3删除缓存的数据 X

缓存和数据库的数据不一致一般是由两个原因导致的,我给你提供了相应解决方案。

  • 删除缓存值或更新数据库失败,而导致的数据不一致,你可以使用重试机制确保删除或更新操作成功。
  • 在删除缓存值、更新数据库的这两步操作中,有其他线程的并发操作,导致其他线程读取到旧值,应对方案是延迟双删

3.小结

我总结了一张表,便于你更加清晰的了解数据不一致的问题。

操作顺序是否有并发请求潜在问题现象应对方案
先删除缓存值,在更新数据库缓存删除成功,但数据库更新失败应用从数据库读到旧数据重试数据库更新
先删除缓存值,在更新数据库缓存删除成功,尚未更新数据库,有并发读请求并发请求从数据库读到旧值,并且更新到缓存,导致后续请求都读取旧值延迟双删
先更新数据库,在删除缓存数据库更新成功,但缓存删除失败应用从缓存读到旧值重试缓存删除
先更新数据库,在删除缓存数据库更新成功,尚未删除缓存,有并发读请求并发请求从缓存中读到旧值等待删除完成,期间会有不一致数据短暂存在

在大多数业务场景下,我们会把 Redis 作为只读缓存使用。针对只读缓存来说,我们既可以先删除缓存值再新增数据库,也可以先更新数据库再删除缓存。我的建议是,优先使用先更新数据库再删除缓存的方法,原因主要有两个:

  1. 先删除缓存值再更新数据库,有可能导致请求因缓存缺失而访问数据库,给数据库带来压力。
  2. 如果业务应用中读取数据库和写缓存的时间不好估算,那么延迟双删中的等待时间就不好设置。

不过,当使用先更新数据库再删缓存时,有个地方需要注意,如果业务层要求必须读取一致的数据,那么,我们就需要在更新数据库时,先在 Redis 缓存客户端暂存并发读请求,等数据更新完、缓存值删除后,再读取数据,从而保证数据一致性。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/1427029.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

【网站项目】065健康综合咨询问诊平台

🙊作者简介:拥有多年开发工作经验,分享技术代码帮助学生学习,独立完成自己的项目或者毕业设计。 代码可以私聊博主获取。🌹赠送计算机毕业设计600个选题excel文件,帮助大学选题。赠送开题报告模板&#xff…

Python入门到精通(七)——Python文件操作

Python文件操作 一、文件的编码 二、文件的读取 1、操作汇总 2、model 常用的三种基础访问模式 三、文件的写入 四、文件的追加 五、综合案例 一、文件的编码 1、什么是编码? 编码就是一种规则集合,记录了内容和二进制间进行相互转换的逻辑。编…

合约短线高胜率策略-扭转乾坤指标使用说明

扭转乾坤指标使用说明 行情判断 双绿线 多趋势双红线 空趋势大绿线 小红线 多震荡大红线 小绿线 空震荡 进场条件 趋势行情进场 多趋势 多信号 底金叉 做多空趋势 空信号 顶死叉 做空 震荡行情进场 多震荡 多信号 底金叉 做多多震荡 空信号 顶死叉 做空空…

带你玩转股票的价值投资,上市公司典型案例分析

一、教程描述 上市企业,一般是新经济的典型代表,它的变化最能折射出新的商业模式及未来的产业机会。无论你是企业管理层、新兴创业者,还是职场精英及在校学生,都可以从上市公司的演变规律中,找到自己的职业晋升路径和…

LNMP环境搭建动态网站

一、环境准备 服务器:openEuler 22.03 Linux IPV4 :192.168.110.144/24 网页服务器:Nginx1.21.0 数据库:MySQL 8.0.36 PHP:8.0.30 1.安装软件 [rootnode3 ~]# yum install php-mysqlnd php php-gd php-fpm php-xml -y…

运维SRE-02 正则表达式、grep

1.特殊符号补充 1.1位置相关的特殊符号 . 当前目录 .. 当前目录的上级目录 ~ 当前用户家目录 / 根目录 cd - 返回上次所在目录1.2熟练掌握 # 注释符号,root命令提示符 | 管道符号.1.3了解其他特殊符号 $ 取值(取出变量的值),普通用户的提示符 ! % ^ & * (){} [] ; ? \…

git使用以及工作中开发流程

Git是当前最先进、最主流的分布式版本控制系统,免费、开源。 主要概念: 基本流程: 命令: git commit -a # 省略了add到暂存区的步骤,直接提交工作区的修改内容到版本库,不包括新增的文件。git fetc…

Python之PySpark简单应用

文章目录 一、介绍1.准备工作2. 创建SparkSession对象:3. 读取数据:4. 数据处理与分析:5. 停止SparkSession: 二、示例1.读取解析csv数据2.解析计算序列数据map\flatmap 三、问题总结1.代码问题2.配置问题 一、介绍 PySpark是Apa…

【Linux-常用命令】Linux 常用命令大全

【Linux-常用命令】Linux 常用命令大全 1)文件管理1.1.目录操作1.2.vim 操作1.3.打包压缩相关命令1.4.Linux 管道1.5.Linux 远程拷贝命令1.6.查看文件目录大小 2)文件权限管理2.1.三种基本权限2.2.更改权限 3)运行程序3.1.命令行运行3.2.后台…

睿尔曼超轻量仿人机械臂—外置按钮盒使用说明

睿尔曼RM系列机械臂的控制方式有很多种,包括:示教器、JSON、API等。在此为大家介绍外置按钮盒的使用方法。 按钮盒接线安装 按钮盒外观如下图所示,有:急停、暂停、开始、继续。四个功能按钮。用户可通过这四个按钮来实现对机械臂运…

FileGDB文件地理数据库的大小和名称限制

FileGDB文件地理数据库的大小和名称限制 官方链接 文件地理数据库的大小和名称限制如下: 文件地理数据库的大小 - 无限制 表或要素类大小 - 1 TB(默认值)、4 GB 或 256 TB(带关键字) 要素类和表的数量 - 2,147,483,6…

公共用例库计划--个人版(六)典型Bug页面设计与开发

1、任务概述 本次计划的核心任务是开发一个,个人版的公共用例库,旨在将各系统和各类测试场景下的通用、基础以及关键功能的测试用例进行系统性地归纳整理,并以提高用例的复用率为目标,力求最大限度地减少重复劳动,提升…

数据结构-内部排序

简介 排序(Sorting):将一个数据元素(或记录)的任意序列,重新排列成一个按关键字有序的序列 排序算法分为内部排序和外部排序 内部排序:在排序期间数据对象全部存放在内存的排序 外部排序&am…

【c++】取地址及const取地址操作符重载

1.const成员 将const修饰的“成员函数”称之为const成员函数,const修饰类成员函数,实际修饰该成员函数隐含的this指针,表明在该成员函数中不能对类的任何成员进行修改 我们来看看下面的代码 class Date { public:Date(int year, int month,…

2024年美赛数学建模C题思路分析 - 网球的动量

# 1 赛题 问题C:网球的动量 在2023年温布尔登绅士队的决赛中,20岁的西班牙新星卡洛斯阿尔卡拉兹击败了36岁的诺瓦克德约科维奇。这是德约科维奇自2013年以来首次在温布尔登公开赛失利,并结束了他在大满贯赛事中历史上最伟大的球员之一的非凡…

2024年美赛数学建模思路 - 案例:退火算法

文章目录 1 退火算法原理1.1 物理背景1.2 背后的数学模型 2 退火算法实现2.1 算法流程2.2算法实现 建模资料 ## 0 赛题思路 (赛题出来以后第一时间在CSDN分享) https://blog.csdn.net/dc_sinor?typeblog 1 退火算法原理 1.1 物理背景 在热力学上&a…

WordPress SMTP发信避坑指南

前言 Clip_2024-01-31_19-46-18803285 10.5 KB 目前不少主题已经内置了SMTP发信功能,这是因为WordPress自带的mail()函数发信时基本无法发送。 但是在之前(约2021年末)貌似可以通过WordPress自带的函数发信,并且收信方提示由xxx代…

༺༽༾ཊ—Unity之-04-原型模式—ཏ༿༼༻

首先创建一个项目, 在这个初始界面我们需要做一些准备工作, 建基础通用文件夹, 创建一个Plane 重置后 缩放100倍 加一个颜色, 任务1:使用 建造者模式 创建三种 金刚猿猴 零部件 拼接组合 首先资源商店下载 金刚猿猴 模…

从0开始搭建、上传npm包

从0开始搭建、上传npm包 1、上传一个简单获取水果价格的包创建 vite 项目在项目根目录 src 文件夹中创建 index.ts 文件,文件内容如下:在 main.ts 文件中导入、导出上面创建的方法创建 vite.config.ts 配置文件,文件内容如下配置 package.jso…

npm 包管理工具

简介 Node官网:https://nodejs.org/ Npm官网:https://www.npmjs.com/ 在现代的软件开发世界中,包管理工具起着至关重要的作用。它们为开发者社区提供了一种高效共享和使用代码的方式。在 JavaScript 的范畴内,npm(Node…