缓存 --- 缓存击穿, 缓存雪崩, 缓存穿透

news2025/4/24 2:32:17

缓存 --- 缓存击穿, 缓存雪崩, 缓存穿透

  • 缓存击穿(Cache Breakdown)
    • 概念原理
    • 实际场景
    • 代码实现(互斥锁方案)
  • 缓存雪崩(Cache Avalanche)
    • 概念原理
    • 实际场景
    • 代码实现(随机过期时间)
  • 缓存穿透(Cache Penetration)
    • 概念原理
    • 实际场景
    • 代码实现(布隆过滤器 + 空值缓存)
  • 总结对比

缓存击穿(Cache Breakdown)

概念原理

  • 定义:某个 热点数据(高频访问的 Key) 在缓存中过期时,瞬间有大量并发请求涌入,直接穿透缓存访问数据库,导致数据库压力骤增。
  • 核心原因:高并发场景下,热点数据缓存失效的瞬间,请求集中访问数据库。
  • 本质问题:缓存失效时间的集中性与高并发请求的瞬时性冲突。

实际场景

  • 电商秒杀:某商品参与限时秒杀活动,缓存设置为 10 分钟过期。活动开始后缓存突然失效,瞬间数万请求直接访问数据库查询库存。

代码实现(互斥锁方案)

public String getProduct(String productId) {
    String cacheKey = "product:" + productId;
    // 1. 从缓存获取数据
    String product = redisTemplate.opsForValue().get(cacheKey);
    if (product != null) {
        return product;
    }
    
    // 2. 缓存未命中,尝试获取分布式锁
    String lockKey = "lock:product:" + productId;
    boolean locked = redisTemplate.opsForValue().setIfAbsent(
        lockKey, "locked", 30, TimeUnit.SECONDS
    );
    
    try {
        if (locked) {
            // 3. 获取锁成功,查询数据库
            product = productService.getById(productId);
            // 4. 回写缓存并设置过期时间
            redisTemplate.opsForValue().set(cacheKey, product, 1, TimeUnit.HOURS);
        } else {
            // 5. 未获取锁,等待后重试(避免循环等待需设置最大重试次数)
            Thread.sleep(100);
            return getProduct(productId); // 递归重试
        }
    } finally {
        // 6. 释放锁
        if (locked) {
            redisTemplate.delete(lockKey);
        }
    }
    return product;
}

关键点

  • 使用 setIfAbsent 实现分布式锁,避免多个线程同时重建缓存。
  • 锁需设置超时时间(如 30 秒),防止死锁。
  • 未获取锁的线程需等待后重试(或返回默认值)。

缓存雪崩(Cache Avalanche)

概念原理

  • 定义:大量缓存数据 在同一时间过期,导致所有请求直接访问数据库,引发数据库崩溃。
  • 核心原因:缓存过期时间设置过于集中。
  • 本质问题:缓存失效的“雪崩效应”导致数据库瞬时压力过大。

实际场景

  • 电商大促:所有商品缓存设置为凌晨 0 点过期,导致瞬时大量商品详情查询请求直接压垮数据库。

代码实现(随机过期时间)

public void setProductCache(String productId, Product product) {
    String cacheKey = "product:" + productId;
    // 基础过期时间 + 随机偏移量(0~300秒)
    int baseExpire = 3600; // 1小时
    int randomExpire = new Random().nextInt(300); 
    redisTemplate.opsForValue().set(
        cacheKey, 
        product, 
        baseExpire + randomExpire, 
        TimeUnit.SECONDS
    );
}

// 查询时统一使用随机过期时间
public Product getProduct(String productId) {
    String cacheKey = "product:" + productId;
    Product product = redisTemplate.opsForValue().get(cacheKey);
    if (product == null) {
        product = productService.getById(productId);
        setProductCache(productId, product); // 设置缓存时添加随机过期时间
    }
    return product;
}

关键点

  • 在基础过期时间上添加随机偏移量(如 0~300 秒),分散缓存过期时间。
  • 结合 Redis 集群部署,提升缓存层的高可用性。

缓存穿透(Cache Penetration)

概念原理

  • 定义:大量请求查询 数据库中不存在的数据,缓存无法命中,导致请求直接穿透到数据库。
  • 核心原因:恶意攻击或业务逻辑漏洞(如查询无效 ID)。
  • 本质问题:缓存层和数据库层均无法拦截无效请求。

实际场景

  • 恶意爬虫攻击:攻击者批量请求 -10 或超大数值的用户 ID,绕过缓存直接查询数据库。

代码实现(布隆过滤器 + 空值缓存)

// 使用 Guava 布隆过滤器(初始化时预热合法ID)
private BloomFilter<String> bloomFilter = BloomFilter.create(
    Funnels.stringFunnel(StandardCharsets.UTF_8), 1000000, 0.01
);

public User getUser(String userId) {
    // 1. 布隆过滤器拦截非法请求
    if (!bloomFilter.mightContain(userId)) {
        return null;
    }
    
    String cacheKey = "user:" + userId;
    User user = redisTemplate.opsForValue().get(cacheKey);
    if (user != null) {
        return "NULL".equals(user) ? null : user;
    }
    
    // 2. 查询数据库
    user = userService.getById(userId);
    if (user == null) {
        // 3. 缓存空值(防止反复穿透)
        redisTemplate.opsForValue().set(cacheKey, "NULL", 5, TimeUnit.MINUTES);
        return null;
    }
    
    // 4. 回写缓存
    redisTemplate.opsForValue().set(cacheKey, user, 1, TimeUnit.HOURS);
    return user;
}

关键点

  • 布隆过滤器初始化时需预热合法 ID(如从数据库加载)。
  • 缓存空值(如 "NULL")并设置短过期时间(如 5 分钟)。
  • 布隆过滤器存在误判率(可配置 0.01),但不会漏判。

总结对比

问题类型触发条件解决方案核心实现技术
击穿热点Key过期 + 高并发互斥锁、逻辑过期分布式锁(SETNX)、异步重建
穿透查询不存在的数据布隆过滤器、空值缓存Bloom Filter、NULL占位
雪崩大量Key同时过期随机过期时间、集群容灾过期时间随机化、Redis集群

注意事项

  1. 布隆过滤器需要预热数据,适用于静态数据(如商品ID列表)。
  2. 互斥锁需设置合理的锁超时时间,避免锁过期后业务线程仍在执行。
  3. 空值缓存的过期时间不宜过长,防止内存浪费。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/2341162.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

【论文阅读21】-PSOSVM-CNN-GRU-Attention-滑坡预测(2024-12)

这篇论文主要提出并验证了一种新型的混合智能模型&#xff08;PSOSVM-CNN-GRU-Attention&#xff09;&#xff0c;用于准确预测滑坡的点位移&#xff0c;并构建可靠的位移预测区间。通过对Baishuihe滑坡和Shuping滑坡的案例分析&#xff0c;展示了该模型的出色性能。 [1] Zai D…

蓝牙 6.0 发布,解锁无线科技新可能

在5G和Wi-Fi 7高速发展的时代&#xff0c;蓝牙技术始终以独特优势深度融入日常生活。从无线耳机到智能家居&#xff0c;它凭借低功耗、高兼容的特性&#xff0c;悄然连接各类智能设备&#xff0c;打造无缝的数字生活体验。无论是聆听音乐、智能门禁还是健康监测&#xff0c;蓝牙…

EasyCVR视频智能分析平台助力智慧园区:全场景视频监控摄像头融合解决方案

一、方案背景 在智慧园区建设的浪潮下&#xff0c;设备融合、数据整合与智能联动已成为核心诉求。视频监控作为智慧园区的“视觉中枢”&#xff0c;其高效整合直接影响园区的管理效能与安全水平。然而&#xff0c;园区内繁杂的视频监控设备生态——不同品牌、型号、制式的摄像…

为您的照片提供本地 AI 视觉:使用 Llama Vision 和 ChromaDB 构建 AI 图像标记器

有没有花 20 分钟浏览您的文件夹以找到心中的特定图像或屏幕截图&#xff1f;您并不孤单。 作为工作中的产品经理&#xff0c;我总是淹没在竞争对手产品的屏幕截图、UI 灵感以及白板会议或草图的照片的海洋中。在我的个人生活中&#xff0c;我总是捕捉我在生活中遇到的事物&am…

K8S节点出现Evicted状态“被驱逐”

在Kubernetes集群中&#xff0c;Pod状态为“被驱逐&#xff08;evicted&#xff09;”表示Pod无法在当前节点上继续运行&#xff0c;已被集群从节点上移除。 问题分析&#xff1a; 节点磁盘空间不足 &#xff0c;使用df -h查看磁盘使用情况 可以看到根目录 / 已100%满&#x…

重学React(一):描述UI

背景&#xff1a;React现在已经更新到19了&#xff0c;文档地址也做了全面的更新&#xff0c;上一次系统性的学习还是在16-17的大版本更新。所以&#xff0c;现在就开始重新学习吧&#xff5e; 学习内容&#xff1a; React官网教程&#xff1a;https://zh-hans.react.dev/lea…

遨游通讯发布国产化旗舰三防手机AORO AU1:以自主可控重塑工业安全

在全球产业链加速重构的背景下&#xff0c;国产化技术突破已成为工业领域高质量发展的核心驱动力。作为专精特新中小企业&#xff0c;遨游通讯始终以“让世界更安全、更高效、更简单”为使命&#xff0c;深耕“危、急、特”场景智能通信设备的研发。近日&#xff0c;遨游通讯正…

【Python】Selenium切换网页的标签页的写法(全!!!)

在使用selenium做网站爬取测试的时候&#xff0c;我们经常会遇到一些需要点击的元素&#xff0c;才能点击到我们想要进入的页面&#xff0c; 于是我们就要模拟 不断地 点点点击 鼠标的样子。 这个时候网页上就会有很多的标签页&#xff0c;你的浏览器网页标签栏 be like: 那…

DeepSeek和Excel结合生成动态图表

文章目录 一、前言二、3D柱状图案例2.1、pyecharts可视化官网2.2、Bar3d-Bar3d_puch_card2.3、Deepseek2.4、WPS2.5、动态调整数据 一、前言 最近在找一些比较炫酷的动态图表&#xff0c;用于日常汇报&#xff0c;于是找到了 DeepseekExcel王牌组合&#xff0c;其等同于动态图…

Ubuntu20.04 部署llama-factory问题集

llama3 微调教程之 llama factory 的 安装部署与模型微调过程&#xff0c;模型量化和gguf转换。_llamafactory 部署-CSDN博客 1.跟着教程 llama-factory下载不下来 来&#xff0c;试着换源&#xff0c;多试几次&#xff0c;就可以成功了。。。 2.跟着教程&#xff0c;发现无法…

大语言模型助力 Support Case 分析,提升云服务效率

1. 背景 技术工单&#xff08;Support Case&#xff09;是企业在进行云平台操作的时候通常会用到的一种技术支持类型&#xff0c;提供的技术支持通常包括所有的云服务的使用问题、账单问题、限制额度提升等等。对于云平台的管理者而言&#xff0c;对各个 BU 所提的工单进行统计…

ubuntu磁盘挂载

1、‌查看磁盘设备及分区‌ 命令‌&#xff1a;列出所有块设备&#xff08;磁盘及分区&#xff09; lsblk 0表示此块未挂载 2、格式化分区 sudo mkfs.ext4 /dev/sdb 注意sdb换成自己的块名称 3、创建挂载点目录‌ sudo mkdir -p /mnt/data4、永久挂载 sudo blkid /dev…

chili3d调试笔记8 打印零件属性 浏览器元素展开

无效&#xff0c; 返回的是节点不是坐标啥的&#xff0c; 找他的属性 把document和selectednote&#xff08;空集&#xff09;传给handleshowproperty方法 怎么获得selectnotes和selectnotes的property值 有selectnotes运行这段就行了 明天再搞 ----------------------------…

新书速览|DeepSeek移动端AI应用开发:基于Android与iOS

《DeepSeek移动端AI应用开发&#xff1a;基于Android与iOS》 1 本书内容 《DeepSeek移动端AI应用开发:基于Android与iOS》深入剖析了DeepSeek平台的架构原理、API调用及开发实践等核心内容&#xff0c;助力读者在Android与iOS移动端高效集成DeepSeek API&#xff0c;打造出契…

Android调用springboot接口上传大字段,偶现接口超时的优化

介绍 最近有个功能&#xff0c;Android通过okhttp上传实体类&#xff0c;实体类包含一个大字段&#xff0c;上传的字符串长度达到300k&#xff0c;偶现接口超时的情况&#xff0c;大概100次有5次&#xff0c;看日志发现数据并没有到达接口&#xff0c;可能在网络传输中就超时了…

react组件之间如何使用接收到的className(封装一个按钮案例)

带有hover渐变效果 一、父组件 import LineGradientBox from ../line-gradient-box; import styles from ./index.module.scss;<LineGradientBoxfontSize{20}className{styles.btn_height}textSign upwidth"100%"onClick{() > {navigate(/sign-up);}} /> …

JavaScript 数组常用方法解析

1. concat - 合并数组 语法&#xff1a; const newArray oldArray.concat(value1, value2, ..., arrayN); 作用&#xff1a; 将当前数组与其他数组或值合并&#xff0c;返回一个新数组&#xff0c;原数组不变。 测试案例&#xff1a; const arr1 [1, 2, 3]; const arr2…

09.传输层协议 ——— TCP协议

文章目录 TCP协议 谈谈可靠性TCP协议格式 序号与确认序号窗口大小六个标志位 确认应答机制&#xff08;ACK&#xff09;超时重传机制连接管理机制 三次握手四次挥手 流量控制滑动窗口拥塞控制延迟应答捎带应答面向字节流粘包问题TCP异常情况TCP小结基于TCP的应用层协议 TCP协…

数字化转型“变形记”:中钧科技经营帮如何让企业长出“智慧骨骼”

数字化转型就像给企业安装一个"智慧引擎"&#xff0c;而中钧科技的经营帮平台就是这台引擎的智能控制系统。让我们用"人体"来打个比方——当企业的数据、流程、决策像神经脉络般打通&#xff0c;才能真正实现灵活运转。下面就以经营帮的五大核心板块为例&a…

【问题解决】centos7已经不维护了,如何继续使用yum源?

背景 CentOS 7 已于2024年6月30日停止维护&#xff0c;在停止维护后我们之前配置的国内镜像源大多都是空目录了&#xff0c;即在线国内镜像源不可用,就像下边这样提示&#xff1a; [rootbogon yum.repos.d]# yum install vim 已加载插件&#xff1a;fastestmirror Loading mi…