# Redis 入门到精通(七)-- redis 删除策略

news2024/12/22 20:32:41

Redis 入门到精通(七)-- redis 删除策略

一、redis 删除策略–过期数据的概念

1、Redis 中的数据特征

Redis 是一种内存级数据库,所有数据均存放在内存中,内存中的数据可以通过TTL指令获取其状态。

  • XX :具有时效性的数据。
  • -1 :永久有效的数据。
  • -2 :已经过期的数据 或 被删除的数据 或 未定义的数据。

2、过期的数据真的删除了吗?其实并没有立即删除,而是懒删除。

53-Redis 中的数据特征.png

3、数据删除策略

    1. 定时删除。
    1. 惰性删除。
    1. 定期删除。

二、redis 删除策略–过期数据的底层存储结构

1、redis 时效性数据的存储结构

54-redis时效性数据的存储结构.png

2、数据删除策略的目标

在内存占用与CPU占用之间寻找一种平衡,顾此失彼都会造成整体redis性能的下降,甚至引发服务器宕机或
内存泄露。

三、redis 删除策略–定时删除与惰性删除

1、定时删除

1)创建一个定时器,当key设置有过期时间,且过期时间到达时,由定时器任务立即执行对键的删除操作。

2)定时删除 优点:节约内存,到时就删除,快速释放掉不必要的内存占用。

3)定时删除 缺点:CPU压力很大,无论CPU此时负载量多高,均占用CPU,会影响redis服务器响应时间和指令吞吐量。

4)定时删除 总结:用处理器性能换取存储空间 (拿时间换空间)。

55-定时删除.png

2、惰性删除

1)惰性删除: 数据到达过期时间,不做处理。等下次访问该数据时

  • 如果未过期,返回数据。
  • 发现已过期,删除,返回不存在。

2)惰性删除 优点:节约CPU性能,发现必须删除的时候才删除。

3)惰性删除 缺点:内存压力很大,出现长期占用内存的数据。

4)惰性删除 总结:用存储空间换取处理器性能
expireIfNeeded()
(拿时间换空间)。

56-惰性删除.png

四、redis 删除策略–定期删除

1、定时删除和惰性删除两种方案都走极端,有没有折中方案?

答案是肯定的:有。

1) Redis 启动服务器初始化时,读取配置 server.hz 的值,默认为10。
2)每秒钟执行 server.hz 次 serverCron() --> databasesCron()–> activeExpireCycle()。
3)activeExpireCycle() 对每个 expires[] 逐一进行检测,每次执行 250ms/server.hz。
4)对某个 expires[
] 检测时,随机挑选 W 个 key 检测。

  • 如果 key 超时,删除 key。
  • 如果一轮中删除的 key 的数量>W*25%,循环该过程。
  • 如果一轮中删除的 key 的数量≤W25%,检查下一个 expires[],0-15 循环。
  • W取值=ACTIVE_EXPIRE_CYCLE_LOOKUPS_PER_LOOP 属性值。

5)参数 current_db 用于记录 activeExpireCycle() 进入哪个 expires[*] 执行。
6)如果 activeExpireCycle() 执行时间到期,下次从 current_db 继续向下执行。

57-redis定期删除.png

2、定期删除

1)定期删除是:周期性轮询redis库中的时效性数据,采用随机抽取的策略,利用过期数据占比的方式控制删除频度。
2)定期删除特点1:CPU性能占用设置有峰值,检测频度可自定义设置。
3)定期删除特点2:内存压力不是很大,长期占用内存的冷数据会被持续清理。
4)定期删除总结:周期性抽查存储空间(随机抽查,重点抽查)。

3、删除策略比对

    1. 定时删除:节约内存,无占用,不分时段占用CPU资源,频度高,拿时间换空间。
    1. 惰性删除:内存占用严重,延时执行,CPU利用率高,拿空间换时间。
    1. 定期删除:内存定期随机清理,每秒花费固定的CPU资源维护内存,随机抽查,重点抽查。

五、redis 删除策略–逐出策略

1、当新数据进入 redis 时,如果内存不足怎么办?

1)redis 删除策略–逐出策略

Redis 使用内存存储数据,在执行每一个命令前,会调用 freeMemoryIfNeeded() 检测内存是否充足。如
果内存不满足新加入数据的最低存储要求,redis 要临时删除一些数据为当前指令清理存储空间。清理数据
的策略称为逐出算法,也叫淘汰算法。

2)注意:逐出数据的过程不是100%能够清理出足够的可使用的内存空间,如果不成功则反复执行。当对所
有数据尝试完毕后,如果不能达到内存清理的要求,将出现错误信息。

(error) OOM command not allowed when used memory >'maxmemory'

2、影响数据逐出的相关配置

1) 最大可使用内存: maxmemory

占用物理内存的比例,默认值为0,表示不限制。生产环境中根据需求设定,通常设置在50%以上。

2)每次选取待删除数据的个数: maxmemory-samples

选取数据时并不会全库扫描,导致严重的性能消耗,降低读写性能。因此采用随机获取数据的方式作为待检测删除数据。

3)删除策略: maxmemory-policy

达到最大内存后的,对被挑选出来的数据进行删除的策略.

3、影响数据逐出的相关配置

1)检测易失数据(可能会过期的数据集 server.db[i].expires )

  • ① volatile-lru:挑选最近最少使用的数据淘汰。
  • ② volatile-lfu:挑选最近使用次数最少的数据淘汰。
  • ③ volatile-ttl:挑选将要过期的数据淘汰。
  • ④ volatile-random:任意选择数据淘汰。

2)检测全库数据(所有数据集server.db[i].dict )。

  • ⑤ allkeys-lru:挑选最近最少使用的数据淘汰。
  • ⑥ allkeys-lfu:挑选最近使用次数最少的数据淘汰。
  • ⑦ allkeys-random:任意选择数据淘汰。

3)放弃数据驱逐。

  • ⑧ no-enviction(驱逐):禁止驱逐数据(redis4.0中默认策略),会引发错误OOM(Out Of Memory)。

4、数据逐出策略配置依据

使用 INFO 命令输出监控信息,查询缓存 hit 和 miss 的次数,根据业务需求调优 Redis 配置。

上一节关联链接请点击:

# Redis 入门到精通(六)-- redis 事务

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/1937351.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

Android Studio引入ndk编译的so库, 通过jni给Java程序使用

前言 工作要求将一个C老项目的函数用ndk打包成库给安卓同事的java程序调用。 这个任务我debuff拉满: 自己之前从来没接触过安卓开发,问了老板为什么不让安卓开发来干,老板说安卓开发不懂c,公司就我一个是懂c的。。。项目开发年…

【STM32嵌入式系统设计与开发---拓展】——1_10矩阵按键

这里写目录标题 1、矩阵按键2、代码片段分析 1、矩阵按键 通过将4x4矩阵按键的每一行依次设为低电平,同时保持其它行为高电平,然后读取所有列的电平状态,可以检测到哪个按键被按下。如果某列变为低电平,说明对应行和列的按键被按下…

day2 单机并发缓存

文章目录 1 sync.Mutex2 支持并发读写3 主体结构 Group3.1 回调 Getter3.2 Group 的定义3.3 Group 的 Get 方法 4 测试 本文代码地址: https://gitee.com/lymgoforIT/gee-cache/tree/master/day2-single-node 本文是7天用Go从零实现分布式缓存GeeCache的第二篇。 …

go 实现websocket以及详细设计流程过程,确保通俗易懂

websocket简介: WebSocket 是一种网络传输协议,可在单个 TCP 连接上进行全双工通信,位于 OSI 模型的应用层。WebSocket 协议在 2011 年由 IETF 标准化为 RFC 6455,后由 RFC 7936 补充规范。 WebSocket 使得客户端和服务器之间的数…

昇思学习打卡-21-生成式/Diffusion扩散模型

文章目录 Diffusion扩散模型介绍模型推理结果 Diffusion扩散模型介绍 关于扩散模型(Diffusion Models)有很多种理解,除了本文介绍的离散时间视角外,还有连续时间视角、概率分布转换视角、马尔可夫链视角、能量函数视角、数据增强…

《样式设计003:布局-自定义view模块》

描述:在开发小程序过程中,发现一些不错的案例,平时使用也比较多,稍微总结了下经验,以下内容可以直接复制使用,希望对大家有所帮助,废话不多说直接上干货! 一、布局-自定义view模块 …

el-popover嵌套select弹窗点击实现自定义关闭

需求 el-popover弹窗内嵌套下拉选择框,点击el-popover弹出外部区域需关闭弹窗,点击查询、重置需关闭弹窗, 实现 根据需求要自定义弹窗的关闭和显示,首先想到的是visible属性,在实现过程中经过反复的测验&#xff0…

服务级别协议SLA与运营水平协议OLA

使用美团或饿了么在线订餐时,您将体验到即时的送餐提醒服务。首先,选择您想要的食品。系统会根据餐厅与您的位置、所选食品的种类,以及下单的具体时间,计算预计的等待时间和送餐费用,并将这些信息与您共享。这种信息的…

剖析SGI-STL二级空间配置器

概述 SGI-STL与C标准库提供的STL一样&#xff0c;都通过空间配置器allocator来申请或释放容器的空间。空间配置器的作用可以参考&#xff1a;浅谈C空间配置器allocator及其重要性 // C标准库的vector template < class T, class Alloc allocator<T> > class vec…

混淆专题一——简单AA,JJ,JSFuck混淆处理办法

以AA混淆为例 网址&#xff1a;Scrape | NBA 想要获取球员的信息&#xff0c;但找不到包。 刷新页面&#xff0c;main.js中找到混淆的代码&#xff0c;这串混淆代码就是球员信息。 如何处理&#xff1a; 复制下来&#xff0c;去除最后的笑脸 (_)&#xff0c;然后在控制台打…

启智集装箱箱号识别技术,更高效快捷

在当今这个信息技术高速发展的时代&#xff0c;集装箱箱号识别技术在全球物流领域扮演着至关重要的角色。随着物流行业的不断壮大和复杂化&#xff0c;对集装箱箱号识别的准确性、效率性和便捷性提出了更高的要求。启智集装箱箱号识别技术应运而生&#xff0c;以其高效快捷的特…

python-快速上手爬虫

目录 前言 爬虫需谨慎&#xff0c;切勿从入门到入狱&#xff01; 一点小小的准备工作 直接上手爬取网页 1.获取UA伪装 2.获取url 3.发送请求 4.获取数据并保存 总结 前言 爬虫需谨慎&#xff0c;切勿从入门到入狱&#xff01; 一点小小的准备工作 对pip进行换源&#xf…

【EI检索】第二届机器视觉、图像处理与影像技术国际会议(MVIPIT 2024)

一、会议信息 大会官网&#xff1a;www.mvipit.org 官方邮箱&#xff1a;mvipit163.com 会议出版&#xff1a;IEEE CPS 出版 会议检索&#xff1a;EI & Scopus 检索 会议地点&#xff1a;河北张家口 会议时间&#xff1a;2024 年 9 月 13 日-9 月 15 日 二、征稿主题…

vue3前端开发-小兔鲜项目-面包屑导航的渲染

vue3前端开发-小兔鲜项目-面包屑导航的渲染&#xff01;今天来完成&#xff0c;一级分类页面顶部&#xff0c;面包屑导航的渲染。 1&#xff1a;完善好一级页面内的基础模块代码。 <script setup> import {getCategoryAPI} from /apis/category import {ref,onMounted} …

【知识蒸馏】YOLO object detection 逻辑蒸馏

YOLO检测蒸馏 和分类和分割蒸馏的差异&#xff1a; 由于YOLOv3检测框的位置输出为正无穷到负无穷的连续值&#xff0c;和上面将的分类离散kdloss不同&#xff0c;而且由于yolo是基于anchor的one stage模型&#xff0c;head out中99%都是背景预测。 Object detection at 200 F…

【论文阅读笔记】Hierarchical Neural Coding for Controllable CAD Model Generation

摘要 作者提出了一种CAD的创新生成模型&#xff0c;该模型将CAD模型的高级设计概念表示为从全局部件排列到局部曲线几何的三层神经代码的层级树&#xff0c;并且通过指定目标设计的代码树来控制CAD模型的生成或完成。具体而言&#xff0c;一种带有“掩码跳过连接”的向量量化变…

【BUG】已解决:To update, run: python.exe -m pip install --upgrade pip

To update, run: python.exe -m pip install --upgrade pip 目录 To update, run: python.exe -m pip install --upgrade pip 【常见模块错误】 解决办法&#xff1a; 欢迎来到英杰社区https://bbs.csdn.net/topics/617804998 欢迎来到我的主页&#xff0c;我是博主英杰&…

「MQTT over QUIC」与「MQTT over TCP」与 「TCP 」通信测试报告

一、结论 在实车5G测试中「MQTT Over QUIC」整体表现优于「TCP」&#xff0c;可在系统架构升级时采用MQTT Over QUIC替换原有的TCP通讯&#xff1b;从实现原理上基于QUIC比基于TCP在弱网、网络抖动导致频繁重连场景延迟更低。 二、测试方案 网络类型&#xff1a;实车5G、实车…

FPGA-计数器

前言 之前一直说整理点FPGA控制器应用的内容&#xff0c;今天就从计数器这个在时序逻辑中比较重要的内容开始总结一下&#xff0c;主要通过还是通过让一个LED闪烁这个简单例子来理解。 寄存器 了解计数器之前先来认识一下寄存器。寄存器是时序逻辑设计的基础。时序逻辑能够避…

Android C++系列:Linux信号(三)

可重入函数 不含全局变量和静态变量是可重入函数的一个要素可重入函数见man 7 signal在信号捕捉函数里应使用可重入函数在信号捕捉函数里禁止调用不可重入函数例如:strtok就是一个不可重入函数,因为strtok内部维护了一个内部静态指针,保存上一 次切割到的位置,如果信号的捕捉…