Redis内存淘汰机制!

news2024/10/23 22:11:26

文章目录

  • 引言
  • 内存淘汰策略
    • noeviction
    • allkeys-lru
    • volatile-lru
    • allkeys-random
    • volatile-random
    • volatile-ttl
    • volatile-lfu
    • allkeys-lfu
  • 配置内存淘汰策略
  • 实现原理
    • LRU 算法
    • LFU 算法
    • TTL 策略
  • 应用场景
  • 性能优化
  • 监控与调优
  • 实际案例
    • 案例 1:社交媒体动态缓存
    • 案例 2:短期缓存
    • 案例 3:定时任务管理
    • 案例 4:热点数据缓存
  • 总结

引言

在面试中,经常会遇到 Redis内存满了该如何处理的问题,其本质是内存淘汰策略。在 Redis中,提供了多种内存淘汰策略,用户可以根据具体应用场景和需求选择合适的策略。这些策略主要用于决定在内存达到上限时,哪些数据应该被移除。这篇文章,我们来深入地分析 Redis的内存淘汰机制。

内存淘汰策略

Redis 提供了以下几种内存淘汰策略:

noeviction

1、当内存使用达到上限时,不再接受写入操作,返回错误信息。
2、适用于只读操作多于写入操作的场景。

allkeys-lru

1、使用 LRU (Least Recently Used) 算法,从所有键中淘汰最近最少使用的键。
2、适用于需要频繁访问最新数据的场景。

volatile-lru

1、使用 LRU 算法,从设置了过期时间的键中淘汰最近最少使用的键。
2、适用于缓存场景,过期数据可以被淘汰。

allkeys-random

1、随机淘汰所有键中的一个键。
2、适用于需要简单随机淘汰的场景。

volatile-random

1、随机淘汰设置了过期时间的键中的一个键。
2、适用于缓存场景,过期数据可以被淘汰且对淘汰顺序要求不高。

volatile-ttl

1、从设置了过期时间的键中淘汰 TTL(Time to Live)值最小的键,即最早过期的键。
2、适用于需要优先淘汰即将过期数据的场景。

volatile-lfu

1、使用 LFU (Least Frequently Used) 算法,从设置了过期时间的键中淘汰使用频率最低的键。
2、适用于缓存场景,需要保留访问频率较高的数据。

allkeys-lfu

1、使用 LFU 算法,从所有键中淘汰使用频率最低的键。
2、适用于需要保留访问频率较高的数据的场景。

配置内存淘汰策略

Redis 的内存淘汰策略通过配置文件 redis.conf 或启动参数进行设置。关键参数是 maxmemory 和 maxmemory-policy。

maxmemory:设置 Redis 可使用的最大内存容量。例如:

maxmemory 2gb

maxmemory-policy:设置内存淘汰策略。例如:

maxmemory-policy allkeys-lru

实现原理

LRU 算法

LRU(Least Recently Used)算法是一种常用的缓存淘汰策略,旨在淘汰最近最少使用的键。Redis 通过维护一个链表或哈希表来记录每个键的访问时间,当内存达到上限时,淘汰链表尾部的键。

Redis 的 LRU 算法并非严格的 LRU,而是一种近似的 LRU。Redis 通过采样的方法,每次从若干个随机键中选择最近最少使用的键进行淘汰。这种方法在性能和准确性之间取得了平衡。

LFU 算法

LFU(Least Frequently Used)算法旨在淘汰使用频率最低的键。Redis 通过为每个键维护一个访问计数器来实现 LFU 算法。每次访问键时,计数器递增;当内存达到上限时,淘汰计数器值最低的键。

类似 LRU,Redis 的 LFU 也是一种近似算法,通过采样来选择淘汰的键。

TTL 策略

TTL(Time to Live)策略通过比较键的过期时间来决定淘汰顺序。Redis 维护每个键的过期时间,当内存达到上限时,淘汰过期时间最早的键。

应用场景

不同的内存淘汰策略适用于不同的应用场景:

1、noeviction:适用于只读操作多于写入操作的场景,如数据分析、日志查询等。
2、allkeys-lru:适用于需要频繁访问最新数据的场景,如社交媒体动态、新闻推送等。
3、volatile-lru:适用于缓存场景,过期数据可以被淘汰,如网页缓存、临时会话数据等。
4、allkeys-random:适用于需要简单随机淘汰的场景,如负载均衡、随机抽样等。
5、volatile-random:适用于缓存场景,过期数据可以被淘汰且对淘汰顺序要求不高,如短期缓存、临时数据存储等。
6、volatile-ttl:适用于需要优先淘汰即将过期数据的场景,如定时任务、过期数据清理等。
7、volatile-lfu:适用于缓存场景,需要保留访问频率较高的数据,如热点数据缓存、频繁访问的配置项等。
8、allkeys-lfu:适用于需要保留访问频率较高的数据的场景,如热门商品推荐、用户行为分析等。

性能优化

为了提升内存淘汰策略的性能,Redis 采用了一些优化措施:

1、近似算法:通过采样的方法,选择淘汰键时只从若干个随机键中选择,从而降低计算复杂度。
2、定期清理:Redis 定期检查过期键并进行清理,减少内存占用。
3、渐进式淘汰:当内存使用接近上限时,Redis 逐步增加淘汰频率,避免突发的内存淘汰操作导致性能抖动。

监控与调优

为了确保内存淘汰策略的有效性,需要对 Redis 的内存使用情况进行监控和调优。可以使用以下方法:

1、监控工具:使用 Redis 内置的监控命令,如 INFO,监控内存使用、键的数量、命中率等信息。
2、日志分析:分析 Redis 日志,了解内存淘汰操作的频率和影响。
3、性能测试:通过性能测试工具模拟实际场景,验证内存淘汰策略的效果。
4、参数调优:根据监控和测试结果,调整 Redis 配置参数,如 maxmemory、maxmemory-policy 等。

实际案例

以下是几个实际案例,展示了不同内存淘汰策略的应用:

案例 1:社交媒体动态缓存

在社交媒体应用中,需要频繁访问最新的动态数据。可以使用 allkeys-lru 策略,当内存达到上限时,淘汰最近最少使用的动态数据,确保用户能够快速访问最新的动态。

案例 2:短期缓存

在网页缓存或临时会话数据存储中,可以使用 volatile-lru 策略。当内存达到上限时,淘汰最近最少使用的过期数据,确保缓存空间的有效利用。

案例 3:定时任务管理

在定时任务管理系统中,可以使用 volatile-ttl 策略。当内存达到上限时,优先淘汰即将过期的任务数据,确保任务调度的准确性。

案例 4:热点数据缓存

在电子商务网站中,可以使用 allkeys-lfu 策略。当内存达到上限时,淘汰访问频率最低的商品数据,确保用户能够快速访问热门商品。

总结

Redis 的内存淘汰机制是其高性能和高可用性的关键保障。通过灵活选择和配置内存淘汰策略,用户可以有效管理内存资源,确保系统的稳定运行。不同的内存淘汰策略适用于不同的应用场景,用户需要根据具体需求进行选择和调优。同时,结合监控和性能测试,用户可以不断优化内存淘汰策略,提升 Redis 的性能和可靠性

编辑:三两肉
来源:猿Java

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/2221908.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

C++笔记---哈希表

1. 哈希的概念 哈希(hash)又称散列,是一种组织数据的方式。从译名来看,有散乱排列的意思。 本质就是通过哈希函数把关键字Key跟存储位置建立一个映射关系,查找时通过这个哈希函数计算出Key存储的位置,进行快速查找。 STL中的un…

推荐IDE中实用AI编程插件,目前无限次使用

插件介绍 一款字节跳动推出的“基于豆包大模型的智能开发工具” 以vscode介绍【pycharm等都可以啊】,这个插件提供智能补全、智能预测、智能问答等能力,节省开发时间 直接在IDE中使用,就不用在网页中来回切换了 感觉还可以,响应速…

Excel表格如何修改“打开密码”,简单几步,轻松搞定

在保护Excel文件的安全性时,设置打开密码是常见且有效的方式。然而,有时我们需要修改已经设置的打开密码,以确保文件安全性或更新密码信息。今天小编来分享一下修改Excel文件打开密码的方法,操作简单,一起来看看吧&…

设置OpenAI API的环境变量

获取openai API 密钥 https://platform.openai.com/api-keys 设置环境变量 为什么不在代码中直接写入,而是设置环境变量? 安全性:将 API 密钥存储在环境变量中,而不是直接写在代码中,可以降低泄露密钥的风险。易于…

第二期:第15节,beep 大海

首先是 代码的编写: 里面已经有了解释了。 1 /*2 * main.c3 *4 * Created on: 2023-3-85 * Author: pengdan6 */7 #include "exynos_4412.h"89 void delay_ms(unsigned int num)10 {11 int i,j;12 for(inum; i>0;i--)13 …

『完整代码』坐骑召唤

创建一个按钮 作为召唤/消失坐骑的开关 将预制体放入指定文件夹 命名为Mount01 创建脚本并编写:CallMount.cs using UnityEngine; using UnityEngine.UI; public class CallMount : MonoBehaviour{public Button callBtn;GameObject mountPrefab;GameObject mountIn…

[项目详解][boost搜索引擎#1] 概述 | 去标签 | 数据清洗 | scp

目录 一、前言 二、项目的相关背景 三、搜索引擎的宏观原理 四、搜索引擎技术栈和项目环境 五、正排索引 VS 倒排索引--原理 正排索引 分词 倒排索引 六、编写数据去除标签和数据清洗模块 Parser 1.数据准备 parser 编码 1.枚举文件 EnumFile 2.去标签ParseHtml(…

使用Vscode配置ftp连接远程服务器(上传本地文件)

1.安装插件 扩展商店搜sftp,点击进行安装。 2.配置json文件 crtl+shift+p 输入ftp配置命令 sftp:config {"name": "My Server", //设置名字"host": "localhost"</

android app执行shell命令视频课程补充android 10/11适配-千里马android

(https://blog.csdn.net/learnframework/article/details/120103471) https://blog.csdn.net/learnframework/article/details/120103471 hi&#xff0c;有学员在学习跨进程通信专题课程时候&#xff0c;在实战app执行一个shell命令的项目时候&#xff0c;对课程本身的android …

JVM、字节码文件介绍

目录 初识JVM 什么是JVM JVM的三大核心功能 JVM的组成 字节码文件的组成 基础信息 Magic魔数 主副版本号 其它基础信息 常量池 字段 方法 属性 字节码常用工具 javap jclasslib插件 阿里Arthas 初识JVM 什么是JVM JVM的三大核心功能 1. 解释和运行虚拟机指…

js实现点击随机点名效果

代码&#xff1a; <!DOCTYPE html> <html lang"en"> <head><meta charset"UTF-8"><meta name"viewport" content"widthdevice-width, initial-scale1.0"><title>Document</title> </he…

uniapp+vue3+uview-plus修改默认样式

最近使用uniappvue3uview-plus开发微信小程序中&#xff0c;使用uview-plus自定义底部导航栏tabbar时&#xff0c;遇到修改默认样式不生效问题 使用传统的 ::v-deep、:deep、::v-deep&#xff0c;或者style标签中去掉scoped也是无效的&#xff0c;有好的方案欢迎交流&#xff…

深入剖析 C 与 C++ 动态内存管理之术

亲爱的读者朋友们&#x1f603;&#xff0c;此文开启知识盛宴与思想碰撞&#x1f389;。 快来参与讨论&#x1f4ac;&#xff0c;点赞&#x1f44d;、收藏⭐、分享&#x1f970;&#xff0c;共创活力社区。 &#x1f525;&#x1f525;&#x1f525;【C】进阶&#xff1a;类相关…

Java 二分查找算法详解及通用实现模板案例示范

1. 引言 二分查找&#xff08;Binary Search&#xff09;是一种常见的搜索算法&#xff0c;专门用于在有序数组或列表中查找元素的位置。它通过每次将搜索空间缩小一半&#xff0c;从而极大地提高了查找效率。相比于线性查找算法&#xff0c;二分查找的时间复杂度为 O(log n)&…

利用Docker搭建一套Mycat2+MySQL8一主一从、读写分离的最简单集群(保姆教程)

文章目录 1、Mycat介绍1.1、mycat简介1.2、mycat重要概念1.3、Mycat1.x与Mycat2功能对比1.2、主从复制原理 2、前提准备3、集群规划4、安装和配置mysql主从复制4.1、master节点安装mysql8容器4.2、slave节点安装mysql8容器4.2、配置主从复制4.3、测试主从复制配置 5、安装mycat…

【TDA】持续同调的矢量化方法

Topological deep learning: a review of an emerging paradigm 持续同调与深度学习协同下的3D点云分类_苏潇 Applications of Topology to Data Analysis Computational Topology: An Introduction 持续同调对于特征的方式有条形码PB和持续图表PD两种形式,它们包含了持续同调的…

Qt开发技巧(十八):新窗口控件用智能指针,将一些配置类变量封装起来,Qt窗体的Z序叠放,子窗体的释放,Qt中的事件发送,Qt的全局头文件

继续讲一些Qt开发中的技巧操作&#xff1a; 1.新窗口控件用智能指针 通过对Qt自带Examples的源码研究你会发现&#xff0c;越往后的版本&#xff0c;越喜欢用智能指针QScopedPointer来定义对象&#xff0c;这样有个好处就是用的地方只管new就行&#xff0c;一直new下去&#xf…

2025 年最佳的 Retool 开源替代方案

自 2017 年推出以来&#xff0c;Retool 已迅速成为开发者的热门选择。 Retool 的出现&#xff0c;填补了当时企业在快速构建内部工具上的空白。传统的应用开发往往需要耗费大量时间和资源&#xff0c;尤其是对于定制的内部业务应用。而 Retool 提供了一个灵活的平台&#xff0…

element设置时间和日期框早于现在的时间和日期禁用

效果: 今日此时此刻之前的日期、时间禁止选用&#xff0c;切换日期和时间为“2024-10-19 00:00:00"&#xff0c;再切换为”2024-10-18 00:00:00"时&#xff0c; 会给form.time默认赋值为今日此时此刻&#xff08;日期时间少于今日此时此刻则重新赋值&#xff09; 安…

datax连接池泄漏问题排查及解决

1、问题描述 频繁调用datax服务&#xff08;从oracle同步到mysql&#xff09;出现报错&#xff0c;获取不到连接 oracle读取时报错信息 "errorMessage": "Code:[DBUtilErrorCode-10], Description:[连接数据库失败. 请检查您的 账号、密码、数据库名称、IP、…