Redis 慢查询分析与优化

news2025/4/23 13:24:03

Redis 慢查询分析与优化

参考书籍 : https://weread.qq.com/web/reader/d5432be0813ab98b6g0133f5kd8232f00235d82c8d161fb2

以下从配置参数耗时细分分析工具优化策略四个维度深入解析 Redis 慢查询问题,结合实战调优建议,帮助开发者精准定位并优化性能瓶颈。


一、慢查询核心配置参数

image

Redis 慢查询功能通过两个关键参数控制,直接影响日志记录范围和存储容量:

  1. slowlog-log-slower-than

    • 功能:设定命令执行时间的阈值(单位:微秒),超过此值的命令会被记录。

    • 默认值:10000 微秒(10 毫秒),建议高并发场景调整为 1000 微秒(1 毫秒)

    • 特殊值

      • 0​:记录所有命令(调试用)。
      • 负值:禁用慢查询日志。
  2. slowlog-max-len

    • 功能:定义慢查询日志列表的最大长度(先进先出队列)。
    • 默认值:128 条,生产环境建议调至 1000 条以上,避免关键日志被覆盖。

配置示例

# 动态设置(临时生效)  
CONFIG SET slowlog-log-slower-than 1000  
CONFIG SET slowlog-max-len 1000  

# 持久化到配置文件(需重启)  
slowlog-log-slower-than 1000  
slowlog-max-len 1000  

二、耗时细分与瓶颈定位

Redis 命令执行全流程耗时可拆分为以下阶段:

  1. 网络传输(客户端到服务端):

    • 网络延迟或丢包可能导致客户端感知的耗时增加,但不记录在慢查询日志中
    • 排查工具:ping​、traceroute​ 或监控工具(如 Prometheus)。
  2. 命令排队(Redis 内部队列):

    • 单线程架构下,若并发请求过高,命令需排队等待执行。
    • 排队时间不纳入慢查询统计,但可能导致客户端超时。
  3. 命令执行(核心耗时):

    • 实际执行命令的耗时,由慢查询日志的 duration​ 字段记录(单位:微秒)。
    • 高复杂度命令(如 KEYS​、SORT​)或 BigKey 操作是主要瓶颈。
  4. 结果返回(服务端到客户端):

    • 网络传输时间同样不计入慢查询日志,但可能影响客户端体验。

三、慢查询分析工具
  1. 内置命令

    • **SLOWLOG GET [n]​**:获取最近 n 条慢查询日志,含时间戳、耗时、具体命令。

      image

      127.0.0.1:6379> SLOWLOG GET 2  
      1) 1) (integer) 12345         # 日志ID  
         2) (integer) 1680000000    # 时间戳  
         3) (integer) 15000         # 耗时(微秒)  
         4) 1) "SORT"               # 命令及参数  
            2) "mylist"  
      
    • **SLOWLOG LEN​**:查看当前慢查询日志数量。

    • **SLOWLOG RESET​**:清空日志列表。

  2. 监控工具

    • **INFO COMMANDSTATS​**:统计所有命令的执行次数和总耗时,定位高频耗时命令。

      image

      参数介绍:

      截图中每一项均以 cmdstat_<命令名>​ 开头,代表对应 Redis 命令的执行统计信息,各参数含义如下:

      参数名含义
      calls该命令的总执行次数。
      usec该命令所有执行耗时的总和(单位:微秒,μs)。
      usec_per_call该命令的平均执行时间(单位:微秒,μs),即 usec ÷ calls​。
      rejected_calls该命令被拒绝执行的次数(如权限不足、命令被禁用等情况)。
      failed_calls该命令执行过程中失败的次数(如参数错误、执行逻辑异常等)。

      cmdstat_ttl:calls=304,usec=3064,usec_per_call=10.08,rejected_calls=1,failed_calls=0​ 为例:

      • TTL​ 命令共执行 304​ 次,总耗时 3064​ 微秒,平均每次耗时 10.08​ 微秒,被拒绝执行 1​ 次,执行失败 0​ 次。

      其他项(如 cmdstat_auth​、cmdstat_set​ 等)均遵循此格式,分别对应各自命令的统计数据,可据此分析命令的执行频率、性能及异常情况。

    • **MONITOR​**:实时捕获所有命令(慎用,可能引发性能问题)。

    • 第三方工具:Prometheus + Grafana 实现可视化监控。 后续研究


四、优化策略与实战建议
  1. 规避高复杂度命令

    • 替代方案

      • SCAN​ 代替 KEYS​ 遍历键。
      • 客户端实现排序,避免 SORT​ 命令处理大数据集。
    • 分页处理:对大型集合使用 LRANGE​ 分批次获取数据。

  2. BigKey 治理

    • 拆分存储:将大 Hash/List 拆分为多个子键(如 user:1001:logs_part1​)。

    • 渐进式删除:通过 Lua 脚本分批次删除 BigKey,避免阻塞。

      -- 分批次删除大列表  
      local key = KEYS[1]  
      for i = 1, 1000 do  
          redis.call("LPOP", key)  
      end  
      
  3. 配置调优

    • 内存管理:设置 maxmemory​ 和淘汰策略(如 allkeys-lru​)。
    • 集群分片:使用 Redis Cluster 分散负载,缓解单节点压力。

五、调优最佳实践
  1. 定期日志分析

    • 每日检查慢查询日志,识别高频耗时命令。
    • 结合 INFO COMMANDSTATS​ 验证优化效果。
  2. 阈值动态调整

    • 业务高峰期临时降低 slowlog-log-slower-than​(如 500 微秒),捕捉潜在问题。
  3. 日志持久化

    • 定期将慢查询日志导出到外部存储(如 Elasticsearch),便于长期分析。

总结

通过合理配置 slowlog-log-slower-than​ 和 slowlog-max-len​,结合 SLOWLOG GET​ 和监控工具,可精准定位 Redis 性能瓶颈。优化核心在于规避高复杂度命令、治理 BigKey、动态调整配置及利用集群技术。定期分析日志与监控数据,是保障 Redis 高性能运行的关键。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/2340803.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

使用达梦官方管理工具SQLark快速生成数据库ER图并导出

在数据库设计与开发中&#xff0c;实体-关系图&#xff08;ER 图&#xff09;作为数据建模的核心工具&#xff0c;能够直观呈现表结构、字段属性及表间关系&#xff0c;是团队沟通和文档维护的重要工具。然而&#xff0c;许多开发者在实际工作中常面临一个痛点&#xff1a;手动…

模型 替罪羊效应

系列文章分享模型&#xff0c;了解更多&#x1f449; 模型_思维模型目录。转嫁罪责于无辜&#xff0c;维系群体控制与稳定 1 替罪羊效应的应用 1.1 多品牌危机中的行业“背锅侠” 行业背景&#xff1a;食品行业爆发大规模安全危机&#xff0c;多家企业卷入某类食品重金属超标…

TapData × 梦加速计划 | 与 AI 共舞,TapData 携 AI Ready 实时数据平台亮相加速营,企业数据基础设施现代化

在实时跃动的数据节拍中&#xff0c;TapData 与 AI 共舞&#xff0c;踏出智能未来的新一步。 4月10日&#xff0c;由前海产业发展集团、深圳市前海梦工场、斑马星球科创加速平台等联合发起的「梦加速计划下一位独角兽营」正式启航。 本次加速营以“打造下一位独角兽企业”为目…

15.电感特性在EMC设计中的运用

电感特性在EMC设计中的运用 1. 共模电感与差模电感的差异2. 电感的高频等效特性![在这里插入图片描述](https://i-blog.csdnimg.cn/direct/b4dc000672af4dd69a528450eb42cf10.png)3. 电感在EMC设计中的使用注意事项3.1 LC滤波计算3.2 并联型多级浪涌防护的电感退耦 1. 共模电感…

uniapp Vue2升级到Vue3,并发布到微信小程序的快捷方法

目录 前言&#xff1a;升级项目的两种方式步骤一、新建项目 【选择-默认模版】二、修改-pages.json三、补充-缺少的文件四、修改-Main.js按照 [官方文档-vue2升级vue3迁移指南](https://uniapp.dcloud.net.cn/tutorial/migration-to-vue3.html) 修改 五、升级-uni-ui扩展组件的…

数据重构如何兼顾效率与性能稳定?zStorage 全闪存分布式存储的技术实践与实测数据

点击蓝字 关注我们 zStorage 作为数据库场景下的全闪存分布式存储&#xff0c;除了性能要好&#xff0c;更重要的是要在各种情况下都能保持“稳定”的好。一个高并发的交易型业务数据库&#xff0c;如果出现轻微的IO抖动&#xff0c;就可能造成数据库并发事务提交的排队&#x…

A2A + MCP:构建实用人工智能系统的超强组合

构建真正有效的连接型人工智能系统的挑战 如果你正在构建人工智能应用&#xff0c;这种情况可能听起来很熟悉&#xff1a; 你需要特定的人工智能能力来解决业务问题。你找到了完成每个单独任务的出色工具。但把所有东西连接在一起却占据了大部分开发时间&#xff0c;还创建了…

力扣每日打卡17 49. 字母异位词分组 (中等)

力扣 49. 字母异位词分组 中等 前言一、题目内容二、解题方法1. 哈希函数2.官方题解2.1 前言2.2 方法一&#xff1a;排序2.2 方法二&#xff1a;计数 前言 这是刷算法题的第十七天&#xff0c;用到的语言是JS 题目&#xff1a;力扣 49. 字母异位词分组 (中等) 一、题目内容 给…

Word处理控件Spire.Doc系列教程:C# 为 Word 文档设置背景颜色或背景图片

在 Word 文档中&#xff0c;白色是默认的背景设置。一般情况下&#xff0c;简洁的白色背景足以满足绝大多数场景的使用需求。但是&#xff0c;如果您需要创建简历、宣传册或其他创意文档&#xff0c;设置独特的背景颜色或图片能够极大地增强文档的视觉冲击力。本文将演示如何使…

掌握 Altium Designer:轻松定制“交换器件”工具栏

在PCB设计过程中&#xff0c;快速交换器件&#xff08;如电阻、电容、IC等&#xff09;是提高效率的关键。Altium Designer提供了灵活的工具栏定制功能&#xff0c;让用户可以创建专属的"交换器件"工具栏&#xff0c;将常用操作集中管理&#xff0c;减少菜单切换时间…

【C++ Qt】信号和槽(内配思维导图 图文并茂 通俗易懂)

每日激励&#xff1a;“不设限和自我肯定的心态&#xff1a;I can do all things。 — Stephen Curry” 绪论​&#xff1a; 本章是Qt中的第三章&#xff0c;也是我们理解Qt中必备的点 信号槽&#xff0c;它本质由信号和槽两个来实现&#xff0c;其中将细致的讲述如何自定义信号…

从零开始构建微博爬虫:实现自动获取并保存微博内容

从零开始构建微博爬虫&#xff1a;实现自动获取并保存微博内容 前言 在信息爆炸的时代&#xff0c;社交媒体平台已经成为信息传播的重要渠道&#xff0c;其中微博作为中国最大的社交媒体平台之一&#xff0c;包含了大量有价值的信息和数据。对于研究人员、数据分析师或者只是…

三餐四季、灯火阑珊

2025年4月22日&#xff0c;15~28℃&#xff0c;挺好的 待办&#xff1a; 教学技能大赛教案&#xff08;2025年4月24日&#xff0c;校赛&#xff0c;小组合作&#xff0c;其他成员给力&#xff0c;暂不影响校赛进度&#xff0c;搁置&#xff09; 教学技能大赛PPT&#xff08;202…

基于javaweb的SSM+Maven教材管理系统设计与实现(源码+文档+部署讲解)

技术范围&#xff1a;SpringBoot、Vue、SSM、HLMT、Jsp、PHP、Nodejs、Python、爬虫、数据可视化、小程序、安卓app、大数据、物联网、机器学习等设计与开发。 主要内容&#xff1a;免费功能设计、开题报告、任务书、中期检查PPT、系统功能实现、代码编写、论文编写和辅导、论文…

NineData 与飞书深度集成,企业级数据管理审批流程全面自动化

NineData 正式推出与飞书审批系统的深度集成功能&#xff0c;企业用户在 NineData 平台发起的审批工单&#xff0c;将自动推送至审批人的飞书中&#xff0c;审批人可以直接在飞书进行审批并通过/拒绝。该功能实现跨系统协作&#xff0c;带来巨大的审批效率提升&#xff0c;为各…

mockMvc构建web单元测试学习笔记

web应用本来需要依靠tomcat这个环境运行 现在用mockMvc是为了模拟这个web环境&#xff0c;简化测试 什么是mock(模拟) 模拟对象---mock object是以可控方式模拟真实对象行为的假对象&#xff0c;通过模拟输入数据&#xff0c;验证程序达到预期结果 为什么使用mock对象 因为…

Windows7升级Windows10,无法在此驱动器上安装Windows

一、现象描述 台式机工作站&#xff0c;从Windows7升级Windows10&#xff0c;采用MediaCreationTool_22H2制作U盘启动盘&#xff0c;安装系统遇到问题如下&#xff1a; 二、原因分析 是由于硬盘格式不是GPT硬盘&#xff0c;而Windows系统只能安装到GPT硬盘上&#xff0c;所以…

Idea创建项目的搭建

1、普通java项目 如果没有project SDK去new&#xff0c;默认在C:\Program Files\Java\jdk1.8.0_261 输入项目名称和项目路径 点击完成&#xff0c;即创建好一个普通的Java项目。 2、普通JavaWEB项目 目录中没有WEB-INF文件可以直接从tomcat中粘贴过来 D:\apache-tomcat-8.5.…

GpuGeek:以弹性算力与全栈服务赋能产业智能升级

在人工智能技术快速融入各领域的趋势下&#xff0c;企业对高效、低成本的AI基础设施需求日益迫切。GpuGeek作为一站式AI基础设施平台&#xff0c;凭借其弹性算力调度、全流程开发支持、全球化资源覆盖以及国产化技术适配四大核心优势&#xff0c;为产业智能化升级提供了坚实的技…

网络原理 - 4(TCP - 1)

目录 TCP 协议 TCP 协议段格式 可靠传输 几个 TCP 协议中的机制 1. 确认应答 2. 超时重传 完&#xff01; TCP 协议 TCP 全称为 “传输控制协议”&#xff08;Transmission Control Protocol&#xff09;&#xff0c;要对数据的传输进行一个详细的控制。 TCP 协议段格…