Redis:线程模型

news2025/4/15 23:21:25

单线程模型

image _3_.png

Redis 自诞生以来,一直以高性能著称。很多人好奇,Redis 为什么早期采用单线程模型,它真的比多线程还快吗? 其实,Redis 的“快”并不在于并发线程,而在于其整体架构设计极致简单高效,主要体现在:

  1. 基于内存(最主要的原因),性能瓶颈不在 CPU:Redis 的数据全部存储在内存中,访问不涉及磁盘 I/O,CPU 在大多数情况下并不是瓶颈,因此不需要多线程分摊计算压力。

  2. 数据存取非常快

    • Redis 存储在内存中,读写速度接近极限;

    • 不需要频繁的上下文切换、内核态与用户态的转换;

    • 执行效率高,每个请求处理成本低。

  3. 避免多线程带来的复杂性

    • 单线程模型可以避免加锁、解锁、死锁等多线程并发问题

    • 无需线程上下文切换,节省 CPU 时间;

    • 更容易实现和维护。

  4. 多路复用机制:Redis 使用了基于事件驱动的 epoll(Linux)实现的I/O 多路复用模型,能够高效地处理大量客户端连接请求。

  5. 高效数据结构:非常适合内存操作的高效数据结构:SDS(简单动态字符串),ziplistlistpackquicklist跳表 skiplist; 这些结构可以保证极快的插入、查询、遍历效率。

引入多线程的原因

随着 Redis 用户量剧增、业务规模扩大,Redis 面临了一些新的挑战,也就是Redis的性能瓶颈:

网络 I/O,当连接数剧增(特别是高并发大请求的场景),网络数据的读取/写入成为瓶颈:

  • 虽然命令执行依然快速;

  • 但主线程需要花费大量时间在“读 socket、写 socket、解析协议”上。

为了解决网络瓶颈问题,Redis 从 6.0 开始引入 I/O 多线程机制

  • 仍然保留主线程执行命令的模型;
  • 引入多个后台 I/O 线程负责读写 socket 数据;
  • 实现真正意义上的读写分离、I/O 解耦

I/O 线程只做纯粹的网络数据传输,不涉及数据结构修改,不会产生线程安全问题,也不会破坏原有的单线程执行语义。

无法充分利用多核资源:多核时代,单线程只能用一个 CPU 核心,处理海量并发请求时能力不足。

三个核心后台线程

Redis 除了主线程之外,还有 3 个重要的后台线程,称为 BIO(Background I/O)线程,用于异步处理阻塞或耗时任务:

image.png

释放内存线程

  • 异步释放内存:Redis 执行删除、淘汰数据操作时,释放内存线程在后台异步释放内存,避免主线程卡顿,尤其处理大量数据删除时,能分散内存释放压力,保证系统并发处理能力。
  • 内存碎片整理:定期检查内存,整理碎片,合并不连续空闲内存块,提高内存利用率,降低内存分配失败概率,增强服务器稳定性。

AOF 刷盘线程

  • 日志重写:AOF 文件随时间和写操作增多会变大,AOF 重写线程在后台重写,依据数据库状态将键值对操作重记为命令,生成更小 AOF 文件,缩短服务器启动和数据恢复时间。
  • 数据一致性保证:重写时对数据库快照,记录开始状态,依据重写期间命令更新快照,合并更新后快照和命令记录成新 AOF 文件,确保数据一致性。

处理关闭文件线程

  • 大对象释放:删除或过期大对象时,Redis 将其放入待释放队列,由线程在后台逐步释放,避免主线程长时间阻塞,提升系统整体可用性。
  • 资源合理利用:根据系统负载和内存使用情况,合理安排大对象释放时间和频率,业务高峰期减慢释放,低谷期加快释放。
BIO 线程功能
AOF 刷盘线程everysec 策略下,每秒由后台线程执行 fsync 持久化
释放内存线程删除大 key 或触发过期淘汰时,为避免阻塞主线程,异步执行
处理关闭文件线程在 AOF 重写、RDB 持久化结束后,异步关闭文件描述符,释放资源

三个或多个 I/O 线程

Redis 在 6.0 之后支持配置若干个 I/O 线程,用于处理网络读取和写入

类型描述
读线程从客户端连接读取请求数据、解析协议
写线程将主线程处理完的响应结果写回客户端
默认配置默认只开启“写多线程”,读仍然由主线程处理

配置方式(redis.conf):

io-threads 4                 # 开启 4 个 I/O 线程(建议2-8之间)
io-threads-do-reads yes      # 启用读请求的多线程处理(默认关闭)

注意:即便开启多线程,命令解析和执行仍然是由 主线程 完成!

参考资料:小林coding

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/2334732.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

Transformer模型解析与实例:搭建一个自己的预测语言模型

目录 1. 前言 2. Transformer 的核心结构 2.1 编码器(Encoder) 2.2 解码器(Decoder) 2.3 位置编码(Positional Encoding) 3. 使用 PyTorch 构建 Transformer 3.1 导入所需的模块: 3.2 定…

springboot框架集成websocket依赖实现物联网设备、前端网页实时通信!

需求: 最近在对接一个物联网里设备,他的通信方式是 websocket 。所以我需要在 springboot框架中集成websocket 依赖,从而实现与设备实时通信! 框架:springboot2.7 java版本:java8 好了,还是直接…

ES6学习03-字符串扩展(unicode、for...of、字符串模板)和新方法()

一、字符串扩展 1. eg: 2.for...of eg: 3. eg: 二。字符串新增方法 1. 2. 3. 4. 5.

目前状况下,计算机和人工智能是什么关系?

目录 一、计算机和人工智能的关系 (一)从学科发展角度看 计算机是基础 人工智能是计算机的延伸和拓展 (二)从技术应用角度看 二、计算机系学生对人工智能的了解程度 (一)基础层面的了解 必备知识 …

Flutter 2025 Roadmap

2025 这个路线图是有抱负的。它主要代表了我们这些在谷歌工作的人收集的内容。到目前为止,非Google贡献者的数量超过了谷歌雇佣的贡献者,所以这并不是一个详尽的列表,列出了我们希望今年Flutter能够出现的所有令人兴奋的新事物!在…

[数据结构]排序 --2

目录 8、快速排序 8.1、Hoare版 8.2、挖坑法 8.3、前后指针法 9、快速排序优化 9.1、三数取中法 9.2、采用插入排序 10、快速排序非递归 11、归并排序 12、归并排序非递归 13、排序类算法总结 14、计数排序 15、其他排序 15.1、基数排序 15.2、桶排序 8、快速排…

第16届蓝桥杯c++省赛c组个人题解

偷偷吐槽: c组没人写题解吗,找不到题解啊 P12162 [蓝桥杯 2025 省 C/研究生组] 数位倍数 题目背景 本站蓝桥杯 2025 省赛测试数据均为洛谷自造,与官方数据可能存在差异,仅供学习参考。 题目描述 请问在 1 至 202504&#xff…

记一次InternVL3- 2B 8B的部署测验日志

1、模型下载魔搭社区 2、运行环境: 1、硬件 RTX 3090*1 云主机[普通性能] 8核15G 200G 免费 32 Mbps付费68Mbps ubuntu22.04 cuda12.4 2、软件: flash_attn(好像不用装 忘记了) numpy Pillow10.3.0 Requests2.31.0 transfo…

使用SSH解决在IDEA中Push出现403的问题

错误截图: 控制台日志: 12:15:34.649: [xxx] git -c core.quotepathfalse -c log.showSignaturefalse push --progress --porcelain master refs/heads/master:master fatal: unable to access https://github.com/xxx.git/: The requested URL return…

Tauri 2.3.1+Leptos 0.7.8开发桌面应用--Sqlite数据库的写入、展示和选择删除

在前期工作的基础上(Tauri2Leptos开发桌面应用--Sqlite数据库操作_tauri sqlite-CSDN博客),尝试制作产品化学成分录入界面,并展示数据库内容,删除选中的数据。具体效果如下: 一、前端Leptos程序 前端程序主…

《车辆人机工程-》实验报告

汽车驾驶操纵实验 汽车操纵装置有哪几种,各有什么特点 汽车操纵装置是驾驶员直接控制车辆行驶状态的关键部件,主要包括以下几种,其特点如下: 一、方向盘(转向操纵装置) 作用:控制车辆行驶方向…

使用多进程和 Socket 接收解析数据并推送到 Kafka 的高性能架构

使用多进程和 Socket 接收解析数据并推送到 Kafka 的高性能架构 在现代应用程序中,实时数据处理和高并发性能是至关重要的。本文将介绍如何使用 Python 的多进程和 Socket 技术来接收和解析数据,并将处理后的数据推送到 Kafka,从而实现高效的…

Redis 哨兵模式 搭建

1 . 哨兵模式拓扑 与 简介 本文介绍如何搭建 单主双从 多哨兵模式的搭建 哨兵有12个作用 。通过发送命令,让Redis服务器返回监控其运行状态,包括主服务器和从服务器。 当哨兵监测到master宕机,会自动将slave切换成master,然后通过…

【网络安全 | 项目开发】Web 安全响应头扫描器(提升网站安全性)

原创项目,未经许可,不得转载。 文章目录 项目简介工作流程示例输出技术栈项目代码使用说明项目简介 安全响应头是防止常见 Web 攻击(如点击劫持、跨站脚本攻击等)的有效防线,因此合理的配置这些头部信息对任何网站的安全至关重要。 Web 安全响应头扫描器(Security Head…

基于PySide6与pycatia的CATIA绘图比例智能调节工具开发全解析

引言:工程图纸自动化处理的技术革新 在机械设计领域,CATIA图纸的比例调整是高频且重复性极强的操作。传统手动调整方式效率低下且易出错。本文基于PySide6+pycatia技术栈,提出一种支持智能比例匹配、实时视图控制、异常自处理的图纸批处理方案,其核心突破体现在: ​操作效…

STM32硬件IIC+DMA驱动OLED显示——释放CPU资源,提升实时性

目录 前言 一、软件IIC与硬件IIC 1、软件IIC 2、硬件IIC 二、STM32CubeMX配置KEIL配置 三、OLED驱动示例 1、0.96寸OLED 2、OLED驱动程序 3、运用示例 4、效果展示 总结 前言 0.96寸OLED屏是一个很常见的显示模块,其驱动方式在用采IIC通讯时,常用软件IIC…

泛型的二三事

泛型(Generics)是Java语言的一个重要特性,它允许在定义类、接口和方法时使用类型参数(Type Parameters),从而实现类型安全的代码重用。泛型在Java 5中被引入,极大地增强了代码的灵活性和安全性。…

编程思想——FP、OOP、FRP、AOP、IOC、DI、MVC、DTO、DAO

个人简介 👀个人主页: 前端杂货铺 🙋‍♂️学习方向: 主攻前端方向,正逐渐往全干发展 📃个人状态: 研发工程师,现效力于中国工业软件事业 🚀人生格言: 积跬步…

【区块链安全 | 第三十九篇】合约审计之delegatecall(一)

文章目录 外部调用函数calldelegatecallcall 与 delegatecall 的区别示例部署后初始状态调用B.testCall()函数调用B.testDelegatecall()函数区别总结漏洞代码代码审计攻击代码攻击原理解析攻击流程修复建议审计思路外部调用函数 在 Solidity 中,常见的两种底层外部函数调用方…

linux多线(进)程编程——(6)共享内存

前言 话说进程君的儿子经过父亲点播后就开始闭关,它想要开发出一种全新的传音神通。他想,如果两个人的大脑生长到了一起,那不是就可以直接知道对方在想什么了吗,这样不是可以避免通过语言传递照成的浪费吗? 下面就是它…