【Redis】数据结构底层结构

news2024/10/7 12:20:26

我们知道Redis的很快,一个原因是因为在内存上操作,另一个原因是本身的数据结构。而具体的五大类型就是如下:
在这里插入图片描述

键和值如何组织的

通过key找到value的过程,Redis使用了哈希表结构进行查找。具体就是根据key的hash值计算出对应的下表,然后指向对应的entry节点,entry节点保存的key和value的指针值。
比如我们操作set k1 v1, 但是get k1。就是通过哈希表结构进行查找的。
在这里插入图片描述
哈希表的优点:时间复杂度为O(1),只需计算hashkey的值就可以查找到,无论对于多大的数据量来说,是一种空间换时间思路。但是哈希表也存在一个问题就是大量key写入可能导致哈希表的冲突和rehash 以此带来操作上的阻塞。

哈希冲突如何解决

当出现大量的数据写入时,会造成哈希冲突,而哈希冲突就是不同的数据,key计算的hash值相同,导致写入到同一个hash桶中。解决方案一把采用链式法,也就是当entry1、entry2、entry3节点冲突之后,采用next阶段保存起来。

在这里插入图片描述
但是如果过多的hash冲突,肯定会导致查询效率下降。所以Redis会采用rehash的操作。
rehash的过程大概就是,redis默认有两个全局哈希表,哈希表1和哈希表2,哈希表1用来存储数据,哈希表2不存储数据。
1.当哈希表冲突达到一定阈值,就将哈希表2扩大2倍。
2.将哈希表1的数据拷贝到哈希表2中
3.哈希表1数据清除,以被下次rehash使用。

但是其实也可以发现,2中的步骤,其实非常耗费时间,可能会操作redis的阻塞。所以就有了渐进式reahsh
这个过程说白了就是,一次不全量复制,而是只复制某一个哈希桶的数据。将一次大量拷贝,进行分摊多次。
在这里插入图片描述
以上就是Redis 的键和值通过哈希表组织的过程,对于普通结构字符串就可以直接操作O(1),但是对于集合类型来说流程不一样。

集合数据操作效率

哈希表、整数数组、双向链表、压缩列表、跳表是集合类的主要集中数据结构底层结构。
整数数组、双向链表比较常见,操作复杂度是O(N)

跳表和压缩列表是Redis的重要结构
压缩列表
压缩列表其实就是一个压缩过后的数组结构,只不过有一些特殊的标识。
开头有zlbytes代表列表长度,zltail代表列表尾的偏移量,zllen列表中的entry个数。zlend代表列表结束。
在这里插入图片描述
在压缩列表中,如果想要定位第一个和最后一个元素可以通过计算得到,但是别的元素需要O(N)复杂度。
跳表
链表结构查询元素,需要逐一的查询,但是跳表作为一个有序链表,增加多个索引可以实现数据的快速定位。
在这里插入图片描述
跳表查询复杂度为O(logN)
在这里插入图片描述

不同操作的复杂度

  • 单元素操作是基础;
  • 范围操作非常耗时;统计操作通常高效;
  • 例外情况只有几个

一般来说,我们针对单个元素的操作,时间复杂度都是可控的O(1),当涉及到对范围查询需要小心使用。

小结

Redis的基本使用,基本就是掌握几大数据结构的原理,这样在操作的时候才能以不变应万变。本篇主要介绍了key和value如何组织的,哈希冲突的问题,通过渐进式rehash类解决,而Redis的重要数据结构就是跳表和压缩列表。
针对于Redis专题来说。

  • 数据库和缓存读写一致性问题
  • bloomFilter
  • 缓存雪崩 、击穿、穿透
  • 分布式锁
  • IO多路复用

Redis的基本使用

  • 持久化机制
  • Redis事务
  • Redis复制
  • Redis哨兵(sentinel)
  • Redis集群

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/499399.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

三子棋(C语言重做版)

🤩本文作者:大家好,我是paperjie,感谢你阅读本文,欢迎一建三连哦。 🥰内容专栏:这里是《C语言》专栏,笔者用重金(时间和精力)打造,基础知识一网打尽,希望可以…

对标ChatGPT3.5,支持手机电脑网页使用,无需魔法

说到 Claude 是什么,大家可能没听说过。 但是说到 OpenAI,说到 ChatGPT,相信大家一定听说过,玩过。 PS:关于 Claude 网页版的注册教程,我之前已经写过文章了,现在额外介绍如何使用手机App和电脑…

centos搭建code-server及配置HTTPS、登录页自定义

文章目录 一、Code-Server二、安装及运行三、系统配置四、HTTPS配置五、登录页面自定义 注:本版本基于4.11.0,在此之前版本,在centos上会出现CPU占用一直100%的情况,当前版本已经搭建两个月,综合下来比较稳定 通过搭建…

【高数+复变函数】傅里叶级数

文章目录 1. 傅里叶级数1.1 和差化积积化和差1.2 三角函数系的正交性1.3 系数公式求解1.4 展开条件1.5 变形下的傅里叶 在课程学习中,感觉这一部分的东西频繁会被用到,因此写下来做个总结。 1. 傅里叶级数 在科学技术中,常常会遇到各种各样的…

【matplotlib】4-完善统计图形

文章目录 完善统计图形1 添加图例和标题1.1 图例和标题的设置方法1.2 案例1--图例的展示样式的调整1.3 案例2--标题的展示样式的调整1.4 案例3--带图例的饼图 2 调整刻度范围和刻度标签2.1 调整刻度范围和刻度标签的方法2.2 子区函数--subplot()2.3 案例--逆序设置坐标轴刻度标…

密码学:公钥密码.(非对称密码)

密码学:公钥密码. 公钥密码 (Public Key Cryptography),又称为非对称密码,其最大特征是加密和解密不再使用相同的密钥,而使用不同的密钥。使用者会将一个密钥公开,而将另一个密钥私人持有,这时这两个密钥被…

【WebGIS初学到入职】第二阶段的小结

一、前言 2021年12月,我进行了【WebGIS初学到入职】第一阶段的小结,如今,一年半过去了。我完成了毕业设计,平缓得通过了岗位的试用期,而且作为我所在部门唯一的前端开发,参与了越来越多的工作项目。 同时…

源码分析RocketMQ之NameServer

整体架构图 从部署架构图可知NameServer与所有的broker通讯,NameServer集群之间互不通信。 主要功能包括 1、Broker管理 1.1 维护Broker集群 clusterAddrTable 1.2 Broker信息 接收Broker注册信息并保存作为路由信息的基本数据 brokerAddrTable 1.3 Topic消息路由…

【软件质量保证与测试】实验二之ACTS工具

索引 0. 前言1. ACTS 获取2. ACTS 启动2.1 双击启动GUI2.2 终端启动GUI2.3 进入GUI 3. ACTS 参数类型3.1 新建系统3.2 ACTS 添加成员3.2.1 Boolean类型3.2.2 Enum类型3.2.3 Number类型3.2.4 Range类型3.2.5 其他 4. ACTS 约束5. 混合组合强度6. 参考模型6.1 设定模型6.2 参数设…

Win系统软件闪屏 - 解决方案

Win系统软件闪屏 - 解决方案 前言原因解决方案方法1:软件使用独显方法2:软件关闭硬件加速方法3:降级显卡驱动 前言 使用Win10及以上系统时,可能会出现频繁闪现黑屏的状态,下文简称闪屏。一般在使用第三方软件时&#…

【Linux】进程信号保存

前言 上篇博客我们了解了进程信号的概念和信号如何产生。 本篇我们将学习进程信号如何保存。 文章目录 前言一. 阻塞信号二. 递达动作三. 信号集四. 信号集操作函数结束语 一. 阻塞信号 首先我们需要一些预备知识 实际执行信号的处理动作称为信号递达(Delivery&am…

可能是最有前途的国产大模型:讯飞星火认知大模型

大家好,我是可夫小子,关注AIGC、读书和自媒体。解锁更多ChatGPT、AI绘画玩法。加:keeepdance,备注:chatgpt,拉你进群。 昨天下午,科大讯飞发布了自己的大模型——星火认知大模型。在上周他们还在…

小白专用VScode从安装到入门编写_Windows_C/C++

此篇主要梳理VScode的安装、功能拓展等,包括与git管理和Cmake的结合 一、VScode下载二、VScode功能拓展2.1 VScode中文界面在线安装2.2 VScode中文界面离线安装2.3 鼠标滚轮调整字体大小2.4 调整编辑器界面大小2.5 Windows下VScode C/C环境配置2.5.1 MinGW编译器下载…

Illustrator如何创建Web图形与动画之实例演示?

文章目录 0.引言1.创建切片2.选择和编辑切片3.快速生成PNG元素图标 0.引言 因科研等多场景需要进行绘图处理,笔者对Illustrator进行了学习,本文通过《Illustrator CC2018基础与实战》及其配套素材结合网上相关资料进行学习笔记总结,本文对创建…

【Docker】docker核心概念与常用指令

目前掌握的docker处理平时工作倒是可以,但docker网络这块有些模棱两可,干脆从头整理一遍Docker。 🌳🌳【Docer篇整理】🌳🌳 篇一:docker核心概念与常用指令 篇二:镜像与docker数据卷…

【C++】vector的介绍及使用

目录 一、vector的介绍二、vector的常用接口2.1 vector的定义2.2 vector iterator的使用2.3 vector 空间增长问题2.4 vector 增删查改2.4.1.尾插和尾删2.4.2.任意位置插入和删除以及查找2.4.3.vector 的交换与遍历 2.5 vector 迭代器失效问题 一、vector的介绍 vector是表示可…

《花雕学AI》讯飞星火认知大模型的特点和优势,与ChatGPT的对比分析

引言: 人工智能是当今科技领域的热门话题,自然语言处理是人工智能的重要分支。自然语言处理的目标是让计算机能够理解和生成自然语言,实现人机交互和智能服务。近年来,随着深度学习的发展,自然语言处理领域出现了许多创…

人人开源代码

后台源代码: git clone gitgitee.com:renrenio/renren-fast.git 前端源代码: git clone gitgitee.com:renrenio/renren-fast-vue.git 自动生成源代码: git clone gitgitee.com:renrenio/renren-generator.git 关于 renren-fast-vue npm npm报…

RabbitMQ --- 惰性队列、MQ集群

一、惰性队列 1.1、消息堆积问题 当生产者发送消息的速度超过了消费者处理消息的速度,就会导致队列中的消息堆积,直到队列存储消息达到上限。之后发送的消息就会成为死信,可能会被丢弃,这就是消息堆积问题。 解决消息堆积有三种…

cenos7安装wkhtmltopdf

参考:http://www.023dns.com/server_ECS/2190.html https://blog.csdn.net/nexttrial/article/details/125504683 在Centos7 安装wkhtmltopdf,把html页面转换成pdf文档。 1、安装 yum install wkhtmltopdf 2、安装之后,执行操作&#xff…