Redis字典

news2024/11/25 4:24:47

1.前言

我们回顾一下之前讲到的Redis的字典结构,示意图如下:

Redis的字典本质上来说也是数组+链表的数据结构,这与Java中HashMap的数据结构很类似。

由上述结构示意图也能看出,字典dict中维护了一个ht数组,而且只有两个元素,这两个元素是其扩容的关键点,这个我们后面会讲到。

Redis中的哈希对象在以下条件时,使用ziplist编码,

  • 哈希对象保存的所有键值的字符串长度都小于64字节

  • 哈希对象保存的键值对数量小于512个。

否则哈希对象会使用hashtable编码, 而hashtable则时使用了字典作为底层实现的。

如下redis 哈希对象编码由ziplist 变成hashtable

2.增加元素与键冲突

当不同的键值经过哈希算法与散列算法之后被分配到了同一个哈希表数组的同一个索引上,那么这之后就会有键冲突。

Redis 哈希表解决哈希冲突同样是使用了链表地址法。使用哈希节点的next指针来链接同一个哈希表数组索引上的元素。不过Redis会将新添加的哈希节点加入到链表的表头位置。

如下所示:如果程序要将键值对 (k2 , v2 ) 添加到如下的哈希表中,而且计算的书的索引为1,那么和 (k1 v1) 将产生冲突。解决冲突时,会将两个节点使用next指针链接起来。而且会将新节点添加到链表表头的位置。

哈希表1

链表解决hash冲突之后的哈希表

3.rehash 扩容过程

哈希表不断的增加元素,其元素数量达到一定的比例之后,程序会对哈希表进行相应的扩展。通过执行rehash (重新散列)操作完成操作。其步骤如下:

  • 执行扩展操作时会将字典中的ht[1] 哈希表大小设置成 第一个大于等于 ht[0] 的 ht[0].used * 2 的 2^n (2的n次幂)

  • 将保存早ht[0] 中的所有的键值对 rehash到ht[1] 上, rehash过程中会重新计算哈希值和索引值。

  • 当ht[0]中所有的键值对都迁移到ht[1]上时,释放ht[0], 并将ht[1] 设置成 ht[0], 并在ht[1]上建一个空的哈希表。

将下图中的字典做rehash操作:

 

  1. ht[0].used 是4,4*2 = 8 ,2的3次方8 是第一个大于4   的 2的n次幂。即程序会将ht[1] 的大小设置成8 ,并分配空间,结构示意如下:

 

  1. 将ht[0] 上的几个键值对全部都rehash到ht[1] 上面,如下图:

 

  1. 释放ht[0],并将ht[1] 设置成 ht[0] , 然后为ht[1]分配一个空白的哈希表 如下图:

 

以上是一个rehash的过程示意。

4.渐进式rehash

上面讲的是一个rehash的理论过程,redis实际操作时并不会一次将所有的迁移一次性完成。

如果键值对数量非常庞大,那么迁移过程必然需要花费一点时间。由此可知,服务器也不可能一次将所有的键值对迁移,需要分多次,逐渐将ht[0] 里面的键值对迁移到ht[1]中,

其步骤如下:

  • 首先会给ht[1]分配内存空间,此时redis字典拥有两个哈希表

  • 字典中维护一个rehashidx的计数器,将其值设置为0,表示rehash工作开始

  • 在rehash期间,程序依然可以进行增删改查的操作,除此之外还会顺带将ht[0]上 rehashidx索引上所有的键值对rehash到ht[1]上,rehash的工作完成后会将rehashidx的值加1

  • 随着字典的操作,ht[0]上的所有键值全部都rehash到ht[1]上时,程序会将rehashidx的值设为-1 ,表示rehash操作已经完成

在渐进式rehash的过程中,redis字典依然是可以进行增删改查的操作, 其中增加元素的时候会将元素直接保存到ht[1]中, 而删除,查找,更新的操作会在两个哈希表中进行, 查找时会先在ht[0]中进行查找,然后会在ht[1]中进行查找。以上措施可以保证ht[0]中的元素只会减少,最终变成空表。

总结

Redis字典和Java中的HashMap的相似点和不同。

相似之处:

  1. 键值对存储:Redis 字典和 Java 的 HashMap 都是键值对存储的数据结构,它们可以通过键来快速查找对应的值。

  2. 高效的查找:Redis 字典和 Java 的 HashMap 都使用了哈希表来实现,因此在查找操作上具有高效性能。

  3. Redis 字典使用的时哈希表作为底层,并且每个字典维护了两个哈希表,ht[0] 时主要使用的哈希表,而ht[1] 是在rehash过程是才会使用到的表。

  4. 哈希表的底层同样是使用了数组 + 链表的结构, 与Java 中HashMap 相似,只不过Java8 以后增加了红黑树,在特定情况下会替换链表。

不同之处:

  1. 哈希表增加元素遇到哈希冲突是会将新添加的元素放到链表头,而Java HashMap会将其放到链表尾,

  2. 扩容过程中redis的字典是渐进式扩容,扩容期间还是可以进行操作的,而Java的HashMap扩容需要一次性完成。

  3. 存储方式:Redis 字典是一种基于内存的数据结构,用于在内存中存储键值对。而 Java 的 HashMap 可以在内存中存储,也可以持久化到磁盘上。

  4. 分布式支持:Redis 是一种分布式数据库,可以在多台服务器上进行数据共享和存储。而 Java 的 HashMap 只能在单个 JVM 中使用。

  5. 数据类型:Redis 字典可以存储多种数据类型,如字符串、列表、集合等,而 Java 的 HashMap 只能存储对象类型。

  6. 持久化:Redis 字典可以将数据持久化到磁盘上,以便在重启后恢复数据。而 Java 的 HashMap 需要自己实现数据的序列化和反序列化来实现持久化。

  7. 并发性:Redis 字典是线程安全的,可以支持多个客户端并发访问。而 Java 的 HashMap 在多线程环境下需要进行额外的同步处理才能保证线程安全。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/750781.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

使用IDEA工具debug java annotation processors

最近看Spring提供的自动生成spring-configuration-metadata.json文件的组件。组件依赖 <dependency><groupId>org.springframework.boot</groupId><artifactId>spring-boot-configuration-processor</artifactId><optional>true</opti…

IO线程NO

在处理问题&#xff1a; Got fatal error 1236 from master when reading data from binary log: Could not find first log file name in binary log index file 好翻译过来就是&#xff1a; 从二进制日志读取数据时&#xff0c;从主服务器收到致命错误 1236&#xff1a;“无法…

opencv-06 使用numpy.array 操作图片像素值

opencv-06 使用numpy.array 操作图片像素值 **1&#xff0e;二值图像及灰度图像****利用item 读取某一个像素值****利用itemset 修改像素值****彩色图像numpy.arry 像素值操作** numpy.array 提供了 item()和 itemset()函数来访问和修改像素值&#xff0c;而且这两个函数都是经…

与时代并进,轻创时代愿做“Ai数字人产业的导向标”

近年来&#xff0c;随着人工智能技术的飞速发展&#xff0c;越来越多的企业开始关注并寻求AI数字人的解决方案&#xff0c;以提升业务效率和创造竞争优势。在这个激烈竞争的市场中&#xff0c;轻创时代作为行业黑马出现在人们视野中&#xff0c;以卓越的创新能力立志成为中小型…

【剑指offer】19. 链表中倒数最后k个结点(java)

文章目录 链表中倒数最后k个结点描述示例1示例2思路完整代码 链表中倒数最后k个结点 描述 输入一个长度为 n 的链表&#xff0c;设链表中的元素的值为 ai &#xff0c;返回该链表中倒数第k个节点。 如果该链表长度小于k&#xff0c;请返回一个长度为 0 的链表。 数据范围&a…

【软件测试】在Windows环境安装Docker(详细步骤)

目录&#xff1a;导读 前言一、Python编程入门到精通二、接口自动化项目实战三、Web自动化项目实战四、App自动化项目实战五、一线大厂简历六、测试开发DevOps体系七、常用自动化测试工具八、JMeter性能测试九、总结&#xff08;尾部小惊喜&#xff09; 前言 下载和安装 1、地…

免费内网穿透方案twingate搭建,适用pve,exsi等虚拟机访问场景

最近学习devops环境搭建&#xff0c;其中需要安装很多中间件和虚拟机&#xff0c;之前黑裙和pve都用的zerotier,可以点对点通信&#xff0c;但是机器多了就要一台一台去部署比较费力&#xff0c;而且在使用过程中发现&#xff0c;pve的容器和pve宿主机的出口IP是一样的&#xf…

聊聊微服务 架构思想

用了好多年微服务架构了&#xff0c;我经常会反思&#xff0c;这个项目为啥用微服务&#xff1f;真的能帮我们解决一些痛点吗&#xff1f;这个项目有必要用微服务吗&#xff1f;这个项目体现出微服务的价值了吗&#xff1f; 我是从2017年开始入手微服务&#xff0c;距今已经五六…

从小白到大神之路之学习运维第59天--------inotify+rsync同步和实时同步(单台同步和多台同步)

第三阶段基础 时 间&#xff1a;2023年7月13日 参加人&#xff1a;全班人员 内 容&#xff1a; inotifyrsync同步和实时同步 目录 一、rsync远程同步 二、源端到发起端同步 安装部署&#xff1a; 源端&#xff08;服务端&#xff09;&#xff1a; &#xff08;单台…

ROS安装注意事项

输入roscore报错&#xff1a;"roscore" not found 输入 sudo apt install ros-​melodi​c-roslaunch​

概率论的学习和整理17:EXCEL里直接对应的分布公式计算概率

1EXCEL计算这些特殊分布的方差 1.1 用原始的概率&#xff0c;期望和方差的方法 虽然计算概率&#xff0c;需要用对应分布的公式P(xn) 想了解的随机变量是总次数n&#xff0c;需要对应几何分布&#xff0c;负二项分布P(xk) 想了解的随机变量是成功次数k&#xff0c;需要对应超几…

【Spring】注解读取和存储Bean对象(下)

三、Spring 获取 bean 对象 获取 bean 对象也叫 “对象装配”&#xff0c;“对象注入”&#xff0c; 意思就是把对象取出来放到某个类中。 对象装配&#xff08;对象注入&#xff09;的实现有以下三种方法&#xff1a; 1. 属性注入 2. 构造方法注入 3. Setter 注入 接下来…

【Unity面试篇】Unity 面试题总结甄选 |Unity进阶篇 | ❤️持续更新❤️

前言 关于Unity面试题相关的所有知识点&#xff1a;&#x1f431;‍&#x1f3cd;2023年Unity面试题大全&#xff0c;共十万字面试题总结【收藏一篇足够面试&#xff0c;持续更新】为了方便大家可以重点复习某个模块&#xff0c;所以将各方面的知识点进行了拆分并更新整理了新…

总结926

总结&#xff1a;今晚状态极佳&#xff0c;回去路上差点被宿管阿姨锁在楼下。之前每每学到晚上脑子都转不动了&#xff0c;不过今晚就像是适应了一样。这也说明&#xff0c;学习&#xff0c;是可以上瘾的。只要循序渐进&#xff0c;步步为营&#xff0c;就不断收获学习的乐趣。…

解决uniapp运行手机基座出现的问题

常见的问题&#xff1a;&#xff08;往往在更新编辑器版本后会出现以下问题&#xff09; 问题1.明明已经连接到手机&#xff0c;就是检测不到设备 问题2.同步资源失败&#xff0c;未得到同步资源的授权 解决办法汇总 问题1解决办法&#xff1a; 方法一&#xff1a;进入HBuild…

关系型数据库范式

范式 前置知识第一范式&#xff08;1NF&#xff09;第二范式&#xff08;2NF&#xff09;第三范式&#xff08;3NF&#xff09;BC范式&#xff08;BCNF&#xff09;第四范式&#xff08;4NF&#xff09;范式化设计和反范式化设计的优缺点&#xff1f; 前置知识 超键(super key)…

mq延时队列使用

一、基本配置 导入依赖 <!--高级消息队列协议amqp--><dependency><groupId>org.springframework.boot</groupId><artifactId>spring-boot-starter-amqp</artifactId></dependency>application.yml配置 #rabbitmqrabbitmq:host: 192…

02 半同步半反应堆线程池

服务器编程基本框架 主要由I/O单元&#xff0c;逻辑单元和网络存储单元组成&#xff0c;其中每个单元之间通过请求队列进行通信&#xff0c;从而协同完成任务。 其中I/O单元用于处理客户端连接&#xff0c;读写网络数据&#xff1b;逻辑单元用于处理业务逻辑的线程&#xff1b…

ES7~ES13新特性(二)

1 ES7新增特性解析 2 ES8新增特性解析 3 ES10新增特性解析 4 ES11新增特性解析 5 ES12新增特性解析 6 ES13新增特性解析 ES8-对象相关的属性 ---entries的使用 const obj {name: "why",age: 18,height: 1.88,address: "广州市"}// 1.获取所有的keyco…

【NLP】Transformer模型原理(2)

接上文 【NLP】Transformer模型原理(1) 六、零层的transformer 观看涵盖与本节类似内容的视频:0 层理论 在进入更复杂的模型之前,简要考虑一下“零层”变压器很有用。这样的模型获取一个令牌,嵌入它,解嵌它以生成预测下一个令牌的对数: ​