Redis数据结构 — Dict

news2024/11/24 4:04:43

目录

Dict结构设计 — rehash

rehash触发机制

Dict扩容

Dict收缩

​编辑渐进式 rehash


哈希表优点在于,它能以 O(1) 的复杂度快速查询数据。为解决哈希冲突,Redis 采用了「链式哈希」来解决哈希冲突,在不扩容哈希表的前提下,将具有相同哈希值的数据串起来,形成链接起,以便这些数据在表中仍然可以被查询到。

Dict结构设计 — rehash

在实际使用哈希表时,Redis 定义一个 dict 结构体里包含了两个哈希表(ht[2]),即rehashDict由三部分组成,分别是:哈希表(DictHashTable)、哈希节点(DictEntry)、字典(Dict)

问:rehash为什么用两个Dict结构
答:当触发rehash条件时,自动进行扩容或收缩

rehash触发机制

Dict在每次新增键值对时都会检查负载因子,对应于源码为【used / size】

满足以下两种情况时会触发哈希表扩容

  • 当负载因子大于等于 1 ,并且 Redis 没有在执行 bgsave 命令或者 bgrewiteaof 命令,也就是没有执行 RDB 快照或没有进行 AOF 重写的时候,就会进行 rehash 操作。
  • 当负载因子大于等于 5 时,此时说明哈希冲突非常严重了,不管有没有有在执行 RDB 快照或 AOF 重写,都会强制进行 rehash 操作。

满足以下情况时会触发哈希表收缩

  • 每次删除成功时,也会对负载因子做检查,当LoadFactor < 0.1 时,会做哈希收缩

Dict扩容

在正常服务请求阶段,当向Dict添加键值对时,Redis首先根据Key计算出hash值,然后利用hash值 & sizemask做与运算确定插入的索引位置(下标)<也是因为这个与运算,使得size必须是2的n次方>,都会写入到【哈希表 1】,此时的【哈希表 2 】并没有被分配空间。当触发rehash扩容条件时,触发rehash扩容,这个过程分为四步:

  • 给【哈希表 2 】分配空间,一般会比【哈希表 1】大 2 倍;
  • 将【哈希表 1】的数据重新做映射计算哈希值求下标,然后迁移到【哈希表 2 】中;
  • 迁移完成后,【哈希表 1】的空间会被释放,并把【哈希表 2 】赋值给【哈希表 1】
  • 然后给【哈希表 2 】初始化为一个空白的哈希表,为下次 rehash 做准备。

扩容源码片段:

Dict收缩

每次删除数据成功时,判断是否负载因子小于0.1,进行哈希表收缩。

渐进式 rehash

情景:如果【哈希表 1】的数据量非常大,那么在迁移至【哈希表 2 】的时候,因为会涉及大量的数据拷贝,此时可能会对 Redis 造成阻塞,无法服务其他请求。

为了避免 rehash 在数据迁移过程中,因拷贝数据的耗时,影响 Redis 性能的情况,所以 Redis 采用了渐进式 rehash,也就是将数据的迁移的工作不再是一次性迁移完成,而是分多次迁移。

渐进式 rehash 步骤如下:

  1. 【哈希表 2 】 分配空间;
    若是扩容,则新size为第一个大于等于(【哈希表 1】的used+1)的2的n次方<2的n次方与计算哈希表下标有关,上文有提>
    若是收缩,则新size为第一个大于等于(【哈希表 1】的used)的2的n次方<不能小于4>
  2. 在渐进式 rehash 进行期间,每次哈希表元素进行新增、删除、查找或者更新操作时,Redis 除了会执行对应的操作之外,还会顺序将「哈希表 1 」中索引位置上的所有 key-value 迁移到「哈希表 2」 上
  3. 随着处理客户端发起的哈希表操作请求数量越多,最终在某个时间点会把「哈希表 1 」的所有 key-value 迁移到「哈希表 2」,从而完成 rehash 操作

在渐进式 rehash的过程中,增删改查执行机制:

  • 查找、删除、修改一个 key 的值的话,先会在「哈希表 1」 里面进行操作,如果没找到,就会继续到哈希表 2 里面进行操作。
  • 新增一个 key-value 时,会被保存到「哈希表 2 」里面,而「哈希表 1」 则不再进行任何添加操作

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/754582.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

直播美颜SDK与智能美妆:技术融合的未来

对于许多直播主和观众来说&#xff0c;如何在直播中呈现最佳的外貌成为了一个重要问题。为了解决这个问题&#xff0c;直播美颜SDK与智能美妆技术的融合应运而生&#xff0c;为用户带来了前所未有的美妆体验。 简单来讲&#xff0c;直播美颜SDK可以理解为计算机视觉技术和人工…

WebDAV之π-Disk派盘 + Solid Explorer

Solid Explorer 支持WebDAV方式连接π-Disk派盘。 Solid Explorer 是一款非常优秀的 Android 文件管理器&#xff0c;Material Design 设计风格&#xff0c;双栏布局&#xff0c;可拖拽操作、支持 ROOT 权限、多媒体浏览器、压缩包支持&#xff0c;Chromecast 流支持等众多功…

AdsPower 的功能到底好不好用?一文详解,真实揭露

你一定听说过AdsPower、Multilogin、dolphin、vmlogin浏览器、紫鸟、悦互联等等这些常见的指纹浏览器软件吧&#xff01;其中&#xff0c;AdsPower浏览器作为一款跨境圈里的“明星指纹浏览器”&#xff0c;号称具备许多功能&#xff0c;这就让许多跨境人对这个浏览器充满好奇&a…

jdk11缺少jre的问题解决

问题&#xff1a;升级jdk的时候文件中缺少jre&#xff0c;导致项目启动报错 jdk11不在默认用户强制安装jre&#xff0c;所以jdk包中不在包含jre文件 解决步骤1&#xff1a;进入jdk安装包的根目录&#xff0c;输入cmd 解决步骤2&#xff1a;在cmd中输入以下命令 bin\jlink.e…

Jacoco代码覆盖率为0问题排查

目录 原因解决通过IDEA的TestMe重新生成测试类eclipse生成测试类JUnit Test Suite 其它查看覆盖率覆盖catch代码 我问GPT 整jacoco有意义嘛 前几天解决了无法生成jacoco.exec执行文件问题后&#xff0c;发现编写测试类好像无效&#xff0c;代码覆盖率全为0 原因 通过eclipse直…

谈一下开放电商数据接口的存在意义

随着互联网的迅速发展&#xff0c;电子商务&#xff08;E-commerce&#xff09;已经成为了现代社会中不可或缺的一部分。人们越来越喜欢在网上购物&#xff0c;电商平台也开始成为许多商家扩大销售渠道的利器。而为了更好地满足用户需求和提升整个电商行业的效率&#xff0c;开…

《MySQL》索引

文章目录 前提知识索引定义和结构理解数据文件结构B树结构来存储数据的优势索引分类 索引操作拓展知识索引覆盖复合索引全文索引 前提知识 下面例子都以Innodb为例 数据是存储在磁盘上的&#xff0c;MySQL是一款专门管理数据的软件。既然MySQL要管理数据&#xff0c;而数据又在…

浮层展示信息位置处理

效果图 代码 <template><div><ul class"info-wrap"><liv-for"(item, index) in list":key"item.id"class"info-item"><div class"base-info"mouseenter"showDetailInfo($event, index)&qu…

【微信小程序-uniapp】CustomDialog 居中弹窗组件

1. 效果图 2. 组件完整代码 <template><uni-popup :ref="ref" type="center" @change

nginx的前端集成

对于springcloud项目&#xff0c;后端我们有很多的微服务&#xff0c;当然前端我们也可以有很多的小项目进行集成 前端项目部署思路 通过nginx来进行配置&#xff0c;功能如下 通过nginx的反向代理功能访问后台的网关资源 通过nginx的静态服务器功能访问前端静态页面 配置ng…

错过直播?快收藏详实回顾!Get「研发效能管理」7 步实践指南与案例剖析

目录 效能提升&#xff0c;无论企业规模大小&#xff0c;研发效能管理不可或缺 头部大厂 腰部厂商 中小型企业 研发效能管理 GDAI 模型&#xff0c;监管与迭代相辅相成&#xff0c;效能螺旋上升 研发效能管理 7 步走&#xff0c;明晰 6 大角色场景&#xff0c;有的放矢&a…

自动化测试面临的问题剖析

前面的文章为大家介绍了我们内部在使用的一些自动化框架&#xff0c;大家可以了解到我们使用的自动化测试框架太多。测试工程师就会面临这样的问题&#xff1a;到底应该选择哪个框架&#xff1f;应该选择哪种脚本语言&#xff1f;有什么办法能降低编写脚本的门槛&#xff1f;这…

攻防世界-Crypto-easy_ECC

题目描述&#xff1a;一道数学题 已知椭圆曲线加密Ep(a,b)参数为 p 15424654874903 a 16546484 b 4548674875 G(6478678675,5636379357093) 私钥为 k 546768 求公钥K(x,y) 1. 思路分析 这个没啥好说的&#xff0c;就是一道数学题&#xff0c;关键在于ECC算法的原…

安装部署rancher2.7.0,然后导入K8S集群,管理集群

1. 安装rancher2.7.0 docker run -d --name rancher --restartunless-stopped --privileged -p 80:80 -p 443:443 -v /var/lib/rancher:/var/lib/rancher/ -v /var/log/rancher/auditlog:/var/log/auditlog rancher/rancher:v2.7.02.浏览器登录 2.1 利用默认账号登…

中电金信:技术实践|异构数据库迁移之“痛”

导语&#xff1a; 近几年&#xff0c;国产化创新潮流席卷全国&#xff0c;异构数据库迁移成了不少同行、客户争相讨论的话题&#xff0c;大家或争论方案、或求解答疑、或讨论产品&#xff0c;总之问题林林总总&#xff0c;涉及的面还很多&#xff0c;笔者也在近期的几个项目中…

Java正则表达式简介及Jar包

Java提供了java.util.regex包&#xff0c;用于与正则表达式进行模式匹配。 Java正则表达式与Perl编程语言非常相似&#xff0c;非常容易学习。 正则表达式定义了字符串的模式。 正则表达式可以用来搜索、编辑或处理文本。 正则表达式并不仅限于某一种语言&#xff0c;但是在…

低代码技术:提高效率降低成本的全新选择

一、前言 企业想要独立的应用程序&#xff0c;开发者在寻求更快速、更高效、更灵活的开发方法&#xff0c;以适应快速变化的市场需求。在这个背景下&#xff0c;低代码技术以提高效率降低成本的方式走进人们视野&#xff0c;成为了一种全新的应用程序开发方式。 二、相比传统的…

刚体三维运动学【旋转矩阵】【欧拉角】【四元素】

一些概念 轴角法、旋转矩阵、欧拉角、四元数主要用于&#xff1a;向量的旋转、坐标系之间的转换、角位移的计算、方位的平滑插值计算。坐标系的旋转一共有三种表示方法&#xff1a;旋转矩阵、欧拉角和四元数。一般指地面系&#xff08;世界系&#xff09;和机体系之间的旋转关…

UE4.27 编译及打包HTML5相关资料

UE4.27 编译及打包HTML5相关资料 UE官方资料 https://docs.unrealengine.com/4.27/zh-CN/SharingAndReleasing/HTML5/GettingStarted/ B站视频资料 UE4.27可以打包HTML5啦 Github 中文文档 https://github.com/Xi3Chen/UE4.27PackingH5DDoc emsdk 交叉编译环境安装 Emscripte…

零售数字化转型如何破局?这篇文章全说清了!

“数字化转型”&#xff0c;一个老生常谈的话题。自19世纪互联网崭露头角&#xff0c;亚马逊和eBay等电商平台崛起&#xff0c;引领电子商务的发展。传统零售业开始意识到在线渠道的重要性&#xff0c;并纷纷推出自己的电子商务网站&#xff0c;从自此进入数字化转型的赛道当中…