REDIS Hash 槽 与 一致性hash

news2024/11/9 1:49:37

36b0ffd5ad019411007b408fa1894304.png

开头还是介绍一下群,如果感兴趣polardb ,mongodb ,mysql ,postgresql ,redis 等有问题,有需求都可以加群群内有各大数据库行业大咖,CTO,可以解决你的问题。加群请联系 liuaustin3 ,在新加的朋友会分到2群(共600人左右 1 + 2)。

在REDIS 的cluster中与标准的standalone Redis 比较的话,他属于一个分布式的数据库解决方案,通过他可以应用数据分区和 sharding,这里的分片意味着数据在多个REDIS 实例中共享。REDIS 在3.0引入了REDIS CLUSTER ,并且提供了数据的同步,复制,并且在部分节点DOWN 掉后提供可以持续访问的特性。

但是这并不是说REIDS 的CLUSTER 比REDIS 单机版本就要好,首先如果你使用了REDIS CLUSTER 你只能使用 0 库,而REDIS单机中的 0-15 库你是无法进行选择使用的。同时不少在REDIS 单机中可以使用的命令是无法在REDIS CLUSTER 中使用的,如 SELECT , MSET MGET 等,而这些都与今天要提到的 槽 ,SLOT 有关。

aa4189d2a293e54c5cb03060249e5fa9.png

Redis集群使用一种称为一致性哈希的复合分区形式,计算特定键应该分配给哪个Redis实例。这个概念在Redis集群中被称为哈希槽。密钥空间在集群中的不同主节点之间进行分区。它被分成16384个插槽,有效地设置了16384个主节点的集群大小的上限。哈希槽是应用于密钥的CRC-16哈希算法,然后使用16384计算模。

HASH_SLOT = CRC16(key) mod 16384

每个主节点都被分配了一个hash 槽的范围,每个键值都会落到对应的hash 槽的范围内,基本上,Redis选择16384个插槽,因为16384个消息只占用2k,而65535则需要8k。对于集群规模的设计考虑,集群最多支持1000个分片。16384是一个比较好的选择。需要保证在最大簇大小和槽位分布均匀的情况下,每个分片的平均槽位数不是太大。并且节点在增加和减少都不会影响正常的业务工作,槽位会重新计算到对应的 INSTANCE 中,重新分布。

1ce290d2d24992145bd771a293b184bb.png

而如果访问信息中,访问的键值不在当前的REDIS INSTANCE  中将重新定向到对应的正确的槽位的 REDIS INSTANCE 中。那么hash 槽在REDIS CLUSTER 上的应用是使用了一致性HASH 的方式来进行数据的            

hash 槽本身是REDIS 集群背后的管理 KEY的逻辑,一致性hash 是基于分布式数据库在数据传输中保证数据最终传输的数据一致性而制定的一种实现的方法。一致性hash 的算法主要的部分就是使用了 哈希函数来进行槽位中的键值的划分。

36b25f9623b2d585d4e6a4a8f01913b2.png

那么基于这样的算法,必然产生HASH 倾斜的情况,或者有概率发生HASH 倾斜,那么如果发生了HASH 倾斜怎么去消除所带来的访问热点的问题。

6875d9b61c58a2db20b98db757cba6f4.png

HASH 倾斜产生的问题

1   热点KEY ,在热点KEY 存在的REDIS INSTANCE 中会导致存储的这个节点的CPU 升高,影响该分片INSTANCE 中的其他KEY 的访问。

2  大多数的KEY 落入了某个REDIS INSTANCE 中,导致数据存储的不均衡

在这样的情况下,我们可以做的

1  提升某个INSTANCE REDIS 的硬件规格,提高性能应对

2  增加分片的节点,将数据尽量更加分散的打开进行处理

3  根据业务的使用REDIS 的情况,进行相关的使用REDIS 的方案的变化根本解决问题

1f3c3c4ca1045dd16a3e15762d098c1f.png

——————————————————————————————

本期咱们来说说什么是银耳奥迪,奥迪audi, 很多人看不起买奥迪的人,认为是买不起 奔驰宝马的那类人,嗯其实狭隘了。奥迪除了  A3 A4 A5 A6 A8 ,Q2 ,Q3 Q,5 Q7 , 其实还有一类 奥迪,你是买不起,你也开不起的,买不起是,开不起的原因是,你的心脏受得了受不了。

这类奥迪是银耳奥迪,这就是这种车明显的标记,两个后视镜的颜色是不跟随你的车的颜色变换的,颜色永远是银色,哪怕是你的车是黑色的,他的后视镜也是银色的。

这类车的尾标是 S3、S4、S5、S6、S7、S8、TTS、SQ5和SQ7,以及更贵的 西装暴徒  RS 3 RS 4 RS 5 RS 6 RS7 

需要注意的是,RS 系列根本不是奥迪一起生产,就是一款贴标车,他的生产单位是 quattro ,对就是那个大家都知道的 跨出哦,RS 系列的车是单独的公司 quattro,单独的生产线。 价格也是喜人的,大部分人只能看看就好。这些车的发动机 动辄就是 3.0T  ,4.0T

a0388dcf698fa84b8e68eae8be232265.png

84aa9a4e1b15f6e0e80bca37a596ee9b.png

此外,大众集团,有一个喜好,就是 瓦罐,瓦罐在 奥迪里面也有 疯狂的 RS4 Avant

e96cd4cade9ddf7969dba156a03f1ae9.png

大家熟悉的口头车型,如法拉利,兰博基尼,有时也会栽倒 AUDI 的手里,俗话说,屠牛宰马是奥迪,指的就是这类RS 车型。

为啥这么厉害,咱们来看看配置你就知道,普通的外观下,藏着一个个野兽。所以,现在你还觉得开奥迪 S  RS 系列的是买不起奔驰宝马的吗?笑话

fbe1e785b777c07f244441d770dab647.png

48094cfb1fcdcaf0b99b29d75fb5ed6c.png

629117a957113abd8a2a1890b9dc8879.png

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/411224.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

Spring boot+Vue3博客平台:文章发布与编辑功能的技术实现

本文将详细介绍如何实现一个博客平台中的文章发布与编辑功能,包括前端的Vue组件设计和后端的Spring Boot接口实现。在阅读本文后,您将了解如何设计和实现高效、易用的文章发布与编辑功能。 一、发布文章 设计思路 在设计文章发布功能时,我们…

vscode中调试rust程序

文章目录一、vscode运行和调式rust程序二、常见问题1.rust: Request textDocument/formatting failed.2.cargo命令3.使用rust-gdb调试rust程序4.cargo build太慢一、vscode运行和调式rust程序 环境:在WSL(ubuntu20.04)中使用vscode &#xf…

数据技术嘉年华星光璀璨,云和恩墨全栈数据技术能力闪耀会场

导语 2023年4月7-8日,由中国DBA联盟(ACDU)和墨天轮社区联合主办的第十二届『数据技术嘉年华』(DTC 2023)在北京成功举办。云和恩墨作为大会的协办方和深度参与者,以6场演讲2大展台全面呈现公司的全栈数据技…

几何算法——4.交线(intersection curve)的表达与参数化、微分性质

几何算法——4.曲面求交的交线(intersection curve)的表达与参数化、微分性质1 关于曲面求交的交线表达2 交线的微分性质3 交线的参数化4 修正弦长参数化的微分性质1 关于曲面求交的交线表达 两个曲面求交,比较经典的方法是用跟踪法&#xf…

wsl使用vscode搭建自己的MySQL

装wsl装MySQL装wsl 我已经装好了,就不说了 装MySQL 安装 MySQL 服务器:终端命令行输入sudo apt install mysql-server 安装完成后,MySQL 服务器会自动启动并在 Ubuntu 启动时启动。您可以使用以下命令检查 MySQL 服务器是否正在运行:sudo ser…

【三十天精通Vue 3】第六天 Vue 3 计算属性和监听器详解

✅创作者:陈书予 🎉个人主页:陈书予的个人主页 🍁陈书予的个人社区,欢迎你的加入: 陈书予的社区 🌟专栏地址: 三十天精通 Vue 3 文章目录引言一、Vue 3 计算属性概述1.1 计算属性的简介1.2 计算属性的分类…

第二十章 案例TodoList之动态数据

我们之前已经实现了静态的组件拆分,既然是静态说明数据就是死的,显然这不是我们需要的结果,之前我们学习了React组件,知道组件里面的状态数据驱动了页面的显示,每个组件都有属于自己的状态数据。接下来我们改造组件使得…

SAR ADC系列25:作业和上机实践

作业: 异步SAR逻辑中VALID信号如何产生?答:OUTP和OUTN与非。单纯通过减小“比较器环路”的延时(t1t22*t32*t4)的方式来提升ADC的转换速率可行吗?为什么?答:不可行,还要考虑CDAC建立的速度&…

【ARMv8 编程】A64 数据处理指令——位域字节操作指令

有些指令将字节、半字或字扩展到寄存器大小,可以是 X 或 W。这些指令存在于有符号(SXTB、SXTH、SXTW)和无符号(UXTB、UXTH)变体中,并且是适当的位域操作指令。 这些指令的有符号和无符号变体都将字节、半字…

【失业即将到来?】AI时代会带来失业潮吗?

文章目录前言一、全面拥抱AIGC二、AI正在取代这类行业总结前言 兄弟姐妹们啊,AI时代,说抛弃就抛弃,真的要失业了。 一、全面拥抱AIGC 蓝色光标全面暂停外包? 一份文件截图显示,中国知名4A广告公司,蓝色光…

汇编第二次上机实验(续第一次,字符串比较及双重循环)【嵌入式系统】

汇编第二次上机实验(续第一次,字符串比较及双重循环)【嵌入式系统】前言推荐说明汇编第二次上机实验(续第一次,字符串比较及双重循环)内容1 sort说明流程图代码编写结果分析2 string流程图代码编写结果分析…

Nginx的安装、反向代理、负载均衡及部署项目

Nginx 一、Nginx简介 Nginx称为:负载均衡器或 静态资源服务器:html,css,js,img ​ Nginx(发音为“engine X”)是俄罗斯人编写的十分轻量级的HTTP服务器,是一个高性能的HTTP和反向代理服务器,同时也是一个IMAP/POP3/SMTP 代理服务器。Nginx是由俄罗斯人 Igor Syso…

DOM(上)

DOM(文档对象模型):处理可扩展标记语言(HTML或XML)的标准编程接口,可以改变网页的内容、结构和样式。DOM树: …

大数据项目实战之数据仓库:电商数据仓库系统——第2章 数据仓库建模概述

第2章 数据仓库建模概述 2.1 数据仓库建模的意义 如果把数据看作图书馆里的书,我们希望看到它们在书架上分门别类地放置;如果把数据看作城市的建筑,我们希望城市规划布局合理;如果把数据看作电脑文件和文件夹,我们希…

CMake——从入门到百公里加速6.7s

目录 一、前言 二、HelloWorld 三、CMAKE 界面 3.1 gui正则表达式 3.2 GUI构建 四 关键字 4.1 add_library 4.2 add_subdirectory 4.3 add_executable 4.4 aux_source_directory 4.5 SET设置变量 4.6 INSTALL安装 4.7 ADD_LIBRARY 4.8 SET_TARGET_PROPERTIES 4.9…

[JavaEE]----Spring03

文章目录Spring_day031,AOP简介1.1 什么是AOP?1.2 AOP作用1.3 AOP核心概念2,AOP入门案例2.1 需求分析2.2 思路分析2.3 环境准备2.4 AOP实现步骤步骤1:添加依赖步骤2:定义接口与实现类步骤3:定义通知类和通知步骤4:定义切入点步骤5:制作切面步骤6:将通知…

测试-子查询及数据更新

测试-子查询及数据更新 目录测试-子查询及数据更新1、修改borrow表增加一列;修改日期数据(两条语句完成)题目代码题解2、 SQL更新:删除-删除“吴宾”的所有成绩记录题目代码3、SQL查询:查询没有被订购的商品题目代码4、…

CMake GUI工具使用 MinGW 64构建工程

系列文章目录 文章目录系列文章目录前言一、open Project是灰色?前言 CMake GUI 打开 CMake GUI。 在 “Where is the source code” 字段中,选择 Krita 源代码目录:E:/krita-dev/krita。 在 “Where to build the binaries” 字段中&#x…

9.Java面向对象----封装

Java面向对象—封装 面向对象简称 OO(Object Oriented),20 世纪 80 年代以后,有了面向对象分析(OOA)、 面向对象设计(OOD)、面向对象程序设计(OOP)等新的系统…

Python 小型项目大全 26~30

二十六、斐波那契 原文:http://inventwithpython.com/bigbookpython/project26.html 斐波那契数列是一个著名的数学模式,被认为是 13 世纪意大利数学家斐波那契的杰作(尽管其他人发现它的时间更早)。序列从 0 和 1 开始&#xff0…