【Redis笔记03】Redis运行环境之Cluster集群模式

news2024/11/22 12:11:24

这篇文章,主要介绍Redis运行环境之Cluster集群模式。

目录

一、Cluster集群模式

1.1、集群模式原理

(1)普通集群

(2)什么是分片???

(3)如何分片存储???

1.2、集群环境搭建

(1)基础环境

(2)创建配置文件

(3)启动集群结点实例

(4)关联集群结点

(5)测试集群


一、Cluster集群模式

前面几篇文章介绍了Redis如何搭建主从模式、Sentinel哨兵模式,主从模式解决了Redis的读写能力,采用读写分离的策略提高了redis服务的性能,但是它不能解决高可用性;Sentinel哨兵模式解决了主从模式中的高可用性问题;但是,这两种方式都不能解决数据的冗余问题,而redis集群模式则既可以实现高可用性,又可以解决数据的冗余问题。

1.1、集群模式原理

(1)普通集群

最简单的集群模式,就是将所有的redis结点互相连接起来,这样即使其中任意一个结点发生故障,也不会导致整个服务不可用,大致结构如下所示:

这种模式虽然可以解决高可用性,但是这种模式会导致数据的冗余,什么意思呢???也就是说,客户端保存数据到任意一台redis结点,其他的redis结点都将进行数据的同步,这样整个redis集群中每一台都将保存着相同的一份数据,n个结点就会保存n份数据。

redis中的集群不是采用这种模式,而是采用的了分片集群的思想。

(2)什么是分片???

分片是指:将数据拆分成n份,然后将每一份数据分散的保存到每一台redis结点服务中,这样就可以大大提高redis结点保存更多的数据信息,并且也不会存在冗余的数据。

  • 举个例子:
  • 假设现在有三条数据,A,B,C;集群中存在三个结点AA、BB、CC;分片是指将A数据存储在AA结点,数据B存储在BB结点上面,C数据存储在CC结点上,这就是数据分片存储的思想。

(3)如何分片存储???

既然要将数据分片存储到不同的redis结点里面,那就需要有一个规则,这个规则要知道如何将某一条数据保存到哪一个redis结点里面。Redis中采用的是【哈希插槽】的思想,它是将整个redis集群分为16384个插槽,然后根据集群中redis结点的数量,将这些插槽平均的分配给每一个结点。

假设,现在有三个结点:A、B、C,总共 16384 个插槽,所以平均分配如下所示:

  • A 结点将管理:0 - 5500 号插槽。
  • B 结点将管理:5501 - 11000 号插槽。
  • C 结点将管理:11001 - 16384 号插槽。

这里只是将每一个redis结点管理哪些插槽指定好了,但是还不知道怎么把redis数据映射到哪个插槽上面。Redis是采用的CRC16算法,对key进行哈希操作,计算出对应的插槽位置,然后从本地维护的集群信息中找出这个插槽对应哪一台redis结点,将数据保存到这一台结点当中。

以上,就是redis集群模式大致的原理。

1.2、集群环境搭建

这里基于windows操作系统搭建一个redis集群模式,由于真正的集群模式都是部署在多台服务器上面,但是我这里只有一台电脑,所以就采用不同的端口来区分不同的redis结点。

(1)基础环境

这里就创建6台redis服务结点,端口和IP分别如下所示:

redis集群环境
配置文件名称IP地址端口
master-cluster16379127.0.0.116379
master-cluster16380127.0.0.116380
master-cluster16381127.0.0.116381
slave-cluster36379127.0.0.136379
slave-cluster36380127.0.0.136380
slave-cluster36381127.0.0.136381

(2)创建配置文件

创建上面6个集群结点的配置文件,内容如下所示:

# 启动端口
port 16379
# 开启后台启动模式,在linux下生效,windows下不生效
# daemonize yes
# 将当前redis实例作为集群结点启动
cluster-enabled yes
# 集群结点配置文件,每一个集群结点都必须有一个不同的配置文件名称
# 这个文件是redis主动生成的,不需要我们手动配置内容
cluster-config-file nodes-16379.conf
# 集群结点超时时间,单位是:毫秒(ms)
cluster-node-timeout 15000
  • 注意:6个集群结点的配置文件中,除了port端口号、集群结点cluster-config-file配置文件两个不同之外,其余的都相同。

需要注意的是,在启动redis实例之前,先把redis目录中的dump.rdb文件删掉,这样可以避免之前数据的干扰 (我搭建时候,因为没有删除dump.rdb文件,集群搭建失败了,删掉重新启动,发现成功了)。

(3)启动集群结点实例

配置文件创建好了之后,就可以启动每一台redis集群结点啦,打开CMD命令行窗口,依次执行下面命令即可启动服务。

redis-server.exe master-cluster16379.conf
redis-server.exe master-cluster16380.conf
redis-server.exe master-cluster16381.conf

redis-server.exe slave-cluster36379.conf
redis-server.exe slave-cluster36380.conf
redis-server.exe slave-cluster36381.conf

为了方便,我这里写了一个bat批处理命令,一起执行上面6个命令,命令如下所示:

@echo off
start cmd /k "redis-server.exe master-cluster16379.conf"
start cmd /k "redis-server.exe master-cluster16380.conf"
start cmd /k "redis-server.exe master-cluster16381.conf"
start cmd /k "redis-server.exe slave-cluster36379.conf"
start cmd /k "redis-server.exe slave-cluster36380.conf"
start cmd /k "redis-server.exe slave-cluster36381.conf"
pause

将上面的bat批处理代码保存到一个【.bat】结尾的文件,然后双击这个文件即可启动redis结点。

(4)关联集群结点

前面几个步骤已经启动好了redis集群结点,但是还没有关联起来,需要执行下面的命令。

redis-cli.exe --cluster create 127.0.0.1:16379 127.0.0.1:16380 127.0.0.1:16381 127.0.0.1:36379 127.0.0.1:36380 127.0.0.1:36381 --cluster-replicas 1

上面参数:--cluster-replicas 表示集群结点的从结点数量。 redis会根据你执行的命令中,哪些IP和端口的顺序,依次选择master结点,其余的结点就依次作为master结点的slave从结点。

  • 注意:执行上面关联集群结点的命令,redis会按照设置的slave从节点数量,计算主节点有多少个,然后从第一个IP地址开始将对应的【n】个结点作为master结点。

 

(5)测试集群

三种集群结点,随便连接哪一个都可以,为了测试集群是否搭建成功,我们可以连接一个结点,保存一些数据。 然后连接另一个结点,查询刚刚保存的数据,看是否能够查询出数据,如果能够查出,则表示集群搭建成功。

redis-cli.exe -c -p 127.0.0.1 -p 16379
  • 注意:客户端连接集群结点的时候,需要加上【-c】属性,c是cluster集群的缩写,这个属性表示采用集群的方式连接结点。

到此,Redis中的集群模式就介绍完啦。

综上,这篇文章结束了,主要介绍Redis运行环境之Cluster集群模式【配置文件下载】。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/425763.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

基于springboot的音乐网站的设计与实现(带论文)

项目描述 临近学期结束,还是毕业设计,你还在做java程序网络编程,期末作业,老师的作业要求觉得大了吗?不知道毕业设计该怎么办?网页功能的数量是否太多?没有合适的类型或系统?等等。这里根据疫情当下,你想解决的问…

【OCR】CTC loss原理

1 CTC loss出现的背景 在图像文本识别、语言识别的应用中,所面临的一个问题是神经网络输出与ground truth的长度不一致,这样一来,loss就会很难计算,举个例子来讲,如果网络的输出是”-sst-aa-tt-e’, 而其ground truth…

JVM:并发的可达性分析

当前主流编程语言的垃圾收集器基本上都是依靠可达性分析算法来判定对象是否存活的,可达性分析算法理论上要求全过程都基于一个能保障一致性的快照中才能够进行分析,这意味着必须全程冻结用户线程的运行。 在根节点枚举这个步骤中,由于 GC Ro…

0303Kruskal算法和小结-最小生成树-图-数据结构和算法(Java)

1 算法概述 定义。按照边的权重顺序(从小到大),将边加入最小生成树中。加入的边不会与已经加入的边构成环,知道树中含有V-1条边为主。这些黑色的边逐渐由一片森林合并为一棵树,也就是最小生成树。这种计算方法被称为Kr…

Redis Lua沙盒绕过命令执行(CVE-2022-0543)

一、描述 影响范围:Debian系得linux发行版本Ubuntu Debian系得linux发行版本 其并非Redis本身漏洞,形成原因在于系统补丁加载了一些redis源码注释了的代码 揭露时间:2022.3.8 二、原理 redis在用户连接后可以通过eval命令执行Lua脚本&#x…

GAN网络系列博客(三):不受坐标限制的GAN(StyleGAN3)

目录 1. 概述 2. 连续信号分析 2.1 等变网络层 3. 具体实现 3.1 傅里叶特征和基础简化 3.2 根据连续插值进行的步骤重建 4.实验 总结 Reference 关于StyleGAN系列博客的收尾之作,StyleGAN3已经鸽了太久了。说实话,前两篇StyleGAN说的什么内容&#xff0…

Web 攻防之业务安全:账号安全案例总结.

Web 攻防之业务安全:账号安全案例总结 业务安全是指保护业务系统免受安全威胁的措施或手段。广义的业务安全应包括业务运行的软硬件平台(操作系统、数据库,中间件等)、业务系统自身(软件或设备)、业务所提供…

[ 应急响应篇基础 ] 日志分析工具Log Parser配合login工具使用详解(附安装教程)

🍬 博主介绍 👨‍🎓 博主介绍:大家好,我是 _PowerShell ,很高兴认识大家~ ✨主攻领域:【渗透领域】【数据通信】 【通讯安全】 【web安全】【面试分析】 🎉点赞➕评论➕收藏 养成习…

HCIP-6.5BGP路由聚合原理及配置

HCIP-6.5BGP路由聚合原理及配置1、BGP路由聚合原理1.1、自动汇总1.2、手动聚合1.2.1、利用静态路由进行聚合1.2.2、BGP的专有工具Aggregate1、BGP路由聚合原理 在实际运行的网络中,BGP路由表十分庞大,对于设备而言是很大的负担,同时使发生路…

Flutter Flex(Row Column,Expanded, Stack) 组件

前言 这个Flex 继承自 MultiChildRenderObjectWidget,所以是多子布局组件 class Flex extends MultiChildRenderObjectWidget {} Flex 的子组件就是Row 和 Column , 之间的区别就是Flex 的 direction 设置不同。 它有两个轴,一个是MainAxis 还有一个是交…

ubuntu下Thrift安装

thrift是一种常用rpc框架,工作中经常会用到,本文记录一下其安装过程。 目录 1.下载软件包 1.1thrift下载 1.2libevent下载 1.3boost下载 2.安装(注意步骤) 2.1安装libevent 2.2安装boost 2.3安装与Python2.7版本对应的py…

Vue+element Upload利用http-request实现第三方地址图片上传

vue第三方地址图片上传后端图片上传接口开发postman测试图片上传 Vue element (el-upload)中的:http-request图片上传java后端上传接口,利用OSS存储图片postman测试图片上传功能及方法 Vueelement Upload利用http-request实现第三方地址图片上传vue第三方地址图片上…

《花雕学AI》ChatGPT跟人类的思考方式有什么不同?

一、ChatGPT是一个基于GPT-3.5的对话语言模型,它可以根据用户的输入生成多轮对话,也可以生成文本、代码、音乐等内容。ChatGPT的思考方式是利用大量的数据和强大的算力来学习语言的联合概率分布,从而能够根据上下文和目标生成合理和有趣的回复…

python开发岗位需求分析,来看看它是什么一个情况吧

前言 嗨喽~大家好呀,这里是魔王呐 ❤ ~! 1.导入模块 import pandas as pd from pyecharts.charts import * from pyecharts import options as opts import matplotlib.pyplot as plt plt.rcParams[font.sans-serif][SimHei] plt.rcParams[axes.unicode_minus]Fal…

WRF模式与Python融合技术在多领域中的应用及精美绘图

当今从事气象及其周边相关领域的人员,常会涉及气象数值模式及其数据处理,无论是作为业务预报的手段、还是作为科研工具,掌握气象数值模式与高效前后处理语言是一件非常重要的技能。WRF作为中尺度气象数值模式的佼佼者,模式功能齐全…

目标检测算法——YOLOv5/v7/v8改进结合即插即用的动态卷积ODConv(小目标涨点神器)

&#x1f496;&#x1f496;>>>加勒比海带&#xff0c;QQ2479200884<<<&#x1f496;&#x1f496; &#x1f340;&#x1f340;>>>【YOLO魔法搭配&论文投稿咨询】<<<&#x1f340;&#x1f340; ✨✨>>>学习交流 | 温澜潮…

JS遍历数组里数组下的对象,根据数组中对象的某些值,组合成新的数组对象

前言: 大部分后端返回给前端的数据,是json形式的。里边包含了响应码,响应信息,有些还会返回数组对象等。现在有一个业务场景,我调用明细查询接口,返回的数据是一个对象数组的形式,但是我只需要对象中的某些属性值。这个时候我就需要想办法提取我所需要的值,然后组合成一…

吐血奉献精心整理的一大波数据集

80开源数据集资源汇总&#xff08;包含目标检测、医学影像、关键点检测、工业检测等方向&#xff09; 数据集下载汇总链接&#xff1a;https://www.cvmart.net/dataSets数据集将会不断更新&#xff0c;欢迎大家持续关注&#xff01; 小目标检测 AI-TOD航空图像数据集 数据集…

一例H-worm vbs脚本分析

样本的基本信息 MD5: c750a5bb8d9aa5a58c27956b897cf102 SHA1: e14994b9e32a3e267947cac36fb3036d9d22be21 SHA256: 1eb712d4976babf7c8cd0b34015c2701bc5040420e688911e6614b278cc82a42 SHA512: b1921c1dc7e8cf075882755be48c0d9636858cd7913188cb6c9ca6e7e741f049c143a79c683…

有哪些比较不错的AI绘画网站?

AI绘画最近非常流行。目前&#xff0c;互联网上有许多主流的人工智能绘画网站&#xff0c;但你都知道吗&#xff1f; 如果您正在寻找一个基于最先进智能技术的人工智能绘画网站&#xff0c;并介绍五个智能、现实和高效于一体的人工智能绘画网站。 1.即时AI 即时AI绘画是指通…