Redis主从和哨兵

news2024/12/26 23:07:35

目录

开启主从关系(两种)

 数据同步原理

全量同步

增量同步

哨兵的作用和原理

服务状态监控

 故障转移步骤


开启主从关系(两种)

修改配置文件(永久生效):

        在redis.conf中添加一行配置:slaveof  <masterip>  <masterport>

使用redis-cli客户端连接到redis服务,执行slaveof命令(重启后失效):

        slaveof  <masterip> <masterport>

注意:在5.0后新增命令replicaof,与salveof效果一致。

步骤:

先进入客户端7001:redis-cli -p 7002  

执行 :SLAVEOF  ip  端口号(SLAVEOF  192.168

150..101  7001)表示 7002的服务是7001的从节点

之后在主节点上可以进行写,从节点也可以拿到值,完成了主从数据同步。但如果在从节点上写,会报错,天然实现读写分离。

 数据同步原理

master判断slave是不是第一次来同步数据,用到两个概念:

Replication id:简称replid,是数据集的标记,id一致则说明是同一数据集。每一个master都有一个唯一的replid,slave则会继承master节点的replid。

offset:偏移量,随着记录在repl_backlog中的数据增多而逐渐增大。slave完成同步时也会记录当前同步的offset。如果slave的offset小于master的offset,说明slave数据落后于master,需要更新。

因此主从第一次同步时全量同步时,需要判断是否是第一次:

在1.1请求数据同步时需要带上replid offset

1.2判断请求replid是否一致

全量同步

1.slave节点请求增量同步

2.master节点判断replid,发现不一致,拒绝增量同步

3.master将完整内存数据生成RDB,发送RDB到slave

4.slave清空本地数据,加载master的RDB

5.master将RDB期间的命令记录在repl——baklog,并持续将log中的命令发送给slave

6.slave执行接收到命令,保持与master之间的同步。

 

增量同步

如果slave重启后同步,则执行增量同步 

由于repl——baklog大小有上限,写满后会覆盖最早的数据。如果slave断开时间过久,导致尚未备份的数据被覆盖,则无法基于log做增量同步,只能再次全量同步。

主同步优化:

  • 在master中配置repl-diskless-sync yes 启用无磁盘复制,避免全量同步时的磁盘IO(直接写入网络,前提网络需要很快);
  • Redis节点上的内存占用不要太大,发现slave宕机时尽快实现故障恢复,尽可能避免全量同步。
  • 适当提高repl——baklog大小,发现slave宕机时尽快实现故障恢复,尽可能避免全量同步。
  • 限制一个master上的slave节点数量,如果实在时太多slave,则可以采用主-从-从链式结构,减少master压力。

全量同步和增量同步的区别:

全量同步:需要一次RDB文件生成和传输,将RDB文件传输给slave。后续命令记录在repl_baklog,逐个发送给slave。

增量同步:slave提交自己的offset到master,master获取repl_baklog中从offset之后的命令给slave。

何时执行全量同步?

slave节点第一次连接master节点时

slave节点断开时间太久,repl_baklog中的offset已经被覆盖时。

什么时候执行增量同步?

slave节点断开又恢复,并在repl_baklog中能找到offset时。

哨兵的作用和原理

 Redis提供了哨兵(Sentinel)机制来实现主从集群的自动故障恢复。

哨兵的作用有如下几个:

监控:Sentinel会不断检查master和slave是否按预期工作。

自动故障恢复:如果master故障,Sentinel会将一个slave提升为master。当故障实例恢复后也以新的master为主

通知:Sentinel充当Redis客户端的服务发现来源,当集群发生故障转移时,会将最新信息推送给redis的客户端。

服务状态监控

Sentinel基于心跳机制检测服务状态,每隔1秒向集群的每个实例发送ping命令:

主观下线:如果某sentinel节点发现某实例未在规定时间相应,则认为该实例主管下线。

客观下线:若超过指定数量的sentinel都认为 该实例主观下线,则该实例客观下线。quorum值最好超过Sentinel实例数量的一半。 

 故障转移步骤

(选举新的master)

当发现master故障,sentinel需要再salve中选择一个作为新的master,选择依据:

首先会判断slave节点与master节点断开时间长短,如果超过指定值(down-after-millisecon*10)则会排除该slave节点

然后判断slave节点的slave-priority值,越小优先级越高,如果是0则永不参与选举

如果slave-prority一样,则判断slave节点的offset值,越大说明数据越新,优先级越高

最后是判断slave节点的,当做故障节点恢复后会自动成为新的master的slave节点

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/2107722.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

从PDF到CAD:四大必备转换工具推荐!

无论是建筑设计师还是机械工程师&#xff0c;都面临着将旧图纸或扫描件转换成可编辑CAD文件的任务。这不仅是为了提高工作效率&#xff0c;更是为了适应数字化转型的大趋势。今天&#xff0c;我们就来探索几款高效且用户友好的解决方案&#xff01; 福昕PDF转换大师&#xff0…

vue3 antdv3 TypeError: date1.isAfter is not a function的解决

1、先上个报错的图&#xff1a; 2、这个一看是因为date报错的问题&#xff0c;这里面用了TimeRangePicker. const TimeRangePicker TimePicker.TimeRangePicker; import dayjs, { Dayjs } from dayjs; let time1 [dayjs(dayjs(new Date()).format(YYYY-MM-DD) record.…

conda换源是什么?

换源对于我们在国内的python使用者来说是非常有必要的&#xff0c;之前讲了pip如何换源。 pip更换为国内镜像源的步骤&#xff0c;为什么要更换镜像源 那现在讲一下conda如何换源。 conda换源&#xff08;清华源&#xff09; 有时候&#xff0c;conda虽然和pip共用一个本地…

Stable Diffusion抠图插件爬坑经历,StableDiffusion实操案例(附整合资料)

今天给大家分享使用后期处理插件stable-diffusion-webui-rembg实现抠图功能。 &#x1f449;AI绘画必备工具&#x1f448; 温馨提示&#xff1a;篇幅有限&#xff0c;已打包文件夹&#xff0c;获取方式在&#xff1a;文末 &#x1f449;AI绘画基础速成进阶使用教程&#x1f…

Synchronized、Reetrantlock

一、线程安全问题 多线程操作共享变量&#xff0c;由于该共享变量不是立刻可见的&#xff0c;读写不具备原子性&#xff0c;所以存在线程安全问题 二、售票案例 模拟售票案例&#xff0c;库存有10张票&#xff0c;有3个窗口(3个子线程)分别去卖&#xff0c;直到库存为0&#…

室内导航定位系统在医院的应用与部署

随着医疗技术的飞速发展&#xff0c;医院规模日益扩大&#xff0c;科室布局日趋复杂&#xff0c;患者及家属在寻找目标科室、病房或检查室时常常感到迷茫。为解决这一问题&#xff0c;室内导航定位系统应运而生&#xff0c;并逐渐成为现代医院智慧化建设的重要组成部分。接下来…

vue3 VueUse useElementVisibility 来监听某一个元素或者div是否在当前视口viewport中可见。

1、先上一个图&#xff1a; 2、安装vueuse/core pnpm add vueuse/core 3、新建一个组件&#xff1a; <script setup lang"ts"> import { ref, watch } from "vue"; import { useElementVisibility } from "vueuse/core";const target re…

AI短剧时代来临,用ai生成短剧的工具?AI文字生成短视频工具系统搭建开发,AI前景趋势怎么样?

前言&#xff1a; AI短剧是近期来随着人工智能技术的发展而兴起的一种新型影视内容形式。它利用AI技术&#xff0c;如AIGC&#xff08;生成式人工智能&#xff09;等&#xff0c;进行剧本创作、角色设计、场景构建、特效制作等&#xff0c;从而创作出全新的短剧作品。 一、AI…

Depop被封原因:IP禁令后如何重新创建账户?

Depop 是一个受欢迎的在线市场&#xff0c;帮助用户在全球范围内买卖服装、时尚物品和其他配饰。然而&#xff0c;与其他在线平台一样&#xff0c;Depop 有每个用户必须遵守的准则和规则&#xff0c;以确保市场安全公平。其中一条规则是&#xff0c;您不得拥有多个帐户&#xf…

免费分享:2020年全国道路网(分级)矢量数据

数据详情 全国道路网&#xff08;分级&#xff09;矢量数据 数据属性 数据名称&#xff1a;2020年全国道路网&#xff08;分级&#xff09;矢量数据 道路类型分类&#xff1a;高速、国道、省道、铁路、县道、乡道 道路级别&#xff1a;一级、二级、三级、四级 空间位置&am…

2024 年高教社杯全国大学生数学建模竞赛题目-B 题 生产过程中的决策问题

某企业生产某种畅销的电子产品&#xff0c;需要分别购买两种零配件&#xff08;零配件 1 和零配件 2&#xff09;&#xff0c; 在企业将两个零配件装配成成品。在装配的成品中&#xff0c;只要其中一个零配件不合格&#xff0c;则成品一 定不合格&#xff1b;如果两个零配件均合…

代码随想录 刷题记录-28 图论 (5)最短路径

一、dijkstra&#xff08;朴素版&#xff09;精讲 47. 参加科学大会 思路 本题就是求最短路&#xff0c;最短路是图论中的经典问题即&#xff1a;给出一个有向图&#xff0c;一个起点&#xff0c;一个终点&#xff0c;问起点到终点的最短路径。 接下来讲解最短路算法中的 d…

校园失物招领系统小程序的设计

管理员账户功能包括&#xff1a;系统首页&#xff0c;个人中心&#xff0c;用户管理&#xff0c;发布人管理&#xff0c;物品类别管理&#xff0c;失物招领管理&#xff0c;寻物启事管理&#xff0c;认领认证管理&#xff0c;系统管理 微信端账号功能包括&#xff1a;系统首页…

基于yolov8的西红柿缺陷检测系统python源码+onnx模型+评估指标曲线+精美GUI界面

【算法介绍】 基于YOLOv8的西红柿缺陷检测系统是一个利用深度学习技术的创新项目&#xff0c;旨在通过自动化和智能化的方式提高西红柿缺陷检测的准确性和效率。该系统利用YOLOv8目标检测算法&#xff0c;该算法以其高效性和准确性在目标检测领域表现出色。YOLOv8不仅继承了YO…

OpenSCAD 基础教程

OpenSCAD 基础教程 文章目录 OpenSCAD 基础教程1. 引言2. 安装与设置3. OpenSCAD 基本概念与语法3.1 基础形状3.2 变换操作3.4 布尔运算3.4 控制流3.5 特殊功能 4. 实践案例&#xff1a;创建一个简单的机械部件5. 高级技巧6. 导出与3D打印7. 常见问题与解决方案8. 结语 1. 引言…

langchain 《斗破苍穹》智谱 RAG 问题搜索

目录 代码 项目介绍 模型对比实验 分块方法对比 检索方法对比 结果 10条问题 15条问题 局限性 代码 https://github.com/5zjk5/prompt-engineering/tree/master 项目介绍 《斗破苍穹》小说 RAG 问答&#xff0c;爬虫爬取整部小说章节&#xff0c;并分别保存到不同的…

传统CV算法——图像特征算法之斑点检测算法

文章目录 3. 斑点检测3.1 斑点的理解3.1.1 斑点定义3.1.2 斑点检测 3.2斑点检测基本原理3.3LoG计算流程及原理1. 高斯函数2. 拉普拉斯算子3. 组合高斯和平滑4. 计算 LoG4.1. 一阶导数4.2. 二阶导数4.3. 组合二阶导数 5. LoG 的特性6.多尺度检测 3.4 DOG3.4.1 DoG 的基本原理3.4…

低通滤波函数实现

在做的项目中需要通过PWM驱动IGBT来控制负载功率&#xff0c;如果PWM频率很高&#xff0c;电流采样基本不受影响。但是IGBT的开关频率高会引起更多的开关损耗&#xff0c;所以降低了PWM频率&#xff0c;但此时电流会是接近于PWM信号的波形&#xff0c;无法准确采集。所以硬件上…

读取、写入、生成txt文本文档详解——C#学习笔记

一、4中写入文本的方式&#xff1a; //①表示清空 txt StreamWriter mytxt1 new StreamWriter("D:\\1清空.txt"); string t1 ""; mytxt1.Write(t1); mytxt1.Close(); //②表示向txt写入文本 StreamWriter mytxt2 new StreamWriter("D:…

用HTML写一个动态的的电子相册实战详细案例

效果展示&#xff1a;&#x1f447; 详细代码&#xff1a; 1、新建一个.html文件 2、然后将下面的内容复制到 动态相册.html里面 <!DOCTYPE html> <html> <head><title>图片轮播效果</title><style>.container {position: relative;wi…