搭建redis主从复制+哨兵高可用

news2024/11/14 6:39:17

  1. 从服务器连接主服务器,发送SYNC命令;
  2. 主服务器接收到SYNC命名后,开始执行BGSAVE命令生成RDB文件并使用缓冲区记录此后执行的所有写命令;
  3. 主服务器BGSAVE执行完后,向所有从服务器发送快照文件,并在发送期间继续记录被执行的写命令;
  4. 从服务器收到快照文件后丢弃所有旧数据,载入收到的快照;
  5. 主服务器快照发送完毕后开始向从服务器发送缓冲区中的写命令;
  6. 从服务器完成对快照的载入,开始接收命令请求,并执行来自主服务器缓冲区的写命令;(从服务器初始化完成)
  7. 主服务器每执行一个写命令就会向从服务器发送相同的写命令,从服务器接收并执行收到的写命令(从服务器初始化完成后的操作)

主从复制优缺点

优点:支持主从复制,主机会自动将数据同步到从机,可以进行读写分离

Slave同样可以接受其它Slaves的连接和同步请求,这样可以有效的分载Master的同步压力。

Master Server是以非阻塞的方式为Slaves提供服务。所以在Master-Slave同步期间,客户端仍然可以提交查询或修改请求。

Slave Server同样是以非阻塞的方式完成数据同步。在同步期间,如果有客户端提交查询请求,Redis则返回同步之前的数据

缺点:Redis不具备自动容错和恢复功能,主机从机的宕机都会导致前端部分读写请求失败,需要等待机器重启或者手动切换前端的IP才能恢复。

主机宕机,宕机前有部分数据未能及时同步到从机,切换IP后还会引入数据不一致的问题,降低了系统的可用性。

Redis较难支持在线扩容,在集群容量达到上限时在线扩容会变得很复杂

Master:192.168.184.128

Slave1:192.168.184.129

Slave2:192.168.184.130

1.三台服务器上分别安装redis

# cd /usr/local/soft

# tar -xvf redis-6.2.7.tar.gz

# yum -y install centos-release-scl

# yum -y install devtoolset-9-gcc devtoolset-9-gcc-c++ devtoolset-9-binutils

# yum -y install gcc binutils glibc glibc-kernheaders glibc-common glibc-devel cpp

# scl enable devtoolset-9 bash

# mv redis-6.2.7 /usr/local/redis

# cd /usr/local/redis/

# make MALLOC=libc

# make install                 #编译安装

# ln -s /usr/local/redis/src/redis-cli /usr/local/bin/

# ln -s /usr/local/redis/src/redis-server /usr/local/bin/

# ln -s /usr/local/redis/src/redis-sentinel /usr/local/bin/

2.修改redis配置文件

128上操作:

# vim /usr/local/redis/redis.conf    

bind 192.168.184.128           #默认ip为127.0.0.1 需要改为其他节点机器可访问的ip 否则创建集群时无法访问对应的端口,无法创建集群

daemonize    yes              #redis后台运行

129上操作:

# vim /usr/local/redis/redis.conf  

bind 192.168.184.129

daemonize    yes   

slaveof  192.168.184.128 6379               #配置所属主服务器ip和端口

slave-read-only yes                      #从服务器通常是只读

#masterauth 123456                     #配置所属主服务器的密码(主没有配置就不用添加了)

129上操作:

# vim /usr/local/redis/redis.conf  

bind 192.168.184.130

daemonize    yes   

slaveof  192.168.184.128 6379               #配置所属主服务器ip和端口

slave-read-only yes              #从服务器通常是只读

#masterauth 123456             #配置所属主服务器的密码(主没有配置就不用添加了)

3.三台分别启动redis,并验证主从复制

# redis-server /usr/local/redis/redis.conf

登录redis,查看当前集群状态

 # redis-cli -h 192.168.184.128 -p 6379

192.168.184.128:6379> info replication

 

并设置新key的值,查看从是否会同步

192.168.184.128:6379> set a 1

192.168.184.128:6379> get a

"1"

129上操作

# redis-cli -h 192.168.184.129 -p 6379

192.168.184.129:6379> info replication

192.168.184.129:6379> get a

"1"

如上所示,主从可正常同步;注意从节点只可读,不可写入数据。

4.添加哨兵,实现集群高可用

在 Redis 主从复制模式中,因为系统不具备自动恢复的功能,所以当主服务器(master)宕机后,需要手动把一台从服务器(slave)切换为主服务器。在这个过程中,不仅需要人为干预,而且还会造成一段时间内服务器处于不可用状态,同时数据安全性也得不到保障,因此主从模式的可用性较低,不适用于线上生产环境。
  Redis 官方推荐一种高可用方案,也就是 Redis Sentinel 哨兵模式,它弥补了主从模式的不足。Sentinel 通过监控的方式获取主机的工作状态是否正常,当主机发生故障时, Sentinel 会自动进行 Failover(即故障转移),并将其监控的从机提升主服务器(master),从而保证了系统的高可用性

三台服务器都执行以下操作

# mkdir /usr/local/redis/sentinel

# vim /usr/local/redis/sentinel.conf

        port 26379             #端口号

        protected-mode no         # 保护模式关闭,这样其他服务起就可以访问此台redis

        daemonize yes             # 哨兵模式是否后台启动,默认no,改为yes

        pidfile /var/run/redis-sentinel.pid

        logfile /usr/local/redis/sentinel/redis-sentinel.log          # log日志保存位置

        dir /usr/local/redis/sentinel            #工作目录

###核心配置

# 第三个参数:哨兵名字,可自行修改。(若修改了,那后面涉及到的都得同步)

# 第四个参数:master主机ip地址,第五个参数:redis端口号

# 第六个参数:哨兵的数量。比如2表示,当至少有2个哨兵发现master的redis挂了,那么就将此master标记为宕机节点。这个时候就会进行故障的转移,将其中的一个从节点变为master。

sentinel monitor mymaster 192.168.184.128 6379 2

#sentinel auth-pass mymaster 123456 # master中redis的密码

sentinel down-after-milliseconds mymaster 10000 #哨兵从master节点宕机后,等待多少时间(毫秒),认定master不可用,默认30s,这里为了测试,改成10s

sentinel parallel-syncs mymaster 1 #当替换主节点后,剩余从节点重新和新master做同步的并行数量,默认为 1

sentinel failover-timeout mymaster 180000 #主备切换的时间,若在3分钟内没有切换成功,换另一个从节点切换

启动各个节点的哨兵

# redis-sentinel /usr/local/redis/sentinel.conf

# ps -ef|grep redis

 

哨兵的监控日志

# tail -f /usr/local/redis/sentinel/redis-sentinel.log

5.验证哨兵高可用

关闭master的redis,查看redis集群主从机切换情况

128上操作

# redis-cli -h 192.168.184.128 -p 6379  shutdown

查看哨兵日志主从切换过程:

# tail -n 200 /usr/local/redis/sentinel/redis-sentinel.log

 

129上查看,master已经切换为129上

# redis-cli -h 192.168.184.129 -p 6379

192.168.184.129:6379> info replication

# Replication

role:master

connected_slaves:1

slave0:ip=192.168.184.130,port=6379,state=online,offset=2414022,lag=1

master_replid:75a4ca026beae099331ccda2741e1cd46ee54252

master_replid2:1b7140434b574cf91e5357b8371a901742bfd176

master_repl_offset:2414022

second_repl_offset:2370197

repl_backlog_active:1

repl_backlog_size:1048576

repl_backlog_first_byte_offset:2080714

repl_backlog_histlen:333309

再重新启动128节点,会变成从节点,128上操作

# redis-server /usr/local/redis/redis.conf

129上查看,会多一个新增的从节点

192.168.184.129:6379> info replication

# Replication

role:master

connected_slaves:2

slave0:ip=192.168.184.130,port=6379,state=online,offset=2436796,lag=1

slave1:ip=192.168.184.128,port=6379,state=online,offset=2436796,lag=1

master_replid:75a4ca026beae099331ccda2741e1cd46ee54252

master_replid2:1b7140434b574cf91e5357b8371a901742bfd176

master_repl_offset:2436796

second_repl_offset:2370197

repl_backlog_active:1

repl_backlog_size:1048576

repl_backlog_first_byte_offset:2080714

repl_backlog_histlen:356083

Java客户端连接哨兵模式,只需要配置哨兵节点即可

spring.redis.sentinel.master=mymaster #哨兵配置中集群名字

spring.redis.sentinel.nodes=哨兵ip1:哨兵端口1,哨兵ip2:哨兵端口2,哨兵ip3:哨兵端口3

 

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/137321.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

Window下安装oracle12C

1.Window下安装oracle12C 官网下载地址: Database Software Downloads | Oracle 页面顶部选择 “接受许可协议” 后,我想选择下载 12c 版的企业版,文件1和文件2都需要下载。(如果提示登录 Oracle,则需要先登录才能下…

java家装网装修网站装修系统源码

简介 本平台主要是家装网站。管理员发布装修案例,看工地,装修设计师,装修攻略,装修知识文章等,嵌入3d全景图。普通用户注册,填写装修房型报价等。 演示视频: https://www.bilibili.com/video/…

Kotlin基础入门 - 静态变量、常量 And 静态函数、方法

2022一晃而过,2023悄然而至,有天晚上看第一行代码(第三版)的时候,又看到了Kotlin中静态方法的几种使用方式,蹭着过年还有一些时间,写了个Demo简单测试记录一下 在 Kotlin 中使用静态的方式不止一…

JavaScript基础系列之原型链

1. 前言 今天的重点复习的是JavaScript原型链。所谓是"基础不牢,地动山摇",原型链作为继承等相关知识的基础,就显得尤为重要了。接下来以手绘原型链为基础,详解讲解下原型链以及相关的属性 2. 原型 以及原型链 2.1 pro…

vs 生成前事件 生成后事件命令

为了提高编译生成后的事件效率,不需要手动的拷贝到固定目录。可以在项目->属性中设备生成后事件。输入相应的命令行,即可。 Visual Studio中,可以在项目-》属性-》生成事件-》生成后事件命令行 xcopy 复制文件; /y/e 如果只复…

JavaEE【Spring】:MyBatis查询数据库

文章目录一、理论储备1、MyBatis 的概念2、MyBatis 的作用二、第⼀个MyBatis查询1、创建数据库和表2、添加MyBatis框架支持① 老项目添加MyBatisⅠ. 新增功能Ⅱ. EditStarters插件② 新项目添加MyBatis3、配置连接字符串和MyBatis① 配置连接字符串② 配置 MyBatis 中的 XML 路…

数据标注平台如何保护用户数据安全?

近期,在《麻省理工科技评论》在一篇万字长文调查中,一位年轻女子坐在自家的马桶上的图片也被扫地机器人拍摄下来,并被流传到网上、大范围传播。但事实上,这也并非是一件新鲜事了。例如,2020年秋,一系列从低…

为什么MySQL 要选择 B+树

一、什么是索引 在关系数据库中,索引是一种单独的、物理的对数据库表中一列或多列的值进行排序的一种存储结构。再直白点就是我们可以把索引理解成图书或者字典的目录。 既然索引是数据的一种存储结构,那么我们必然要对其进行存储,同时&…

你可以不用Git,但不能不会Git(二)基础(上)

目录 一.环境配置 二.本地初始化仓库 三.文件的两种状态 四.文件加入暂存区 五.文件提交与删除 1.提交文件 2.删除文件 一.环境配置 当安装Git后首先要做的事情是设置用户名称和email地址。这是非 常重要的,因为每次Git提交都会使用该用户信息。 设置用户信…

#G. 红旗招展

Description小J占山为王有一段时间了,他决定把自己的地盘打扮一下---将各种颜色的旗插在山头上当然某一座的山头只能用一种颜色的旗。整个地盘有N个山头,可看成是一棵有N个节点的树。小J还是有一点艺术细胞的,他不想整个地盘杂乱无章。于是他…

Kubernetes安装ingress-controller

IngressController 1. 安装 1.1 查看ingress-nginx的版本匹配 https://github.com/kubernetes/ingress-nginx/blob/main/README.md#readme 下载配置 wget https://raw.githubusercontent.com/kubernetes/ingress-nginx/controller-v1.1.2/deploy/static/provider/cloud/de…

【回答问题】ChatGPT上线了!给我推荐20个比较流行的图像实例分割模型

给我推荐20个比较流行的图像实例分割模型 U-Net Mask R-CNN FCN SegNet PSPNet DeepLabv3 DenseASPP LinkNet RefineNet ENet ICNet BiSeNet CRF-RNN GCN Tiramisu FRRN DeepLabv3 PANet MaskLab Hybrid Task Cascade给我推荐20个比较流行的图像实例分割模型源码 好的&#x…

java学习之类变量

目录 一、类变量的引出 需解决的问题 传统代码 代码问题 解决方法 运行结果 二、类变量的内存布局 特点 内存中的位置 三、类变量定义 四、类变量语法 五、访问类变量 六、类变量细节 第一条 第二条 第三条 第四条 第五条 第六条 第七条 一、类变量的引出 需…

PHP8---MySQL扩展

目录 一、MySQL扩展的介绍 二、PHP和MySQL连接的基本操作 (1)MySQL连接的准备工作 (2)插入删除操作 三、查询操作 (1)mysqli_fetch_assoc (2)mysqli_fetch_row (3…

19. 网站响应数据加一个简单的密,就能挡住80%的爬虫,你信吗?

本篇博客我们实现响应加密,由于本案例是JS逆向阶段的第一个案例,所以采用最基础加密手段。 爬虫训练场源码同步仓库为 GitCode 项目采集测试地址:爬虫训练场 爬虫训练场框架搭建Python Flask 端 Base64加密前台解密字符串渲染数据框架搭建 本…

Es之mapping

1)、字段类型 2)、映射 Mapping(映射) Mapping 是用来定义一个文档(document),以及它所包含的属性(field)是如何存储和 索引的。比如,使用 mapping 来定义…

深入解析Linux虚拟化KVM-Qemu分析之KVM源码

说明: KVM版本:5.9.1QEMU版本:5.0.0工具:Source Insight 3.5, Visio 1. 概述 从本文开始将开始source code的系列分析了;KVM作为内核模块,可以认为是一个中间层,向上对接用户的控制…

idea中热部署插件JRebel的激活方式

idea中热部署插件JRebel的激活方式 一、打开jrebel 激活面板,如图: 二、选中Team URL(connect to online licensing service) 1、在上面的框中输入激活的url地址 http://127.0.0.1:8888/132d042c-3b1a-4c45-9044-b7897c3de7882…

遗传算法改进(IGA)+python代码实现

遗传算法改进(IGA)python代码实现一、变异概率的改进(1)单点变异(2)多点变异(3)选择性的突变概率二、交叉概率的改进三、适应度函数的改进(1)sigmoid函数&…

PGL 系列(六)node2vec

node2vec DeepWalk存在的问题是比较简单直接,而图结构往往是一个复杂结构,需要考虑很多因素,在深度优先搜索方法之外,还有广度优先搜索,结合以上两种方式可以更好的探索图模型,即node2vec。