05- redis集群模式搭建(上) (包含云服务器[填坑])

news2025/4/4 2:33:32

目录

1. 准备环境: 

2. 简介:

-> 2.1 前言:

-> 2.2 Redis集群架构实现了对redis的水平扩容

-> 2.3 redis cluster集群原理

3.  搭建后特别需要注意的问题

->3.1 [重点]: 如果一个服务出现故障: 是否可以继续提供服务???

---> 3.1.1 如果集群中故障redis服务存在主从服务,

---> 3.1.2 如果redis集群中没有按官方推荐的去做主从备份

-> 3.2 理解: 

---> 3.2.1 修改配置 redis.conf

-> 3.3 单服务器部署多个节点是否会影响带宽

4. 实际操作

-> 4.1 创建文件夹

-> 4.2 进入目录

-> 4.3 创建模板 

 --> 4.3.1 文件输入内容

---> 4.3.2 模板注释

---> 4.3.3 特别注意宿主机ip

-> 4.4 在当前目录下操作

-> 4.5 创建docker 容器

-> 4.6 进入redis-8010容器

-> 4.7 创建redis-cluster集群配置

 -> 4.8 搭建成功了, 进入集群redis查看(内网ip)

-> 4.9 测试,如图所示, 也就解释了上述问题

5.出现异常, 执行下面重新来过

下一篇: java使用redis集群进行操作


1. 准备环境: 

云服务器<虚拟机也可以>, centos7.9, docker-ce , 有redis镜像

2. 简介:

-> 2.1 前言(云服务器请与06配合使用):

===> 传送门: 06-redis集群模式(中) 项目测试的云服务ip变内网等(解决大多数问题)

主从模式 哨兵模式, 都会在集群模式中体现出来, 官方推荐集群最少三主三从 6个redis服务

-> 2.2 Redis集群架构实现了对redis的水平扩容

即启动N个redis节点,将整个数据分布存储在这N个redis节点中,每个节点存储总数据的1/N。redis集群通过分区提供一定程度的可用性,即使集群中有一部分节点失效或无法进行通讯,集群也可以继续处理命令请求。

-> 2.3 redis cluster集群原理

redis cluster集群默认16384个hash槽,集群搭建成功之后,需要给每一个主节点分配hash槽。当外部数据插入的时候,会对key进行crc16然后对16384取模,这样就计算出哪个节点对该数据进行管理。创建集群时就已经分配哈希槽, 如果采用的3主3从的结构,主从模式通过哨兵模式,实现类主服务故障自动切换, 进而实现类服务的高可用

3.  搭建后特别需要注意的问题

->3.1 [重点]: 如果一个服务出现故障: 是否可以继续提供服务???

---> 3.1.1 如果集群中故障redis服务存在主从服务,

那么访问的时候回访问从redis服务,集群正常运行, 参考主从哨兵机制,

重新选举master 一般30秒

---> 3.1.2 如果redis集群中没有按官方推荐的去做主从备份

其中有一台redis服务故障挂掉,emm, 会导致整个集群则都不能使用,因为Redis集群的时候每一个Redis节点保存的数据不一样,如果一个节点有问题则整个数据就缺失。

-> 3.2 理解: 

假设是一个云平台, 每个数据存在不同服务里 其中正好存你的数据服务gg了, 并且还没从服务重新选举, emm 其他人没影响<需要做一下配置> , 你的数据查不出来了

---> 3.2.1 修改配置 redis.conf

取决于redis.conf中的参数cluster-require-full-coverage
如果某一段插槽的主从都挂掉,而cluster-require-full-coverage为yes ,整个集群都挂掉
如果某一段插槽的主从都挂掉,而cluster-require-full-coverage为no ,  该插槽数据全都不能使用,也无法存储。

-> 3.3 单服务器部署多个节点是否会影响带宽

相当会了 详细介绍引用他人文章了: Redis Cluster集群优势劣势已经介绍 

4. 实际操作

-> 4.1 创建文件夹

mkdir -p /usr/local/src/docker/redis-cluster

-> 4.2 进入目录

cd /usr/local/src/docker/redis-cluster

-> 4.3 创建模板 

vim redis-cluster.tmpl

 --> 4.3.1 文件输入内容

port ${PORT}
cluster-enabled yes
cluster-config-file nodes.conf
cluster-node-timeout 5000
cluster-announce-ip 10.0.4.*
cluster-announce-port ${PORT}
cluster-announce-bus-port 1${PORT}
appendonly yes
bind 0.0.0.0
protected-mode no

---> 4.3.2 模板注释

port: 节点端口(对外通信)

cluster-enabled: 开启集群

cluster-config-file: 集群的配置是 nodes.conf 

cluster-node-timeout:连接超时时间5000毫秒

cluster-announce-ip:宿主机ip 

cluster-announce-port:集群节点映射端口 

cluster-announce-bus-port:集群总线端口

appendonly:持久化模式 aof是否开启

---> 4.3.3 特别注意宿主机ip

1 可以是内网ip(如果想远端必须是公网ip)

ps: 但是公网ip需要进行下面操作: ===> 传送门:  06-redis集群模式(中) 项目测试的云服务ip变内网等(解决大多数问题)

2 可以使用域名解析

3 不可以使用172.0.0.1 

-> 4.4 在当前目录下操作

for port in $(seq 8010 8015); \
do \
  mkdir -p ./${port}/conf  \
  && PORT=${port} envsubst < ./redis-cluster.tmpl > ./${port}/conf/redis.conf \
  && mkdir -p ./${port}/data; \
done

解释一下: shell脚本 循环 参数传递 生成配置文件 

-> 4.5 创建docker 容器

for port in $(seq 8010 8015); \
do \
   docker run -it -d -p ${port}:${port} -p 1${port}:1${port} \
  --privileged=true -v /usr/local/src/docker/redis-cluster/${port}/conf/redis.conf:/usr/local/etc/redis/redis.conf \
  --privileged=true -v /usr/local/src/docker/redis-cluster/${port}/data:/data \
  --restart always --name redis-${port} --net redis-net \
  --sysctl net.core.somaxconn=1024 redis redis-server /usr/local/etc/redis/redis.conf; \
done

-> 4.6 进入redis-8010容器

docker exec -it redis-8010 bash

-> 4.7 创建redis-cluster集群配置

redis-cli --cluster create 10.0.4.*:8010 10.0.4.*:8011 10.0.4.*:8012 10.0.4.*:8013 10.0.4.*:8014 10.0.4.*:8015 --cluster-replicas 1

 -> 4.8 搭建成功了, 进入集群redis查看(内网ip)

redis-cli -c -h 10.0.4.* -p 8010

cluster nodes   #查看集群节点数
cluster info #查看集群基本信息

-> 4.9 测试,如图所示, 也就解释了上述问题

5.出现异常, 执行下面重新来过

  批量删除容器 批量删除目录挂载

docker ps -a | grep -i "redis-801*" | awk '{print $1}' | xargs docker stop
docker ps -a | grep -i "redis-801*" | awk '{print $1}' | xargs docker rm -f

#shell脚本 删除redis容器
for i in $(seq 8010 8015); \
do docker rm -f redis-${i}; \
done;


rm -rf 801{0..5}/conf/redis.conf
rm -rf 801{0..5}

[留下拓展, 正式生产环境 配置密码等配置, 后续补充]

预告06篇: 06-redis集群模式(中) 项目测试的云服务ip变内网等(解决大多数问题)

预告07篇: java使用redis集群进行操作, 常规配置解释等

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/521355.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

PCIe的capability扩展空间字段解释

解释 这是一段关于高级错误报告的信息&#xff0c;其中包含多个字段和值。以下是每个字段的详细解释&#xff1a; Capabilities: [100 v1] Advanced Error Reporting 这是该设备支持高级错误报告的能力标识符。 UESta: DLP- SDES- TLP- FCP- CmpltTO- CmpltAbrt- UnxCmplt- R…

python的文件操作模块shutil和pathlib总结

一&#xff1a;shutil模块 1&#xff0c;shutil模块安装 pip insatll shutilwhich 2&#xff0c;shutil支持的方法 可以通过dir(shutil)查看shutil支持的方法和属性 [Error, ExecError, ReadError, RegistryError, SameFileError, SpecialFileError, _ARCHIVE_FORMATS, _BZ2_…

当列车穿过时空隧道:解密力扣“计算列车到站时间”

本篇博客会讲解力扣“2651. 计算列车到站时间”的解题思路&#xff0c;这是题目链接。 先来审题&#xff1a; 以下是输出示例&#xff1a; 以下是提示&#xff1a; 这道题是给大家树立信心的。计算方法&#xff1a;(预期时间延误时间)%24即可。 int findDelayedArrivalTim…

奇技淫巧第8期

学无止境。 下面是对去年11月至今年5月的零散知识点总结。 春节期间好好放松了一两个月&#xff0c;来校后又懒散的度过了一两个月&#xff0c;直到论文评审意见下来&#xff0c;才开启冲刺模式狂干了一两个月。总的来说&#xff0c;这半年来摸的时间比较多。好&#xff0c;不废…

想学好Python的话,这6本书带你从入门到精通

推荐几本在豆瓣评分很不错的Python学习书籍&#xff0c;这些书的电子版被我搜集整理了出来&#xff0c;今天分享给大家。 书籍包括《Python编程&#xff1a;从入门到实践》、《Python编程快速上手》、《流畅的Python》、《像计算机科学家一样思考Python》、《利用Python进行数…

树状数组C++详解

树状数组介绍 在学习一个算法之前一定要清楚它能干嘛&#xff0c;能解决什么样的问题&#xff0c;对你解题是否有帮助&#xff0c;然后才去学习它! 那么接下来看如下几个问题 什么是树状数组 顾名思义就是一个结构为树形结构的数组&#xff0c;于二叉树的结构类似但又不同&…

基于SpringBoot+Vue的养老院系统

【辰兮要努力】&#xff1a;hello你好我是辰兮&#xff0c;很高兴你能来阅读&#xff0c;昵称是希望自己能不断精进&#xff0c;向着优秀程序员前行&#xff01; 博客来源于项目以及编程中遇到的问题总结&#xff0c;偶尔会有读书分享&#xff0c;我会陆续更新Java前端、后台、…

【C++初阶】第十一篇:stack和queue的使用与模拟实现

文章目录 stack和queue的介绍和使用stack的介绍stack的定义方式stack的使用 queue的介绍queue的定义方式queue的使用 stack和queue的模拟实现容器适配器stack的模拟实现queue的模拟实现 总结&#xff1a; stack和queue的介绍和使用 stack的介绍 stack的文档介绍 stack是一种容…

文本三剑客之~~~sed命令

目录 sed概念sed 的工作流程&#xff1a;命令格式&#xff1a;常用选项&#xff1a;常用操作&#xff1a; 示例&#xff1a;打印删除替换&#xff1a;插入&#xff1a;剪切复制将字符替换位置 sed概念 sed是一种流编辑器&#xff0c;流编辑器会在编辑器处理数据之前基于预先提…

Allegro加密PCB文件

写在前面&#xff1a; 记得以前不知道Allegro可以加密PCB文件的时候&#xff0c;就遇到了尴尬的事情。 其一&#xff1a;要发给别人layout文件&#xff0c;但是又怕别人外传&#xff0c;而且有关于公司文件保密的问题&#xff0c;其实这不论是公事还是私事&#xff0c;如果我…

软测人正在杀死软测行业

前言、一个软件做出来&#xff0c;最不能少的人是谁&#xff1f; 不用说就是开发&#xff0c;因为开发是最了解软件运作的那个人&#xff0c;早期不少一人撸网站或者APP的例子&#xff0c;相当于一个人同时是产品、研发、测试、运维等等&#xff0c;这也是为何开发是地位和上限…

如何一步一步构建网站ChatGPT插件

在本文中&#xff0c;我们将一步一步地探索并构建一个名为"AI Prompt Testing"的项目。该项目是一个网站插件&#xff0c;旨在帮助网站生成一个ChatGPT提示测试题&#xff0c;以巩固当前网页的内容。 1、抽象提取 这个网站ChatGPT插件大概的效果&#xff0c;类比的…

股票量价关系基础知识7----图解各阶段量价关系:价涨量缩

图解各阶段量价关系&#xff1a;价涨量缩 价涨量缩是指股价上涨&#xff0c;成交量却萎缩的一种价量背离走势。它通常反映上涨力道不足&#xff0c;预示股价可能反转向下。 一、上涨初期的价涨量缩 &#xff08;一&#xff09;形态分析 股价经过一轮下跌后止跌回升&#xff0c…

Redis中的缓存穿透、雪崩、击穿

概述&#xff1a; 缓存穿透&#xff1a;大量请求根本不存在的key&#xff0c; 应用服务器压力变大缓存雪崩&#xff1a;redis中大量key集体过期&#xff0c;数据库压力变大&#xff0c;服务器崩溃缓存击穿&#xff1a;redis中一个热点key过期&#xff08;大量用户访问该热点ke…

【Linux】驱动学习,先啃框架

目录 前言&#xff1a; 一、驱动设计 &#xff08;1&#xff09;面向对象&#xff1a; &#xff08;2&#xff09;分层&#xff1a; &#xff08;3&#xff09;分离&#xff1a; 二、驱动框架 &#xff08;1&#xff09;传统框架 &#xff08;2&#xff09;总线设备驱…

四.从零开始JVM实战高手-JVM监控及线上问题定位

前言 Java程序员面试JVM几乎比问&#xff0c;对于JVM监控&#xff0c;线上OOM&#xff0c;CPU负载100%等问题也是经常被问到&#xff0c;尽管在企业中不一定轮得到我们去处理线上问题&#xff0c;但是不管是为了面试还是为了应对开发那么对于JVM线上问题处理都是必须要去了解的…

二、软件工程——Modeling

1.Undestanding Requirements System Engineering&#xff08;系统工程&#xff09; &#xff01;&#xff01;&#xff01;Requirements Engieering(需求建模&#xff09; 1.Inception&#xff08;开始&#xff09;&#xff1a;&#xff08;确认利益相关者&#xff09; 2.…

164道网络安全工程师面试题(附答案)

为了更好地帮助大家高薪就业&#xff0c;今天就给大家分享两份网络安全工程师面试题&#xff0c;一共有164道面试真题&#xff0c;希望它们能够帮助大家在面试中&#xff0c;少走一些弯路、更快拿到offer&#xff01; 93道网络安全面试题 1、什么是SQL注入攻击 2、什么是XSS…

Linux中的特殊进程:idle进程(0号进程)、init进程(1号进程,被systemd 取代 )、kthreadd进程(2号进程)

文章目录 1. Linux中的三个特殊进程&#xff1a;2. idle进程、init进程、kthreadd进程的创建3 kthreadd进程3.1 kthreadd进程的启动3.2 kthreadd进程创建子进程3.3 kthreadd的工作流程总结 4. init进程4.1 init进程的启动 4. 总结参考 1. Linux中的三个特殊进程&#xff1a; i…

【作者踩坑总结0错版】vscode配置codeql-MacBook(M1/M2芯片-arm)

文章目录 前言一、codeql是什么二、安装必备工具2.1、安装codeql-cli2.2、安装codeql仓库2.3、桌面新建文件夹2.4、安装vscode 三、配置codeql环境变量四、vscode配置codeql插件4.1、下载测试靶场4.2、生成数据库文件&#xff08;最难最多bug&#xff09;4.3、vscode配置ql数据…