redis分布式集群-redis+keepalived+ haproxy

news2024/11/26 4:11:10

redis分布式集群架构（Redis+Keepalived+Haproxy）至少需要3台服务器、6个节点，一台服务器2个节点。

redis分布式集群架构中的每台服务器都使用六个端口来实现多路复用，最终实现主从热备、负载均衡、秒级切换的目标。

redis分布式集群架构思路为：keepalived给haproxy做高可用,当一台haproxy出现故障时,高可用会将另一台备用的haproxy作为master,继续给后端提供服务,防止单点故障。

部署redis集群

第一步，环境准备。

redis分布式集群架构至少需要3台服务器、6个节点，一台机器2个节点，创建出3个master节点、3个salve节点环境。

第一台服务器：

私网IP：x.x.x.x redis-master 6001 redis-slave 6002

第二台服务器：

私网IP：y.y.y.y redis-master 6001 redis-slave 6002

第三台服务器：

私网IP：z.z.z.z redis-master 6001 redis-slave 6002

第二步，安装redis。（每台服务器都安装）

命令：yum -y install redis

若结果显示“redis-6.0.5-1.11.al8.x86_64”，则说明成功安装了redis-6.0.5。

第三步，启动redis服务。（每台服务器都启动）

命令：systemctl start redis

若结果显示“Active: failed”，则需要把文件/usr/lib/systemd/system/redis.service中的“--daemonize no --supervised systemd”去掉，注释掉“Type=notify”，最后再次启动redis，服务状态为“Active: active (running)。

systemctl stop redis

systemctl restart redis

systemctl daemon-reload

# 设置开机自启动

命令：systemctl enable redis

# 查看服务状态是否为“Active: active (running)”

命令：systemctl status redis

ps -ef | grep redis

netstat -nap | grep  6379

# 服务端启动成功后，启动redis 客户端，查看端口号。

命令：redis-cli

set [key] [value]

get [key]

exit

ps -ef | grep redis

netstat -nap | grep 6379

第四步，在/usr/local中新建/redis/6001/conf、/redis/6001/data、/redis/6001/log、 /redis/6002/conf、/redis/6002/data和/redis/6002/log文件夹。（每台服务器都新建）

命令：mkdir -p /usr/local/redis/{6001,6002}/{conf,data,log}

第五步，将/etc/redis.conf配置文件复制粘贴到文件夹/usr/local/redis/6001/conf。（每台服务器都复制）

命令：cp /etc/redis.conf /usr/local/redis/6001/conf

cp /etc/redis.conf /usr/local/redis/6002/conf

第六步，配置redis.conf。（每台服务器都配置）

redis主编辑配置/usr/local/redis/6001/conf/redis.conf文件，做以下几处修改：

“bind 127.0.0.1”改为“bind 0.0.0.0”，

“protected-mode yes”改为“protected-mode no”，

“port 6379”改为“port 6001”，

“daemonize no”改为“daemonize yes”，

“requirepass foobared”改为requirepass "redis123456"，

“dir ./”改为“dir /usr/local/redis/6001/data”，

“pidfile /var/run/redis_6379.pid”改为“pidfile /usr/local/redis/6001/redis.pid”，

“logfile ”改为“logfile /usr/local/redis/6001/log/redis.log”，

“appendonly no”改为“appendonly yes”，

“# cluster-enabled yes”改为“cluster-enabled yes”，

“# cluster-config-file nodes-6379.conf”改为“cluster-config-file /usr/local/redis/6001/conf/nodes.conf”，

“# cluster-node-timeout 15000”改为“cluster-node-timeout 5000”。

redis从编辑配置/usr/local/redis/6002/conf/redis.conf文件，做以下几处修改：

“bind 127.0.0.1”改为“bind 0.0.0.0”，

“protected-mode yes”改为“protected-mode no”，

“port 6379”改为“port 6002”，

“daemonize no”改为“daemonize yes”，

“requirepass foobared”改为requirepass "redis123456"，

“dir ./”改为“dir /usr/local/redis/6002/data”，

“pidfile /var/run/redis_6379.pid”改为“pidfile /usr/local/redis/6002/redis.pid”，

“logfile ”改为“logfile /usr/local/redis/6002/log/redis.log”，

“appendonly no”改为“appendonly yes”，

“# cluster-enabled yes”改为“cluster-enabled yes”，

“# cluster-config-file nodes-6379.conf”改为“cluster-config-file /usr/local/redis/6002/conf/nodes.conf”，

“# cluster-node-timeout 15000”改为“cluster-node-timeout 5000”。

第七步，重新启动redis服务。（每台服务器都重启）

# 关闭redis服务

命令：systemctl stop redis

ps -ef | grep redis

或  ss -tnlp|grep redis

# 重新启动redis服务

命令：/usr/bin/redis-server /usr/local/redis/6001/conf/redis.conf

/usr/bin/redis-server /usr/local/redis/6002/conf/redis.conf

第八步，检查redis启动情况。（每台服务器都检查）

命令：ps -ef | grep redis

或    ss -tnlp|grep redis

 

 

第九步，创建redis集群。

命令：/usr/bin/redis-cli --cluster create x.x.x.x:6001 x.x.x.x:6002 y.y.y.y:6001 y.y.y.y:6002 z.z.z.z:6001 z.z.z.z:6002 --cluster-replicas 1

ps -ef|grep redis

第十步，redis集群验证。

# 连接集群

命令：redis-cli -c -p 6001 -a redis123456

部署keepalived

第一步，环境准备。

redis分布式集群架构选择任意两个节点进行配置，实现主从热备和秒级切换。

keepalived主服务器私网IP：x.x.x.x redis-master 6001 redis-slave 6002

keepalived备服务器私网IP：y.y.y.y redis-master 6001 redis-slave 6002

高可用虚拟IP：v.v.v.v

第二步，安装keepalived。（keepalived主、备服务器都安装）

命令：yum -y install keepalived

若结果显示“keepalived-2.2.4-6.al8.x86_64”，则说明成功安装了keepalived-2.2.4。

第三步，配置keepalived.conf文件。（keepalived主、备服务器都配置）

1）配置Keepalived主服务器中的/etc/keepalivedkeepalived.conf文件，代码如下：

global_defs {

        router_id redis-master

}

vrrp_script redis_check {

        script "/etc/keepalived/scripts/haproxy_check.sh"

        interval 4

        weight -5

        fall 3

        rise 2

}

vrrp_instance VI_REDIS {

        state MASTER

        interface eth0

        virtual_router_id 51

        priority 150

        advert_int 1

        nopreempt

        authentication {

           auth_type PASS

           auth_pass 1111
    
        }

        track_script {

           chk_haproxy

        }

        virtual_ipaddress {

            v.v.v.v

        }

}

2）先利用命令“mkdir -p /etc/keepalived/scripts”在Keepalived主服务器创建文件夹。然后在新建文件夹中创建haproxy_check.sh脚本,在脚本中写入下面代码：

#!/bin/bash

systemctl status haproxy | grep running

if [ $? -ne 0 ];then

   systemctl stop keepalived

fi

3）配置Keepalived备服务器中的/etc/keepalivedkeepalived.conf文件，代码如下：

global_defs {

    router_id redis-slave

}

vrrp_script redis_check {

    script "/etc/keepalived/scripts/haproxy_check.sh"

    interval 4

    weight -5

    fall 3
    
    rise 2

}

vrrp_instance VI_REDIS {

    state BAKCUP

    interface eth0

    virtual_router_id 51

    priority 100

    advert_int 1

    nopreempt

    authentication {

         auth_type PASS

        auth_pass 1111

    }

    track_script {

        chk_haproxy

    }

    virtual_ipaddress {

        v.v.v.v

    }

}

4）先利用命令“mkdir -p /etc/keepalived/scripts”在Keepalived备服务器创建文件夹。然后在新建文件夹中创建haproxy_check.sh脚本,在脚本中写入下面代码：

#!/bin/bash

systemctl status haproxy | grep running

if [ $? -ne 0 ];then

   systemctl stop keepalived

fi

第四步，给新建的脚本加上可执行权限。（keepalived主、备服务器都加上）

命令：chmod +x /etc/keepalived/scripts/*.sh

第五步，开启服务验证。

关掉Keepalived主服务器的keepalived服务之后，VIP可以漂移Keepalived备服务器。

部署haproxy

第一步，环境准备。

redis分布式集群架构选择安装keepalived的两个服务器来部署haproxy，haproxy访问6379端口时，轮询访问六个节点。

keepalived主服务器私网IP：x.x.x.x redis-master 6001 redis-slave 6002

keepalived备服务器私网IP：y.y.y.y redis-master 6001 redis-slave 6002

高可用虚拟IP：v.v.v.v

第二步，安装haproxy。

命令：yum -y install haproxy

第三步，配置haproxy.cfg文件。

配置/etc/haproxy/haproxy.cfg文件，在文件中写入下面代码：

global

    log                     127.0.0.1 local0

    chroot                  /var/lib/haproxy

    pidfile                 /var/run/haproxy.pid

    maxconn                 4000

    user                    nobody

    group                   nobody

    daemon

defaults

    mode                     http

    log                      global

    option                   dontlognull

    retries                  3

    maxconn                  3000

    contimeout               50000

    clitimeout               50000

    srvtimeout               50000

listen stats

    bind                    *:8888

    stats                   enable

    stats                   hide-version

    stats uri               /haproxy

    stats realm             Haproxy\ stats

    stats auth              admin:admin

    stats admin             if TRUE

listen  redis

        bind *:6379

        mode tcp

        balance roundrobin

        server redis1 x.x.x.x:6001 check

        server redis2 x.x.x.x:6002 check

        server redis3 y.y.y.y:6001 check

        server redis4 y.y.y.y:6002 check

        server redis5 z.z.z.z:6001 check

        server redis6 z.z.z.z:6002 check

第四步，配置haproxy rsyslog.conf文件。

vim /etc/rsyslog.conf

在/etc/rsyslog.conf文件中做出如下修改：

“# Provides UDP syslog reception

# for parameters see http://www.rsyslog.com/doc/imudp.html

#module(load="imudp") # needs to be done just once

#input(type="imudp" port="514")”修改为

“# Provides UDP syslog reception

$ModLoad imudp

$UDPServerRun 514”；

“# Provides TCP syslog reception

# for parameters see http://www.rsyslog.com/doc/imtcp.html

#module(load="imtcp") # needs to be done just once

#input(type="imtcp" port="514")”修改为

“# Provides TCP syslog reception

$ModLoad imtcp

$InputTCPServerRun 514”；

添加“# haproxy log

local0.*                 /var/log/haproxy.log”。

第五步，haproxy访问6379端口时，轮询访问六个节点。

命令：redis-cli -c -p 6379 -h v.v.v.v -a redis123456

测试

经测试，keepalived优先级最高的服务器（私网：x.x.x.x keepalived主+haproxy）中的两个redis节点不能同时被杀死，否则集群会马上停止，但是重启该服务器，集群就会马上恢复。

另两台服务器中的任何一台服务器发生宕机(或者两个redis节点挂掉)都不会影响redis集群的使用。

redis集群负载比较低。

需要注意redis集群缺点：

redis集群模式下只能选择db0，选择其他库会出现类似“(error) ERR SELECT is not allowed in cluster mode”的异常。

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.coloradmin.cn/o/876076.html

如若内容造成侵权/违法违规/事实不符，请联系多彩编程网进行投诉反馈，一经查实，立即删除！

相关文章

基于SpringBoot的旅游网站的设计与实现【附ppt|开题|万字文档(LW)和搭建文档

基于SpringBoot的旅游网站的设计与实现【附ppt|开题|万字文档(LW)和搭建文档

主要功能 前台界面： ①首页、旅游线路推荐、旅游资讯、线路搜索、查看更多等 ②旅游线路、度假旅游、探险考察、文化旅游、短程旅游、观光旅游、远程旅游、最新路线等 ③添加购物车、立即购买、评论、点我收藏等 ④个人中心、我的订单、我的地址、我的收藏、客服等…
阅读更多...
vue实现a组件中数据变化b组件实时更新（ab组件无关联）

vue实现a组件中数据变化b组件实时更新（ab组件无关联）

需求：A组件新增、编辑或者删除数据时，B组件实时更新数据 // src/utils/bus.js// bus.$emit(bridge-updated) 是在事件总线实例 bus 上触发了一个自定义事件 // data-updated，相当于发布了一个事件。// bus.$on(bridge-update…
阅读更多...
考研算法44天：玛雅人的密码

考研算法44天：玛雅人的密码

题目前置知识 1.为啥BFS比DFS更加适合找最短路径？ BFS 的使用场景：层序遍历、最短路径问题 - 知乎 (zhihu.com) 题目原题 解题思路 这道题和原先写的那些题目不同的是，这次BFS所搜索的树里面存放的是一个字符串，也就是说没有路…
阅读更多...
SQL server中substring 的用法

SQL server中substring 的用法

一：substring函数是SQL中截取字段数据中的其中一部分 --列：提取abdcsef中的abc数据，使用substring实现select substring(abdcsef,1,3) --‘1’表示截取的起始位置是从第一个字符开始,‘3’表示截取后得到的字符串长度为3个字符 二&#xff1…
阅读更多...
day7 ADC模数转换

day7 ADC模数转换

ADC简介 作用：采集传感器的数据，测量输入电压，检查电池电量剩余，检测温湿度等。 ADC性能指标 量程：能测量的电压范围 分辨率：ADC的分辨率通常以二进制数的位数表示，位数越多，分辨…
阅读更多...
腾讯面试题：使用Redis分布式锁可能会出现哪些问题？

腾讯面试题：使用Redis分布式锁可能会出现哪些问题？

嗨大家好，我是你们的小米！今天要和大家聊一个有趣的话题，那就是“腾讯面试题：使用Redis做分布式锁可能会出现哪些问题？”没错，就是腾讯大佬们在面试时经常会问到的一个问题，我们来一起深入了解一…
阅读更多...
ubuntu中安装python

ubuntu中安装python

最简单方便的是 apt 使用第三方的 ppa 源，然后直接 apt 安装 python3.9 安装 software-properties-common 获取add-apt-repository命令：apt install -y software-properties-common添加第三方的 ppa 源：add-apt-repository ppa:deadsnakes/p…
阅读更多...
【下班神器】python写自动关机程序并打包成exe文件

【下班神器】python写自动关机程序并打包成exe文件

前言 嗨喽~大家好呀，这里是魔王呐 ❤ ~! 不知道你们有没有过这种体验，下班时给电脑关机结果误点成重启， 又或者工作到还剩十几分钟快要下班了，老板突然说要开会。 会议结束后，还要等到电脑关机才能回家。 是不是就…
阅读更多...
SQL- 每日一题【1327. 列出指定时间段内所有的下单产品】

SQL- 每日一题【1327. 列出指定时间段内所有的下单产品】

题目 表: Products 表: Orders 写一个解决方案，要求获取在 2020 年 2 月份下单的数量不少于 100 的产品的名字和数目。 返回结果表单的 顺序无要求 。 查询结果的格式如下。 示例 1: 解题思路 1.题目要求我们获取在 2020 年 2 月份下单的数量不少于 100 的产品的…
阅读更多...
录取查询系统自己怎么做？需要用到哪些技术？

录取查询系统自己怎么做？需要用到哪些技术？

作为一名老师，我深知学生及家长们对于录取情况的关注和期待。因此，学校公布录取情况表是非常重要的一项工作。在这篇文章中，我将分享学校公布录取情况表的步骤和流程，帮助大家更好地了解录取情况。 学校在录取过程结束后&#xf…
阅读更多...
百日筑基篇——Pandas学习三（pyhton入门八）

百日筑基篇——Pandas学习三（pyhton入门八）

百日筑基篇——Pandas学习三（pyhton入门八） 文章目录 前言一、数据排序二、字符串处理三、数据合并方法1. merge方法2. concat方法 四、分组数据统计五、数据重塑1. stack2. pivot 总结 前言 上一篇文章介绍了一下pandas库中的一些函数，而本…
阅读更多...
pmp通过率都97%，只要考都能过？还有啥价值？

pmp通过率都97%，只要考都能过？还有啥价值？

PMP 的通过率确实挺高的，网传培训机构的通过率高达 97%，但是每年考PMP 的人不减反增，大家可以想一下，这是为什么？ 一、先给大家分析一下现在 PMP 的使用场景 1、项目管理岗位招聘的门槛 PMP 是项目管理领域的一个权…
阅读更多...
湖仓一体：国产基础软件的创新突破与弯道超车

湖仓一体：国产基础软件的创新突破与弯道超车

在这个市场变化和技术演进的时期，传统的国内外巨头优势被减弱，具备创新技术的国产基础软件企业，有希望实现弯道超车。 随着数字化转型进程的加快，企业对于数据基础设施的存储和计算能力要求越来越高。如何进行数据资产的统一管理和…
阅读更多...
杨立昆：挺过“神经网络寒冬”，人工智能实现大突破

杨立昆：挺过“神经网络寒冬”，人工智能实现大突破

原创 | 文 BFT机器人 01 “卷积网络之父”杨立昆谈人工智能 今年GPT爆火以后，杨立昆化身“杠精”。从提出“GPT系统将很快被抛弃”的观点，到回怼特斯拉创始人马斯克“延缓大模型研究和开发是一种新的模糊主义，没有任何意义”，杨立…
阅读更多...
Stable Diffusion + AnimateDiff运用

Stable Diffusion + AnimateDiff运用

1.安装AnimateDiff，重启webui 2.下载对应的模型，最好到c站下载，google colab的资源有可能会出现下载问题 https://civitai.com/models/108836 3.下载完成后，你可以随便抽卡了。 抽卡完成后固定seed，然后打开这个插件&…
阅读更多...
虹科分享 | 什么是软件组成分析？

虹科分享 | 什么是软件组成分析？

软件组成分析（SCA）应用程序安全测试(AST)工具市场的一个细分市场，负责管理开源组件的使用。SCA工具自动扫描应用程序的代码库，包括容器和注册表等相关构件，以识别所有开源组件、它们的许可证遵从性数据和任何安全漏洞。…
阅读更多...
Leetcode39 组合总和

Leetcode39 组合总和

给你一个 无重复元素 的整数数组 candidates 和一个目标整数 target ，找出 candidates 中可以使数字和为目标数 target 的 所有 不同组合 ，并以列表形式返回。你可以按 任意顺序 返回这些组合。 candidates 中的 同一个 数字可以 无限制重复被选取 。如果…
阅读更多...
EndNote 21 for Mac(文献管理软件) v21.0.1中文版

EndNote 21 for Mac(文献管理软件) v21.0.1中文版

EndNoter mac是一款参考文献管理软件，旨在帮助学术研究者、学生和专业人士有效地管理和引用参考文献。该软件提供了许多功能，使用户可以轻松地组织、搜索和引用各种类型的文献。 EndNoter mac软件特点和功能 1. 参考文献管理：EndNoter允许用…
阅读更多...
各位请看：如何使用ChatGPT让你的小生意做得更好?

各位请看：如何使用ChatGPT让你的小生意做得更好?

​在当前快节奏的商业环境中，有许多小型企业依靠行动效率和创造力正在茁壮成长。OpenAI的ChatGPT这样的AI工具正为小型企业发展作出贡献。 ChatGPT是基于OpenAI语言模型架构GPT-3.5和GPT-4的人工智能聊天机器人。它根据大量的互联网文本数据集预测句子中的下一个单词…
阅读更多...
小鹏G9高压电驱动800V拆解【实拍】

小鹏G9高压电驱动800V拆解【实拍】

目前已知G9基于800V 电池系统和Sic电驱系统进行开发。但这一系统的具体参数、技术水平都尚无官方解析。这里基于欣旺达的sfc480电池发布会ppt资料(图1)，可以看出欣旺达的4c电池满电电压在4.4V，这和taycan 4S的800v系统最大电压基本相同，电池系…
阅读更多...
推荐文章
最新文章

Copyright @ 2022~2023