【运维知识进阶篇】集群架构-Nginx高可用Keepalived

news2024/11/25 11:25:09

高可用是指2台机器启动着完全相同的业务系统，一台机器宕机后，另一台可以快速启用，用户是无感知的。高可用硬件通常使用F5，软件通常使用keepalived。keepalived软件是基于VRRP协议实现的，VRRP虚拟路由冗余协议，主要用于解决单点故障。

VRRP实现原理

咱们拿公司路由器举例，路由器故障后，网关无法转发报文，所有人无法上网了怎么办？

一般我们会选择增加一台路由器，但是我们主路由器故障后，用户需要手动指向备用路由器，如果用户多的话修改起来会非常麻烦，另外我们的主路由器修好后，主路由器用不用；主路由器故障后我们把备用路由器的网关配置改成主路由器是否可以，等等，涉及问题很多。

实际上，我们如果单纯上修改网关配置，是行不通的，我们的PC第一次通过ARP广播寻找到主路由器的MAC地址和IP地址，会将信息写到ARP的缓存表，那么PC在之后的连接中都是根据缓存表信息去连接，在进行数据包转发，即使我们修改了IP，但是Mac地址是唯一的，PC的数据包依旧会发给主路由器（除非PC的ARP缓存表过期，再次发起ARP广播的时候才能获取新的备用路由器的MAC的地址和IP地址）

那么我们就需要VRRP了，通过软件或硬件的形式在主路由器和副路由器外面增加一个虚拟的MAC地址（VMAC）和虚拟IP地址（VIP），那么在这种情况下，PC请求VIP的时候，不管是主路由器处理还是备用路由器处理，PC只是在ARP缓存表中记录VMAC和VIP的信息。

Keepalived核心概念

要掌握Keepalived之前，我们需要先知道它的核心概念。

1、如何确定谁是主节点谁是备用节点（谁的效率高，速度快就用谁，类似选举投票；手动干预是通过优先级的方式）

2、如果主节点故障，备用节点自动接管，如果主节点恢复了，那么抢占式的方式主节点会自动接管，类似于夺权，而非抢占式的方式，主节点恢复了，并不会自动接管。

3、主节点和备用节点在1个小组，主节点正常时，1秒钟向小组内发送一次心跳（时间可以自定义），表示它还正常，如果没有发送心跳，则备用节点自动接管，如果主节点和备用节点都没发送心跳，则两台服务器都会认为自己是主节点，从而形成脑裂

Keepalived安装配置

1、我们准备一台LB01（10.0.0.5）和一台LB02（10.0.0.6）两台虚拟主机

2、两台主机都安装keepalived

[root@LB01 ~]# yum -y install keepalived

[root@LB02 ~]# yum -y install keepalived

3、配置LB01

[root@LB01 ~]# rpm -qc keepalived    #查询keepalived的配置文件
/etc/keepalived/keepalived.conf
/etc/sysconfig/keepalived
[root@LB01 ~]# cat /etc/keepalived/keepalived.conf
global_defs {                   #全局配置
    router_id LB01              #标识身份->名称
}

vrrp_instance VI_1 {
    state MASTER                #标识角色状态
    interface eth0              #网卡绑定接口
    virtual_router_id 50        #虚拟路由id
    priority 150                #优先级
    advert_int 1                #监测间隔时间
    authentication {            #认证
        auth_type PASS          #认证方式
        auth_pass 1111          #认证密码
    }
    virtual_ipaddress {         
        10.0.0.3                #虚拟的VIP地址
    }
}

4、配置LB02

[root@LB02 ~]# cat /etc/keepalived/keepalived.conf global_defs {
    router_id LB02            #与主结点区别1：唯一标识
}

vrrp_instance VI_1 {
    state BACKUP              #与主节点区别2：角色状态   
    interface eth0
    virtual_router_id 50
    priority 100              #与主节点区别3：竞选优先级
    advert_int 1
    authentication {    
        auth_type PASS
        auth_pass 1111
    }
    virtual_ipaddress {
        10.0.0.3
    }
}

5、启动两个节点的keepalived

[root@LB01 ~]# systemctl start keepalived
[root@LB01 ~]# systemctl enable keepalived

[root@LB02 ~]# systemctl start keepalived
[root@LB02 ~]# systemctl enable keepalived

Keepalived测试抢占式和非抢占式

1、LB01的优先级高于LB02，所以VIP在LB01上面

[root@LB01 ~]# ip add | grep 10.0.0.3
    inet 10.0.0.3/32 scope global eth0

2、关闭LB01的keepalived，发现LB02自动接管

[root@LB01 ~]# systemctl stop keepalived
[root@LB01 ~]# ip add | grep 10.0.0.3

[root@LB02 ~]# ip add | grep 10.0.0.3
    inet 10.0.0.3/32 scope global eth0

3、重启LB01的keepalived，发现VIP被强行抢占

[root@LB01 ~]# systemctl start keepalived
[root@LB01 ~]# ip add | grep 10.0.0.3
    inet 10.0.0.3/32 scope global eth0

[root@LB02 ~]# ip add | grep 10.0.0.3

4、配置非抢占式

两个节点的state都必须配置为BACKUP，都必须加上配置nopreempt，其中一个节点的优先级必须高于另外一个节点的优先级。

[root@LB01 ~]# cat /etc/keepalived/keepalived.conf
global_defs {                   #全局配置
    router_id LB01              #标识身份->名称
}

vrrp_instance VI_1 {
    state BACKUP                #标识角色状态
    nopreempt
    interface eth0              #网卡绑定接口
    virtual_router_id 50        #虚拟路由id
    priority 150                #优先级
    advert_int 1                #监测间隔时间
    authentication {            #认证
        auth_type PASS          #认证方式
        auth_pass 1111          #认证密码
    }
    virtual_ipaddress {         
        10.0.0.3                #虚拟的VIP地址
    }
}
[root@LB01 ~]# systemctl restart keepalived

[root@LB02 ~]# cat /etc/keepalived/keepalived.conf
global_defs {
    router_id LB02
}

vrrp_instance VI_1 {
    state BACKUP
    nopreempt        
    interface eth0
    virtual_router_id 50
    priority 100
    advert_int 1
    authentication {    
        auth_type PASS
        auth_pass 1111
    }
    virtual_ipaddress {
        10.0.0.3
    }
}
[root@LB02 ~]# systemctl restart keepalived

5、通过windows的arp去验证，是否会切换MAC地址

[root@LB01 ~]# ip add | grep 10.0.0.3
    inet 10.0.0.3/32 scope global eth0

Windows本地hosts到10.0.0.3，浏览器访问blog.koten.com（LB01分配到Web01里面的域名）

WIN+R调用运行窗口，输入cmd打开命令提示符arp -a，查看arp缓存区，此时物理地址与LB01上10.0.0.3MAC地址一致

将节点1的keepalived停掉

[root@LB01 ~]# systemctl stop keepalived

节点2接管VIP

[root@LB02 ~]# ip add | grep 10.0.0.3
    inet 10.0.0.3/32 scope global eth0

 再次查看mac地址，此时物理地址与LB02上10.0.0.3MAC地址一致

Keepalived故障脑裂

由于某些原因，导致两台keepalived服务器在指定的时间内，无法检测到对方的心跳，但是两台服务器都可以正常使用。

常见故障原因

1、服务器网线松动等网络故障

2、服务器硬件故障发生损坏现象而崩溃

3、主备都开启了firewalld防火墙

脑裂故障测试

1、将主备主机的防火墙都打开

[root@LB01 ~]# systemctl start firewalld
[root@LB02 ~]# systemctl start firewalld

2、将刚刚的配置文件改回去

[root@LB01 ~]# vim /etc/keepalived/keepalived.conf  
global_defs {
    router_id LB01
}

vrrp_instance VI_1 {
    state MASTER
    #nopreempt
    interface eth0
    virtual_router_id 50
    priority 150
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass 1111
    }
    virtual_ipaddress {
        10.0.0.3
    }
}
[root@LB01 ~]# systemctl restart keepalived

[root@LB02 ~]# cat /etc/keepalived/keepalived.conf  
global_defs {
    router_id LB02
}

vrrp_instance VI_1 {
    state BACKUP
    #nopreempt        
    interface eth0
    virtual_router_id 50
    priority 100
    advert_int 1
    authentication {    
        auth_type PASS
        auth_pass 1111
    }
    virtual_ipaddress {
        10.0.0.3
    }
}
[root@LB02 ~]# systemctl restart keepalived

3、通过抓包查看信息

4、查看LB01和LB02中的IP，发现都有10.0.0.3

[root@LB01 ~]# ip add | grep 10.0.0.3
    inet 10.0.0.3/32 scope global eth0

[root@LB02 ~]# ip add | grep 10.0.0.3
    inet 10.0.0.3/32 scope global eth0

脑裂故障解决方案

解决思路：发生了脑裂，我们随便kill掉一台即可，可以通过编写脚本的方式，我们认为两边的ip add都有10.0.0.3，则发生了脑裂。我们在LB01上写脚本。

做免密钥方便获取LB02的ip信息：

[root@LB01 ~]# ssh-keygen
Generating public/private rsa key pair.
Enter file in which to save the key (/root/.ssh/id_rsa): 
Enter passphrase (empty for no passphrase): 
Enter same passphrase again: 
Your identification has been saved in /root/.ssh/id_rsa.
Your public key has been saved in /root/.ssh/id_rsa.pub.
The key fingerprint is:
SHA256:+NyOCiY7aBX8nEPwGeNQHjTLY2EXPKU1o33LTBrm1zk root@LB01
The key's randomart image is:
+---[RSA 2048]----+
|    oB.oo=       |
|   o+o*o= o      |
|  . =*+o.+ o     |
|   o.=..o B o .  |
|    = o So = E   |
|   . = o ..   .  |
| .o o . o .      |
|...+ .   o       |
|. ..  ... .      |
+----[SHA256]-----+
[root@LB01 ~]# 
[root@LB01 ~]# ssh-copy-id -i .ssh/id_rsa 10.0.0.6
/usr/bin/ssh-copy-id: INFO: Source of key(s) to be installed: ".ssh/id_rsa.pub"
/usr/bin/ssh-copy-id: INFO: attempting to log in with the new key(s), to filter out any that are already installed
/usr/bin/ssh-copy-id: INFO: 1 key(s) remain to be installed -- if you are prompted now it is to install the new keys
root@10.0.0.6's password: 

Number of key(s) added: 1

Now try logging into the machine, with:   "ssh '10.0.0.6'"
and check to make sure that only the key(s) you wanted were added.

[root@LB01 ~]# ssh '10.0.0.6' ip add | grep 10.0.0.3 | wc -l    #免密钥测试
1

脚本编写并执行：

[root@LB01 ~]# cat check_split_brain.sh
LB01_VIP_Number=`ip add | grep 10.0.0.3 | wc -l`
LB02_VIP_Number=`ssh '10.0.0.6' ip add | grep 10.0.0.3 | wc -l`
if [ $LB01_VIP_Number -eq 1 -a $LB02_VIP_Number -eq 1 ]
then
	systemctl stop keepalived
fi	
[root@LB01 ~]# sh check_split_brain.sh

[root@LB01 ~]# ip add | grep 10.0.0.3

[root@LB02 ~]# ip add | grep 10.0.0.3
    inet 10.0.0.3/32 scope global eth0

Keepalived与Nginx

Nginx默认监听在所有的IP地址上，VIP飘到一台节点上，相当于Nginx多了VIP这个网卡，所以可以访问到Nginx所在的机器，但是如果Nginx宕机，会导致用户请求失败，但是keepalived没有挂掉不会进行切换，就需要编写脚本检测Nginx存活状态，如果不存活则kill掉keepalived，让VIP自动飘到备用服务器。

1、脚本编写并增加权限

[root@LB01 ~]# cat check_nginx.sh
nginxpid=`ps -C nginx --no-header|wc -l`
if [ $nginxpid -eq 0 ]
then
	systemctl restart nginx &>/etc/null
	if [ $? -ne 0 ]
	then
		systemctl stop keepalived
	fi
fi
	
[root@LB01 ~]# chmod +x check_nginx.sh
[root@LB01 ~]# ll check_nginx.sh
-rwxr-xr-x 1 root root 150 Apr 12 17:37 check_nginx.sh

2、脚本测试

[root@LB02 ~]# ip add|grep 10.0.0.3            #当前VIP不在LB02

[root@LB01 ~]# ip add|grep 10.0.0.3            #当前VIP在LB01上
    inet 10.0.0.3/32 scope global eth0
[root@LB01 ~]# systemctl stop nginx            #关闭Nginx
[root@LB01 ~]# ip add|grep 10.0.0.3            #VIP依旧在LB0上，因为Nginx对keepalived没有影响
    inet 10.0.0.3/32 scope global eth0
[root@LB01 ~]# vim /etc/nginx/nginx.conf       #修改Nginx配置文件，让其无法重启，查看是否会飘到LB02上

ser  nginx;

[root@LB01 ~]# sh check_nginx.sh               #执行脚本
[root@LB01 ~]# ip add|grep 10.0.0.3            #发现VIP已经不在LB02了

[root@LB02 ~]# ip add | grep 10.0.0.3          #VIP飘移到LB02上了
    inet 10.0.0.3/32 scope global eth0

  3、在配置文件内中调用此脚本

[root@LB01 ~]# cat /etc/keepalived/keepalived.conf 
global_defs {        
    router_id LB01  
}

#每5秒执行一次脚本，脚本执行内容不能超过5秒，否则会中断再次重新执行脚本
vrrp_script check_nginx {
    script "/root/check_nginx.sh"
    interval 5
}

vrrp_instance VI_1 {
    state MASTER
    #nopreempt
    interface eth0
    virtual_router_id 50
    priority 150
    advert_int 1
    authentication {
        auth_type PASS
        auth_pass 1111
    }
    virtual_ipaddress {         
        10.0.0.3
    }
    #调用并运行脚本
    track_script {
    	check_nginx
    }
}

注意：在Master的keepalived中调用脚本，抢占式，仅需在Master配置即可。如果配置为非抢占式，那么需要两台服务器都使用该脚本。

我是koten，10年运维经验，持续分享运维干货，感谢大家的阅读和关注！

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.coloradmin.cn/o/566439.html

如若内容造成侵权/违法违规/事实不符，请联系多彩编程网进行投诉反馈，一经查实，立即删除！

相关文章

详解Node.js开发中不可或缺的7个库

详解Node.js开发中不可或缺的7个库

在Node.js开发中，选择合适的库对于提高开发效率和优化应用程序性能至关重要。本文将介绍七个备受关注的Node.js库，它们在各自的领域中展现了出色的功能和性能。这些库分别是：Config、Fetch、Ioredis、Multer、Cache、Fast-xml-parser和Cron。…
阅读更多...
一图看懂 pkg_resources 模块：包资源API，资料整理+笔记（大全）

一图看懂 pkg_resources 模块：包资源API，资料整理+笔记（大全）

本文由 大侠(AhcaoZhu)原创，转载请声明。 链接: https://blog.csdn.net/Ahcao2008 一图看懂 pkg_resources 模块：包资源API，资料整理笔记（大全） 🧊摘要🧊模块图🧊类关系图&#x1f9…
阅读更多...
JavaEE(系列15) -- 多线程(JUC中常见的类)

JavaEE(系列15) -- 多线程(JUC中常见的类)

JUC----- java.util.concurrent(并发) 1. ReentrantLock 1. 可重入互斥锁. 和 synchronized 定位类似, 都是用来实现互斥效果, 保证线程安全. 2. ReentrantLock 也是可重入锁. "Reentrant" 这个单词的原意就是 "可重入". 1. ReentrantLock 的用法: lock():…
阅读更多...
【花雕学AI】微软 Bing 图像魔法师：让你的描述变成图像，让你的图像变成现实

【花雕学AI】微软 Bing 图像魔法师：让你的描述变成图像，让你的图像变成现实

你有没有想过，如果你能够用语言来创造图像，那该有多么神奇和有趣？你有没有想过，如果你能够看到你想象中的图像，那该有多么震撼和美妙？现在，这一切都可以实现了，因为微软 Bing 图像魔…
阅读更多...
NetApp EF 系列全闪存阵列——性能极佳，性价比优势突出

NetApp EF 系列全闪存阵列——性能极佳，性价比优势突出

NetApp EF 系列全闪存阵列——性能极佳，性价比优势突出 如果您需要为实时分析、HPC 和数据库等性能敏感型工作负载提供强劲动力，NetApp EF 系列全闪存阵列的性价比优势不言自明。其可为要求最苛刻的应用程序提供微秒级响应，最大限度地延长正…
阅读更多...
电源方案对比

电源方案对比

电源 1.方案选择：1 LM2596 2 MP1584 3：TPS54301LM25962.MP1584：3.TPS5430 2.1输出2A电流的纹波2.2 输出3A电流的纹波3.动态响应4.发热5.电源转换效率6.综合指标reference 1.方案选择：1 LM2596 2 MP1584 3：TPS5430 1LM…
阅读更多...
Unity之ShaderGraph节点介绍 Channel通道

Unity之ShaderGraph节点介绍 Channel通道

目录 Channel（通道）  1、Combine（合并）  2、Flip（反转）  3、Split（拆分）  4、Swizzle（通道调配） Channel（通道） 1、Combine&am…
阅读更多...
win可以上网，但是右下方显示“无internet链接“

win可以上网，但是右下方显示“无internet链接“

使用了下面链接的方法，成功解决 Win10可以联网但右下角显示无法连接到Internet怎办 首先，打开控制面板(control)，右上角，将查看方式切换为小图标 调整计算机的设置下，找到并点击网络和共享中心 网络和共享中心窗口&a…
阅读更多...
即时通讯软件（企业IM）对企业的作用

即时通讯软件（企业IM）对企业的作用

随着网络时代的来临，即时通讯软件也开始逐渐在企业中流行起来，甚至很多公司都已经将即时通讯软件作为内部沟通的主要工具，那么这种情况下，即时通讯软件对企业究竟有什么作用呢？ 首先，即时通讯软件对于企业内…
阅读更多...
20年前，微软给金山那刀，现今一举将WPS推上领奖台，WPS，赢了

20年前，微软给金山那刀，现今一举将WPS推上领奖台，WPS，赢了

WPS，赢了 正如姚冬（金山办公副总裁）所说： 文本的命令行到图形界面的那次，改变整个人机交互的方式，我们公司历史上最大的一次危机也是那一次， 但我们依然挺过来了，我们相信这次技术浪…
阅读更多...
走进Linux世界，学习Linux系统的必备指南

走进Linux世界，学习Linux系统的必备指南

随着计算机技术的不断发展，Linux操作系统已成为IT行业中备受关注的操作系统之一。Linux以其安全性、稳定性和开放性，受到了广泛的认可和欢迎。学习Linux系统对于IT行业的从业者来说是非常重要的。但是，对于初学者来说，学习Linux可…
阅读更多...
CANopenNode Master 配置

CANopenNode Master 配置

文章目录 CANopenNode 简介CANopenNode 主栈SDO ClientPDO 通讯参数RPDO 通讯参数RPDO 通信参数设置实例TPDO 通讯参数TPDO 通信参数设置实例 PDO 映射参数RPDO 映射参数设置实例TPDO 映射参数设置实例 CANopenNode 简介 CANopenNode 是一个开源的免费的开源 CANopen 协议栈。…
阅读更多...
【谷粒商城笔记】1.基于docker的mysql、redis环境配置

【谷粒商城笔记】1.基于docker的mysql、redis环境配置

0.系统 宝塔 v7.5.1 Centos v8.2 1. 安装Docker 直接yum install docker会提示找不到 > docker-client-latest \ docker-common \ docker-latest \ docker-latest-logrotate \ docker-logrotate \ docker-engine Loaded plugins: fastestmirror No Match for argument: …
阅读更多...
Ae：常用内置抠像效果

Ae：常用内置抠像效果

Ae 中的抠像都是基于效果控件来实现的，最终生成动态遮罩来控制画面像素的透明度。 常用的内置抠像效果有：提取、线性颜色键、颜色差值键、内部/外部键等。 黑色或白色背景的抠像 对于白色或黑色背景的素材，可直接尝试图层混合模式。 或者&…
阅读更多...
一文打通File类

一文打通File类

目录 基本概述 常用构造器 构造方法 路径分隔符 常用方法 File类的获取功能 File类的重命名功能 File类的判断功能 File类的创建功能 File类的删除功能 在 Java 中，File 类是 java.io 包中唯一代表磁盘文件本身的对象，也就是说，如果…
阅读更多...
一大波智能AI对话机器人来袭——一共20个可以白嫖的ChatGPT网站供您使用，总有一款能打开~

一大波智能AI对话机器人来袭——一共20个可以白嫖的ChatGPT网站供您使用，总有一款能打开~

文心一言https://yiyan.baidu.com 小莓用AIhttps://ai.usesless.com/chat NotGPTNotGPT,AI问答,AI绘画,AI协助提升工作效率https://chat2.pypig.com https://chatgptmirror.comhttps://chatgptmirror.com 超大模型AI对话https://chat.ktoai.com ChatGPTYour personal ChatGPT B…
阅读更多...
使用nsenter检查docker网络

使用nsenter检查docker网络

文章目录 一 环境准备二 需求三 解决 一 环境准备 虚拟机IP：10.0.0.100 拉取的三个镜像，镜像名称与ID如下： [rootcanway01 ~]# docker image ls REPOSITORY TAG IMAGE ID CREATED …
阅读更多...
flink 解决udf重复调用的问题（亲测有效）

flink 解决udf重复调用的问题（亲测有效）

问题 针对如图的情况，udf会被调用4次，如果udf是计算型的，后果很严重。接下来介绍一下解决的办法。 更改底层源码 大神的博客继续往下看，有测试过程测试UDF 1.写两个udf public class Udf1 extends ScalarFunction {public long eval(long ordernumber
阅读更多...
【宝塔建站】Ubuntu下使用宝塔面板一键搭建Z-Blog个人博客

【宝塔建站】Ubuntu下使用宝塔面板一键搭建Z-Blog个人博客

文章目录 1.前言2.网站搭建2.1. 网页下载和安装2.2.网页测试2.3.cpolar的安装和注册 3.本地网页发布3.1.Cpolar临时数据隧道3.2.Cpolar稳定隧道（云端设置）3.3.Cpolar稳定隧道（本地设置） 4.公网访问测试5.结语 1.前言 Ubuntu系统作…
阅读更多...
CyberLink的照片编辑软件PhotoDirector Ultra 14.5版本在win10系统的下载与安装配置教程

CyberLink的照片编辑软件PhotoDirector Ultra 14.5版本在win10系统的下载与安装配置教程

目录 前言一、PhotoDirector Ultra安装二、使用配置总结 前言 PhotoDirector Ultra是由CyberLink公司开发的一款专业的照片编辑工具，旨在为用户提供全面的照片后期制作和编辑解决方案。其具有多种编辑工具，例如调整曝光、色彩、对比度和锐度等参数&…
阅读更多...
推荐文章
最新文章

Copyright @ 2022~2023