Linux-Haproxy搭建Web群集

news2024/11/16 13:39:32

LVS在企业应用中抗负载能力强

  • 不支持正则处理,不能实现动静分离
  • 对于大型网格,LVS的实施配置复杂,维护成本较高

Haproxy是一款可提供高可用性、负载均衡、及基于TCP和HTTP应用的代理的软件

  • 适用于负载大的Web站点
  • 运行在硬件上可支持数以万计的并发连接的连接请求
  • 支持TCP(四层代理)和HTTP(七层代理)
  • 负载均衡常用调度算法
    • RR(Round Robin):轮询,依次将请求分配给每个服务器
    • LC(Least Connections):最少连接,将请求发送到当前连接数最少的服务器
    • WRR(Weighted Round Robin):加权轮询,根据服务器权重分配请求
    • SH(Source Hashing):基于来源哈希,同一客户端请求(Session会话记录)始终分配给同一台服务器
    • DH(Destination Hashing):基于目的哈希,根据请求的目标地址进行哈希分布

案例环境

主机

操作系统

IP地址

主要软件

Haproxy 服务器

CentOS 7.3 x86_64

192.168.1.60

haproxy-1.5.19.tar.gz

Nginx 服务器 1

CentOS 7.3 x86_64

192.168.1.61

nginx-1.12.0.tar.gz

Nginx 服务器 2

CentOS 7.3 x86_64

192.168.1.62

nginx-1.12.0.tar.gz

客户端

Windows 10

192.168.1.66

Edge 浏览器

1:编译安装nginx服务器(两个nginx网站的步骤完全一样,只有测试页面不同)

[root@localhost ~]# yum -y install pcre-devel zlib-devel gcc*
[root@localhost ~]# useradd -M -s /sbin/nologin nginx
[root@localhost ~]# tar zxvf nginx-1.12.0.tar.gz 
[root@localhost ~]# cd nginx-1.12.0/
[root@localhost nginx-1.12.0]# ./configure --prefix=/usr/local/nginx --user=nginx --group=nginx --with-http_stub_status_module
[root@localhost nginx-1.12.0]# make && make install
[root@localhost nginx-1.12.0]# ln -s /usr/local/nginx/sbin/nginx /usr/local/sbin/
[root@localhost nginx-1.12.0]# cd /usr/local/nginx/html/
[root@localhost html]# echo "test web01" > test.html

[root@localhost ~]# systemctl stop firewalld
[root@localhost ~]# nginx -t
[root@localhost ~]# nginx        ##开启nginx进程
[root@localhost ~]# netstat -anpt | grep nginx

安装完后的默认信息

  • 默认安装目录:/usr/local/nginx
  • 默认日志:/usr/local/nginx/logs/
  • 默认监听:80
  • 默认 Web 目录: /usr/local/nginx/html

2:编译安装Haproxy

[root@localhost ~]# systemctl stop firewalld
[root@localhost ~]# setenforce 0

[root@localhost ~]# yum -y install pcre-devel bzip2-devel gcc*
[root@localhost ~]# tar zxvf haproxy-1.5.19.tar.gz 
[root@localhost ~]# cd haproxy-1.5.19/
[root@localhost haproxy-1.5.19]# make TARGET=linux26
[root@localhost haproxy-1.5.19]# make install

[root@localhost haproxy-1.5.19]# cd examples/

//linux22     for Linux 2.2
linux24     for Linux 2.4 and above (default)
linux24e    for Linux 2.4 with support for a working epoll (> 0.21)
linux26     for Linux 2.6 and above
solaris     for Solaris 8 or 10 (others untested)
freebsd     for FreeBSD 5 to 8.0 (others untested)
openbsd     for OpenBSD 3.1 to 4.6 (others untested)
cygwin      for Cygwin
generic     for any other OS.
custom      to manually adjust every setting

3:Haproxy服务器配置

建立haproxy配置文件
[root@localhost haproxy-1.5.19]# cd examples/
[root@localhost haproxy-1.5.19]# mkdir /etc/haproxy        //创建配置文件目录
[root@localhost haproxy-1.5.19]# cp examples/haproxy.cfg /etc/haproxy/        //将haproxy.cfg文件复制到配置文件目录


4:Haproxy配置介绍
global
        log 127.0.0.1   local0     \\配置日志记录,local0为日志设备,默认是系统日志
        log 127.0.0.1   local1 notice      \\日志级别为notice注意
        #log loghost    local0 info    \\消息
        maxconn 4096       \\最大连接数
        #chroot /usr/share/haproxy    \\参考目录,可以注释
        uid 99           \\用户uid
        gid 99           \\用户gid
        daemon        \\以守护进程的方式运行
        #debug      \\调试模式,输出启动信息到标准输出
        #quiet     \\安静模式,启动时无输出
        
defaults
        log     global           \\使用globle中定义的日志
        mode    http           \\模式为http
        option  httplog         \\采用http的格式记录日志
        option  dontlognull     \\保证HAProxy不记录上级负载均衡发送过来的用于检测状态数据的心跳包
        retries 3             \\检查节点连接失败的次数,超过3次认为节点不可用
       # redispatch         \\当负载很高时,自动结束当前队列处理比较久的连接
        maxconn 2000      \\最大连接数
        contimeout      5000         \\haproxy和服务器连接超时时间ms
        clitimeout      50000        \\客户端超时时间ms
        srvtimeout      50000              \\服务器超时时间ms
        
listen  webcluster 0.0.0.0:80        \\定义群集和监听的端口号
        option  httpchk GET /index.html    \\检查服务器的index.html文件,心跳检测URL设置
        balance roundrobin      \\负载均衡的调度算法为轮询
        server  inst1 192.168.1.61:80 check inter 2000 fall 3        \\定义在线节点
        server  inst2 192.168.1.62:80 check inter 2000 fall 3          
//    check inter 2000是检测心跳频率(每2000ms检测一次),fall 3是3次失败认为服务器不可用

在新版本中,超时的设置做了调整,具体如下

contimeout 被 timeout connect取代:定义haproxy将客户端请求转发至后端服务器所等待的超时时长

clitimeout 被timeout client取代:客户端非活动状态的超时时长,是 app 连接 haproxy的时间  

srvtimeout 被timeout server取代:客户端与服务器端建立连接后,等待服务器端的超时时长,是haproxy 连接后端web服务器的时间

参数

说明

优化建议

maxconn

最大连接数

根据应用的实际使用情况进行调整,推荐使用10240。同时,“defaults”中的最大连接数的值不能超过“global”段中的定义。

daemon

守护进程模式

Haproxy 可以使用非守护进程模式启动,但生产环境建议使用守护进程模式启动,以确保服务的稳定性和可靠性。

nbproc

负载均衡的并发进程数

建议与当前服务器 CPU 核数相等或为其2倍,以优化性能,充分利用多核CPU的能力。

retries

重试次数

主要用于对群集节点的检查。节点多且并发量大时,设置为2次或3次;节点不多时,可以设置5次或6次,以提高服务的可用性和容错性。

haproxy共有八种调度算法
    1) balance leastconn   最少连接数
    2) balance roundrobin  轮询
    3) balance source      根据客户端IP进行哈希的方式
    4) static-rr    根据权重
    5) uri    根据请求的URI
    6) url_param    根据请求的URl参数
    7) hdr(name)   根据HTTP请求头来锁定每一次HTTP请求
    8) rdp-cookie(name)   根据cookie(name)来锁定并哈希每一次TCP请求
//chroot /usr/share/haproxy  \\也就是改变程序执行时所参考的根目录位置,如果有此代码,需要创建此目录

关于日志级别
    static Level DEBUG
    DEBUG Level指出细粒度信息事件对调试应用程序是非常有帮助的。
    static Level INFO
    INFO level表明 消息在粗粒度级别上突出强调应用程序的运行过程。
    static Level WARN
    WARN level表明会出现潜在错误的情形。
    static Level ERROR
    ERROR level指出虽然发生错误事件,但仍然不影响系统的继续运行。
    static Level FATAL
    FATAL level指出每个严重的错误事件将会导致应用程序的退出。
    另外,还有两个可用的特别的日志记录级别: 
    static Level ALL
    ALL Level是最低等级的,用于打开所有日志记录。
    static Level OFF
    OFF Level是最高等级的,用于关闭所有日志记录。
创建服务脚本
[root@localhost haproxy-1.5.19]# cp examples/haproxy.init /etc/init.d/haproxy
[root@localhost haproxy-1.5.19]# ln -s /usr/local/sbin/haproxy /usr/sbin/haproxy
[root@localhost haproxy-1.5.19]# chmod +x /etc/init.d/haproxy
[root@localhost ~]# chkconfig --add haproxy

([root@localhost examples]# cp haproxy.init /etc/init.d        //把haproxy的服务控制脚本放在/etc/init.d目录下
  [root@localhost init.d]# mv haproxy.init haproxy        //重命名为haproxy
  [root@localhost init.d]# chmod +x haproxy            //将haproxy控制脚本提权
  [root@localhost init.d]# chkconfig --add haproxy        //将haproxy脚本设置执行权
  [root@localhost init.d]# chkconfig haproxy on        //将haproxy脚本设置为自启动)

5:测试web群集

http://192.168.1.60/test.html
//刷新页面进行测试

//或使用脚本测试
[root@localhost ~]# for i in $(seq 10); do curl http://192.168.1.60/test.html  ;done

//测试高可用
现在将192.168.1.62的Nginx服务停用,在客户端使用浏览器打开http://192.168.1.60/test.html从中可以看出,当一台节点故障,不会影响群集的使用,这样就满足了群集的高可用性

6:Haproxy的日志

  • haproxy在默认情况不会记录日志,除了在haproxy.conf中的global段指定日志的输出外,还需要配置系统日志的配置文件
方法一:
[root@localhost haproxy-1.4.24]# vi /etc/haproxy/haproxy.cfg
global
#       log 127.0.0.1   local0
#       log 127.0.0.1   local1 notice
        ...
        log /dev/log local0 info
        log /dev/log local0 notice
[root@localhost haproxy-1.4.24]# touch /etc/rsyslog.d/haproxy.conf
[root@localhost haproxy-1.4.24]# vi /etc/rsyslog.d/haproxy.conf
[root@localhost haproxy-1.4.24]# service rsyslog restart
[root@localhost ~]#/etc/init.d/haproxy restart

[root@localhost ~]# cat /var/log/haproxy/haproxy-info.log
方法二:
(1)编辑/etc/haproxy/haproxy.conf
[root@localhost ~]# vi /etc/haproxy/haproxy.cfg
global
 log 127.0.0.1 local3     
#local3是设备,对应于 /etc/rsyslog.conf中的配置,默认回收info的日志级别
(2)编写haproxy日志文件
[root@localhost ~]# vim  /etc/rsyslog.d/haproxy.conf
$ModLoad imudp        //采集日志的协议UDP
$UDPServerRun 514        //指定日志采集使用的端口号
local3.*     /var/log/haproxy.log        //指定日志存放位置

(3)配置rsyslog的主配置文件,开启远程日志(可以不配)
[root@localhost ~]# vim /etc/sysconfig/rsyslog
SYSLOGD_OPTIONS=”-c 2 -r -m 0″
#-c 2 使用兼容模式,默认是 -c 5
#-r 开启远程日志
#-m 0 标记时间戳。单位是分钟,为0时,表示禁用该功能

(4)重启haproxy和rsyslog服务
[root@localhost ~]# systemctl restart rsyslog
[root@localhost ~]# systemctl restart haproxy

(5)访问网站后查看日志
[root@localhost ~]# cat /var/log/haproxy.log

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/2043085.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

AI大模型开发——4.transformer模型(0基础也可懂)(1)

无论是想怎样学习大模型,transformer都是一个绕不开的话题。transformer的出现彻底改变了nlp领域,进一步推动了大模型的产生,可以说,transformer就是大模型开发的鼻祖。 可能只通过说大家会有些不理解。大家可以看下方的大语言模型…

打卡第四十四天:最长公共子序列、不相交的线、最大子序和、判断子序列

一、最长公共子序列 题目 文章 视频 本题和最长重复子数组区别在于这里不要求是连续的了,但要有相对顺序,即:"ace" 是 "abcde" 的子序列,但 "aec" 不是 "abcde" 的子序列。 确定dp数…

4个快捷高效的ai在线写作工具推荐。

ai在线写作因其快速的创作方式,高效的写作效率以及能够为我们带来无限的灵感而被广泛应用。如果你还不会使用ai进行写作的话,就看看下面这4款AI写作工具吧。 1、笔灵在线创作 直通车 :https://ibiling.cn 这是个在线的AI工具网站,在内容创作…

个人可识别信息(PII) AI 去除 API 数据接口

个人可识别信息(PII) AI 去除 API 数据接口 ai / 隐私保护 基于 AI 模型自动去除个人识别信息(PII) 个人信息保护 / AI 模型 。 1. 产品功能 基于自有专业模型进行 PII 自动去除高效处理敏感信息全接口支持 HTTPS(TLS v1.0 / v1.1 / v1.2 /…

地质灾害评估和治理工程勘查设计资质乙级资质办理标准

地质灾害评估和治理工程勘查设计资质乙级资质的办理标准主要包括单位条件、专业技术人员条件、仪器设备要求以及申请材料等方面。以下是详细的办理标准: 一、单位条件 **1、法人资格:**申请单位应具有企业法人或者事业单位法人资格。 **2、管理体系&a…

龙良曲pytorch课时1-课时13

前言 这篇是个人学习龙曲良老师的pytorch课程的笔记,疑惑地方自己加的内容 一、pytorch引入 1. 自动求导 在深度学习中,我们通常需要训练一个模型来最小化损失函数。这个过程可以通过梯度下降等优化算法来实现。梯度是函数在某一点上的变化率&#x…

Linux基础入门--目录结构之基本目录操作及注意事项

😀前言 本篇博文是关于Linux基础入门–目录结构的基本介绍、基本目录和操作命令,希望你能够喜欢 🏠个人主页:晨犀主页 🧑个人简介:大家好,我是晨犀,希望我的文章可以帮助到大家&…

滴答定时器笔记

SysTick介绍 1.1 什么是SysTick? Systick,即滴答定时器,是内核中的一个特殊定时器,用于提供系统级的定时服务。该定时器是一个24位的 递减计数器,具有自动重载值寄存器的功能。当计数器到达自动重载值时,它…

无人机中的温度/湿度/气压传感器详解!!!

一、温度传感器 温度传感器是一种用来测量物体或环境的温度变化的传感器。在无人机中,温度传感器通常采用红外线热成像技术,通过红外线相机获取物体表面的温度数据,实现对环境和物体温度的监测和测量。该技术具有响应速度快、无需接触、测量…

100个练习学习Rust!构文・整数・变量

前一篇文章 【0】准备 【1】构文・整数・变量 ← 本次全部文章列表 《100 Exercise To Learn Rust》第2回,也就是实际演习的第1回!从这次开始,我们会适度减少前置说明,直接进入问题的解决! 本次的相关页面 1.1. Syn…

SpringBoot入门第一篇

目录 SpringBootSpring Boot核心特性Spring Boot应用结构目录结构样例目录结构讲解 Spring Boot版本更新概览升级建议总结 常见使用场景社区和资源常见疑问**Spring Boot的自动配置机制是如何工作的?****Spring Boot支持哪些常见的配置文件格式?****为什…

硬件设计-1/f噪声、均方根(RMS)噪声与等效噪声带宽

简介: 学习下噪声的知识,为什么写这个呢,因为前几年有次面试和别人谈到这个问题。 定义解释: 1/F噪声 高频下的噪声为白噪声(即其频谱密度不会随频率而变化)。这种情况适用于运算放大器的大 部分频率范围,但在低频率…

C语言问答进阶--2、C语言简介及基本的输入输出函数

C语言简介 Q:您好,能大体介绍下C语言吗? A:当然可以。C语言是一种计算机语言,它主要被用在系统编程里,可以说,C语言的产生就和操作系统的编写密不可分。 【C语言简要历史】 1978年由美国电话电报…

Redis7.0.15 主从复制、哨兵模式搭建

主从复制:master以写为主,slave以读为主,当master数据变化的时候,自动将新的数据异步同步到其他的slave数据库 1. Redis复制介绍: https://redis.io/docs/latest/operate/oss_and_stack/management/replication/ 读写…

Unity游戏开发001

Unity游戏开发 系列文章的目录: 第一章:Hello,Unity! “好读书,不求甚解;每有会意,便欣然忘食。” 本文目录: Unity游戏开发 Unity游戏开发前言今天我们来体验一下unity开发创建第一…

基于MMIO的Virtio流程分析——QEMU平台

目录 一、相关概念 1、Virtio 2、QEMU 3、KVM 4、MMIO 5、小结 二、QEMU中Virtio的实现方法 1、virtio_blk 2、virtio_net 三、Virtio Driver和Virtio Device 的初始化流程 1、Virtio Driver Init 2、Virtio Mmio Driver Init 3、Virtio Device Init (1) get dev…

培训第二十九天(python脚本使数据库读写分离,mysql主从开机自动同步,python操作数据库,MyCat插件的学习)

上午 1、python脚本实现数据库主从分离 # 引入模块 python链接mysql工具,驱动包,连接器import pymysql# python 类 类名 rwsplit,名字可以和文件名不一致# 三个函数,函数的标识 def 函数名 (self,参数列表):# __init__ 初始化函数&#xff…

详解最大比合并算法(Maximum Ratio Combining)

目录 一. 空间分集(space diversity) 二. 系统模型 三. 尝试性译码 3.1 选择性合并算法(selection combining) 3.2 简单相加 四. 最大比合并算法 4.1 合并信号 4.2 设计权重值w 五. 波束赋形 5.1 小结 5.2 与波束赋形的…

牛客小白月赛98

牛客小白月赛98 A 骰子魔术 链接:https://ac.nowcoder.com/acm/contest/85598/A 来源:牛客网 题目描述 jackle 正在给他的朋友表演一个关于骰子的魔术: jackle 会拿出一枚骰子,骰子的表面分别写上了从 1∽500 的数字&#xff0c…

Hadoop环境安装及HDFS初步使用

一、Hadoop原理 Hadoop是一个由Apache基金会所开发的分布式系统基础架构。用户可以在不了解分布式底层细节的情况下,开发分布式程序。充分利用集群的威力进行高速运算和存储。Hadoop实现了一个分布式文件系统( Distributed File System),其中一个组件是HDFS(Hadoop Distr…