Haproxy 可观测性最佳实践

news2024/11/17 6:18:40

HAProxy 是一款广泛使用的高性能负载均衡器，支持 TCP 和 HTTP 协议，提供高可用性、负载均衡和代理服务。
HAProxy 2.0 以上版本提供了完善的指标暴露体系，方便观测云收集对应的指标信息。
版本要求

HAProxy 2.0
HAProxy Enterprise 2.0r1
HAProxy ALOHA 11.5

以下主要是采用 docker 的方式部署 Haproxy 并上报数据到观测云。

Haproxy 安装部署

准备配置 haproxy.cfg

#----------------
# Global settings
#----------------
global
  log 127.0.0.1 local2
  maxconn 4000
  daemon

defaults
    mode        tcp
    log        global
    option      tcplog
    option      dontlognull
    option      http-server-close
    option      redispatch
    retries                     3
    timeout     http-request    10s
    timeout     queue           1m
    timeout     connect                 10s
    timeout     client          1m
    timeout     server          1m
    timeout     http-keep-alive 10s
    timeout     check           10s
    maxconn                     3000

#--------------------
#Application prometheus
#--------------------

# Haproxy 开启指标
frontend prometheus
  bind *:8405
  mode http
  http-request use-service prometheus-exporter if { path /metrics }
  no log

frontend mysql
  mode tcp
  bind :3308
  log global
  default_backend mysql_servers

backend mysql_servers
  mode tcp
  balance leastconn
  server s1 192.168.2.114:3306 weight 3 check inter 5s rise 2 fall 3
  server s2 192.168.2.115:3306 weight 1 check inter 5s rise 2 fall 3

通过prometheus-exporter暴露指标信息，端口为 8405，path为/metrics。并配置了 mysql 负载均衡，且对外访问端口为3308。

Docker-compose

编写docker-compose.yaml文件

version: '3'
services:
  haproxy:
    image: haproxy
    container_name: haproxy
    volumes:
      - ./haproxy.cfg:/usr/local/etc/haproxy/haproxy.cfg #插件文件挂载
    ports:
      - 89:80
      - 8405:8405
      - 3308:3308

运行

执行以下命令

docker-compose up -d

up 表示启动
-d 表示后台运行

查看运行状态 docker-compose ps

root@liurui:/home/liurui/middleware/haproxy# docker-compose ps 
NAME                IMAGE               COMMAND                  SERVICE             CREATED             STATUS              PORTS
haproxy             haproxy             "docker-entrypoint.s…"   haproxy             6 days ago          Up 3 hours          0.0.0.0:3308->3308/tcp, :::3308->3308/tcp, 0.0.0.0:8404-8405->8404-8405/tcp, :::8404-8405->8404-8405/tcp, 0.0.0.0:89->80/tcp, :::89->80/tcp

访问指标信息

通过访问8405端口获取指标信息，如下所示：

# HELP haproxy_process_nbthread Number of started threads (global.nbthread)
# TYPE haproxy_process_nbthread gauge
haproxy_process_nbthread 8
# HELP haproxy_process_nbproc Number of started worker processes (historical, always 1)
# TYPE haproxy_process_nbproc gauge
haproxy_process_nbproc 1
# HELP haproxy_process_relative_process_id Relative worker process number (1)
# TYPE haproxy_process_relative_process_id gauge
haproxy_process_relative_process_id 1
# HELP haproxy_process_uptime_seconds How long ago this worker process was started (seconds)
# TYPE haproxy_process_uptime_seconds gauge
haproxy_process_uptime_seconds 1364
...

观测云

观测云控制台

如果没有注册观测云帐号，可以免费注册。
如果已经注册了，登陆到观测云。

操作步骤

1. 登录观测云，并获取 datakit 的安装命令
install datakit 2. 执行安装命令安装datakit
在这里插入图片描述
3. 开启 prom 采集器

由于 Haproxy 能够直接暴露 metrics url，所以可以直接通过 prom采集器进行采集。

进入DataKit 安装目录下的 conf.d/prom ，复制 prom.conf.sample 为 haproxy.conf。

cd /usr/local/datakit/conf.d/prom
cp prom.conf.sample haproxy.conf

调整haproxy.conf内容如下：

  urls = ["http://localhost:8405/metrics"]

  source = "haproxy"

  ## Keep Exist Metric Name
  ## If the keep_exist_metric_name is true, keep the raw value for field names.
  keep_exist_metric_name = true

  interval = "10s"

其他配置按需调整，调整参数说明：