Prometheus+Grafana监控Mysql数据库

news2024/11/24 7:07:14

Promethues

Prometheus https://prometheus.io

Prometheus是一个开源的服务监控系统，它负责采集和存储应用的监控指标数据，并以可视化的方式进行展示，以便于用户实时掌握系统的运行情况，并对异常进行检测。因此，如何准确高效地定义监控指标对于异常检测很重要。

Prometheus生态系统由以下几部分构成：

  • Prometheus Server负责监测数据的采集，并存储在本地的时序数据库中。可以通过PromQL语言对这些时许数据进行聚合查询并通过Grafana等工具进行消费展示，或者根据配置的规则发送告警。
  • 被监测的应用，支持临时性Job主动推送指标的中间网关Push Gateway；或者直接通过数据采集组件Exporter从目标处持续搜集数据，并将其转化为Prometheus支持的格式。
  • Alertmanager提供告警功能

在这里插入图片描述
Prometheus是一个独立运行的系统，它并不依赖于网络连接或者其他组件服务，因此在系统崩溃时，依然可以使用它来进行数据监测和问题诊断。

Promethues Exporter组件与传统的数据采集组件不同的是它并不向中央服务器发送数据，而是等待中央服务器主动前来取，prometheus提供多种类型的exporter用于采集各种不同服务的监测数据。

安装配置

Prometheus是Go语言编写的，所以仅依赖二进制编译库，从官网根据操作系统下载对应的二进制库：https://prometheus.io/download/

解压到/opt目录下

tar -xzvf prometheus-2.45.2.linux-amd64.tar.gz -C /opt

解压完成后可以得到如下几个文件

console_libraries consoles LICENSE NOTICE prometheus prometheus.yml promtool

其中prometheus.yml是其配置文件，其内容如下所示

# 全局配置
global:
  scrape_interval: 15s # 设置采集信息的间隔，默认一分钟
  evaluation_interval: 15s # 设置评估数据的间隔，默认一分钟
  # scrape_timeout 采集超时时间默认10s.

# 报警设置
alerting:
  alertmanagers:
    - static_configs:
        - targets:
          # - alertmanager:9093

# 规则文件，一次性加载后间隔固定时间会对监测数据进行评估
rule_files:
  # - "first_rules.yml"
  # - "second_rules.yml"

# 设置采集数据的来源
scrape_configs:
  # 定义采集任务的名字
  - job_name: "prometheus"

		# 定义数据来源，由于prometheus自己会在9090端口暴露自己的监测数据，因此可以通过如下路径采集自身监测数据
		# 默认采用http协议，数据路径参数metrics_path默认为'/metrics'，因此可以从http://localhost:9090/metrics得到监测数据
    static_configs:
      - targets: ["localhost:9090"]

指定使用上述配置文件启动应用

./prometheus --config.file=prometheus.yml

通过http://localhost:9090端口可以看到其检测页面
在这里插入图片描述
通过http://localhost:9090/metrics可以看到prometheus自身的监测数据
在这里插入图片描述
例如其中产生的一个监测指标promhttp_metric_handler_requests_total对prometheus处理的请求总数进行了记录

# HELP promhttp_metric_handler_requests_total Total number of scrapes by HTTP status code.
# TYPE promhttp_metric_handler_requests_total counter
promhttp_metric_handler_requests_total{code="200"} 75
promhttp_metric_handler_requests_total{code="500"} 0
promhttp_metric_handler_requests_total{code="503"} 0

通过 http://localhost:9090/graph可以简单地对指标数据进行可视化查看，不同的标签用不同曲线进行表示
在这里插入图片描述
通过PromSQL表达式可以对查询进行处理，更多查询语言的细节：https://prometheus.io/docs/prometheus/latest/querying/basics/

# 查询特定标签的数据
promhttp_metric_handler_requests_total{code="200"}
# 对数据进行计数
count(promhttp_metric_handler_requests_total)
# 查询
rate(promhttp_metric_handler_requests_total{code="200"}[1m])

Grafana

Grafana: https://grafana.com/

Grafana是一个跨平台的开源的度量分析和可视化工具,支持从多种数据源（如prometheus）获取数据进行可视化数据展示。

下载页面：https://grafana.com/grafana/download?pg=get&plcmt=selfmanaged-box1-cta1

CentOS可以通过yum命令直接安装

sudo yum install -y https://dl.grafana.com/enterprise/release/grafana-enterprise-10.2.3-1.x86_64.rpm

默认安装在/usr/share/grafana目录下

配置

配置文件在/etc/grafana/grafana.ini ，其中服务的协议、域名、端口的配置如下

#################################### Server ####################################
[server]
# Protocol (http, https, h2, socket)
protocol = http

# This is the minimum TLS version allowed. By default, this value is empty. Accepted values are: TLS1.2, TLS1.3. If nothing is set TLS1.2 would be taken
;min_tls_version = ""

# The ip address to bind to, empty will bind to all interfaces
;http_addr =

# The http port  to use
http_port = 3000

# The public facing domain name used to access grafana from a browser
domain = localhost

# Redirect to correct domain if host header does not match domain
# Prevents DNS rebinding attacks
;enforce_domain = false

# The full public facing url you use in browser, used for redirects and emails
# If you use reverse proxy and sub path specify full url (with sub path)
root_url = %(protocol)s://%(domain)s:%(http_port)s/

启动

通过如下命令启动Grafana

sudo systemctl daemon-reload
sudo systemctl start grafana-server
sudo systemctl status grafana-server

之后访问上面配置的3000端口就可以看到Grafana页面，第一次登陆默认用户名和密码都是admin
在这里插入图片描述
配置prometheus数据源
在这里插入图片描述

监控mysql

为mysql数据库创建一个exporter账户

# 切换到自带的权限管理数据库
use mysql; 
# 创建work帐号，同时设置密码   
CREATE USER 'exporter'@'%' IDENTIFIED BY 'Exporter1234!';
# 分配权限
grant SELECT,UPDATE,INSERT,DELETE on *.* To 'exporter'@'%';
# 刷新使配置生效
flush privileges;

从prometheus官网下载mysqld_exporter，之后解压并启动即可

wget https://github.com/prometheus/mysqld_exporter/releases/download/v0.15.1/mysqld_exporter-0.15.1.linux-amd64.tar.gz

tar xvzf mysqld_exporter-0.15.1.linux-amd64.tar.gz

编辑配置文件.my-master.cnf

[client]

user=exporter 

password=Exporter1234!

host=localhost

port=3306

根据配置文件启动mysqld_exporter，并将数据暴露到9104端口，并且通过参数指定暴露的数据

./mysqld_exporter --web.listen-address=localhost:9104 --config.my-cnf=/opt/mysqld_exporter/.my-master.cnf --collect.auto_increment.columns --collect.binlog_size --collect.global_status --collect.engine_innodb_status --collect.global_variables --collect.info_schema.innodb_metrics --collect.info_schema.innodb_tablespaces --collect.info_schema.innodb_cmp --collect.info_schema.innodb_cmpmem --collect.info_schema.processlist --collect.info_schema.query_response_time --collect.info_schema.tables --collect.info_schema.tablestats --collect.info_schema.userstats --collect.perf_schema.eventswaits --collect.perf_schema.file_events --collect.perf_schema.indexiowaits --collect.perf_schema.tableiowaits --collect.perf_schema.tablelocks

修改prometheus配置文件信息并重启prometheus

- job_name: 'mysql_exporter'
    static_configs:
      - labels:
          instance: master:3306 # 主库标签
      - targets:
        - localhost:9104 # mysqld_exporter暴露的端口
      - labels:
          instance: slave:3306 # 从库标签
      - targets:
        - 172.17.191.255:9104

在这里插入图片描述
在Grafana创建Dashboard可视化地观测数据，这里可以选择监控模版来显示mysql的关键指标，模版ID为11323
在这里插入图片描述

可以看到监测页面如下
在这里插入图片描述

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.coloradmin.cn/o/1405950.html

如若内容造成侵权/违法违规/事实不符，请联系多彩编程网进行投诉反馈，一经查实，立即删除！

相关文章

【测试开发】Junit5 + YAML 轻松实现参数化和数据驱动，让 App 自动化测试更高效(一)

【测试开发】Junit5 + YAML 轻松实现参数化和数据驱动，让 App 自动化测试更高效(一)

1. 何为数据驱动 什么是参数化？什么又是数据驱动？经常有人会搞不明白他们的关系，浅谈一下个人的理解，先来看两个测试中最常见的场景： 登录：不同的用户名，不同的密码，不同的组合都需要…
阅读更多...
makefile编译静态链接库（.a文件）

makefile编译静态链接库（.a文件）

文章目录 makefile编译静态链接库（.a文件） makefile编译静态链接库（.a文件） 搞个文件测试静态链接库 aTest.h // // Created by qiufh on 2024-01-23. //#ifndef UNTITLED3_ATEST_H #define UNTITLED3_ATEST_Hclass aTest { pu…
阅读更多...
c语言数据结构:单链表及其相关基础操作

c语言数据结构:单链表及其相关基础操作

目录 0.创建一个额外新的结点 1.链表的概念及其结构 2.单链表的概念 3.单链表的结点的创建 4. 顺序表的打印 5. 链表的尾插 5.1 有关单链表的传参 (重点) 5.1.1 错误的写法 5.1.2 如何修正 5.1.3 正确的写法 5.1.4 看穿二级指针变量 ​编辑 6.链表的头插 7.单链表的…
阅读更多...
C++进阶：多态（下）

C++进阶：多态（下）

1、多态的原理 多态之所以可以实现，主要是因为虚函数表的存在，虚函数表用于记录虚函数的地址，他是一个函数指针数组，在类中用一个函数指针数组指针来指向数组，子类继承了父类的虚函数表，当有重写的情况发生…
阅读更多...
软考14-上午题-编译、解释程序翻译阶段

软考14-上午题-编译、解释程序翻译阶段

一、编译、解释程序【回顾】 目的：高级程序设计语言（汇编语言、高级语言）—【翻译】—>机器语言 1-1、编译方式 将高级语言书写的源程序——>目标程序（汇编语言、机器语言） 包含的工作阶段：词法分…
阅读更多...
latex添加图片以及引用的实例教程

latex添加图片以及引用的实例教程

原理 在 LaTeX 中插入图片，通常是使用 \includegraphics 命令，它是由 graphicx 包提供的。首先，确保在文档的前言部分（\documentclass 之后和 \begin{document} 之前）包含了 graphicx 包。 下面是一个基本的例子来展…
阅读更多...
Hikvision综合安防管理平台files；.css接口存在任意文件读取漏洞 附POC软件

Hikvision综合安防管理平台files；.css接口存在任意文件读取漏洞 附POC软件

免责声明：请勿利用文章内的相关技术从事非法测试，由于传播、利用此文所提供的信息或者工具而造成的任何直接或者间接的后果及损失，均由使用者本人负责，所产生的一切不良后果与文章作者无关。该文章仅供学习用途使用。 1. Hikvisi…
阅读更多...
HIVE中关联键类型不同导致数据重复，以及数据倾斜

HIVE中关联键类型不同导致数据重复，以及数据倾斜

比如左表关联键是string类型，右表关联键是bigint类型，关联后会出现多条的情况 解决方案： 关联键先统一转成string类型再进行关联 原因： 根据HIVE版本不同，数据位数上限不同， 低版本的超过16位会出现这种…
阅读更多...
变分自编码器VAE模型与应用

变分自编码器VAE模型与应用

变分自编码器（VAE，Variational Autoencoder）是一种深度学习模型，用于数据生成和特征学习。它结合了自编码器（autoencoders）和贝叶斯推断。 下面是VAE的详细解释： 自编码器（Autoenco…
阅读更多...
Kafka-消费者-KafkaConsumer分析总结

Kafka-消费者-KafkaConsumer分析总结

KafkaConsumer依赖SubscriptionState管理订阅的Topic集合和Partition的消费状态，通过ConsumerCoordinator与服务端的GroupCoordinator交互，完成Rebalance操作并请求最近提交的offset。 Fetcher负责从Kafka中拉取消息并进行解析，同时参与posi…
阅读更多...
关于网络协议的笔记

关于网络协议的笔记

简介： 协议，网络协议的简称，网络协议是通信计算机双方必须共同遵从的一组约定。如怎么样建立连 接、怎么样互相识别等。只有遵守这个约定，计算机之间才能相互通信交流。它的三要素是：语 法、语义、时序。 为了使数据…
阅读更多...
REVIT二次开发 自动门窗墙体标注

REVIT二次开发 自动门窗墙体标注

步骤1 步骤2 步骤3 using System; using System.Collections.Generic; using System.Linq; using System
阅读更多...
视频转换成文字，原来转换的方法这么简单！

视频转换成文字，原来转换的方法这么简单！

在我们的生活中，不少小伙伴是否遇到过这样的情况？观看网络视频时，由于解说内容极为引人入胜，忍不住想将其内容记录下来，但这手动逐句整理的过程既耗时又费力。幸运的是，经过一番努力查找，确实有…
阅读更多...
Hbas简介：数据模型和概念、物理视图

Hbas简介：数据模型和概念、物理视图

文章目录 说明零 BigTable一 Hbase简介二 HBase 访问接口简介三 行式&列式存储四 HBase 数据模型4.1 HBase 列族数据模型4.2 数据模型的相关概念4.3 数据坐标 五 概念&物理视图 说明 本文参考自林子雨老师的大数据技术原理与应用(第三版)教材内容，仅供学习…
阅读更多...
面试篇-大厂的面试流程和面试注意事项

面试篇-大厂的面试流程和面试注意事项

以前找工作的时候，对于流程中的面试总是好奇流程走到哪一步了，这一轮面试有没有通过，后面不通过还有没有消息通知等问题。今天作为一个求职者和面试官的身份来主要讲一下大厂招聘，内部的面试过程以及流转的流程是什么样的以及该注…
阅读更多...
探幽寻秘，一网打尽—多版本银狐木马加密要素揭秘

探幽寻秘，一网打尽—多版本银狐木马加密要素揭秘

概述 “银狐”木马，自2023年起在国内肆虐，其攻击范围广泛，波及众多企业。在黑产团伙中应用广泛，并且不同团伙采用的攻击手段各异，加载“银狐”的方式层出不穷，最终呈现的“银狐”木马版本也各有差异。观成…
阅读更多...
Buy One Carton of Milk（AtCoder abc331B）

Buy One Carton of Milk（AtCoder abc331B）

阅读更多...
图像处理------负片

图像处理------负片

什么是负片？ 负片是经曝光和显影加工后得到的影像，其明暗与被摄体相反，其色彩则为被摄体的补色，它需经印放在照片上才还原为正像。我们平常所说的用来冲洗照片的底片就是负片。 """将彩色图像转换成负片 "&…
阅读更多...
「 网络安全术语解读 」通用攻击模式检举和分类CAPEC详解

「 网络安全术语解读 」通用攻击模式检举和分类CAPEC详解

引言：在网络安全领域，了解攻击者的行为和策略对于有效防御攻击至关重要。然而，攻击模式的描述和分类方式缺乏统一性和标准化。为了解决这个问题，MITRE公司创建了CAPEC标准，以提供一个共享和统一的攻击模式分类框架。 1…
阅读更多...
计算机网络 第3章（数据链路层）

计算机网络 第3章（数据链路层）

系列文章目录 计算机网络 第1章（概述） 计算机网络 第2章（物理层） 计算机网络 第3章（数据链路层） 文章目录 系列文章目录1. 数据链路层概述1.1 概述1.2 三个重要问题 2. 封装成帧2.1 介绍2.2 透明传输2.3 总…
阅读更多...
推荐文章
最新文章

Copyright @ 2022~2023