【Prometheus】Prometheus的二进制部署+Grafana

news2024/11/18 21:38:12

目录

一、Prometheus概述

1、概念

2、核心组件prometheus server：

3、Prometheus的特点：

4、prometheus的存储引擎：TSDB

5、Prometheus组件：

6、Prometheus的工作流程：

7、Prometheus的局限性，以及和zabbix的对比：

二、实验：二进制部署Prometheus

三、总结：

一、Prometheus概述

1、概念

Prometheus：普罗米修斯，是一个开源的监控以及报警系统。整合zabbix的功能，系统，网络，设备。

Prometheus可以兼容网络，设备。容器监控，告警系统。因为他和K8S是一个项目基金开发的产品，天生匹配K8S的原生系统。容器化和云原生的服务适配性很高

Prometheus是一个服务监控系统和时序数据库，提供了一个通用的数据模型和快捷的数据采集，存储和接口查询

2、核心组件prometheus server：

定期从静态配置的监控目标和基于服务发现的自动配置目标中进行拉取数据

拉取到的数据会持久化的保存到存储设备中

先拉取数据，纳入到监控系统当中，才能进行时序数据的采集、存储、告警和展示

他能够直接把apiserver作为服务发现系统使用。可以动态监控和动态发现

3、Prometheus的特点：

  1. 多维的数据模型。根据不同的函数计算方法，对同一数据分析出不同的结论。promSQL语句是难点
  2. 是一个时间序列数据，按照时间的顺序记录系统，已经设备变化的数据，容器化的数据。每个数据都是一个样本。服务器指标数据、应用程序的性能监控、网络数据都是一个时间序列数据
  3. 可以通过静态，也可以通过服务自动发现收集数据
  4. Prometheus自带的原生数据展示不是很优化，有专门为他数据展示的工具，Grafana

4、prometheus的存储引擎：TSDB

  1. 能够存储的数据量很庞大
  2. 大部分都是写入操作
  3. 写入操作时一个时序性添加，大多数情况下都是按照时间排列
  4. 很少更新数据，采集到的数据在秒级或者分钟级就会被写入数据库
  5. 基本数据大，一般超过了内存大小。数据按照一定的时间区间展示，缓存在这里不起作用
  6. 读操作，一般都是高并发的操作。
  7. 就是为了大数据、高并发而生的

5、Prometheus组件：

核心组件：

服务核心组件，采用的是pull方式采集监控数据，通过http协议进行传输，存储时间序列的数据。基于告警规则生成告警通知

1、Prometheus server

是核心组件

核心分为三部分：

1）、retrieval：负责在目标主机抓取监控指标数据

2）、storage：存储，把采集到到的数据保存到磁盘中，默认是保存15天

3）、PromQL：计算展示。负责把数据按照一定的规则，通过指定的语法展示出来，形成一个结果，最后展示出来（grafana）

2、exports

负责在节点收集数据，Node-Exports服务收集服务器节点的状态数据，CPU、内存、网络、磁盘等等都是他收集。默认端口9100

3、client library

客户端库，用于应用程序的内部测量系统。内部测试

4、cadvisor

监控容器内部的资源信息，但是K8S从1.20之后自带这部分组件

5、blackbox-exporter

监控业务容器的存活性

6、Altermanager：

独立的告警莫夸，从Prometheus server收到告警通知之后，Altermanager进行重组、分类、发送到对应的接收方，电子邮件、钉钉、企业微信

7、pushgateway：类似于一个中转站，server端只会使用pull的方式拉取数据，节点的数据只能以上传（push）的方式发送，pushgateway，先把数据保存到pushgateway，Prometheus server统一从pushgateway拉取数据

8、Grafana：

图形化工具

6、Prometheus的工作流程：

  1. Prometheus server，为核心，收集和存储数据（时间序列数据），从监控目标中通过pull方式拉取数据。或者通过pushgateway把采集到的数据，拉取到server当中
  2. 拉取到的数据（监控指标数据），保存到本地的磁盘当中。
  3. 如果监控的指标数据触发了告警，发送到Altermanager模块，然后根据规则发送告警信息
  4. 通过Prometheus的自带uiweb页面，通过他的promQl可以查询出监控数据
  5. Grafana可以介入Prometheus的数据源，把监控数据以集群化的方式展示出来

7、Prometheus的局限性，以及和zabbix的对比：

Prometheus：

1、Prometheus只是一款指标监控系统，不适合存储时间，也不适合保存日志，更多的是一种趋势性的监控和展示。并非是一个精准的数据

2、Prometheus认为最近的监控数据才有查询的需要，保存在本地的数据默认只有15天，不支持大量的历史数据进行存储。也不支持查询过往的历史数据。基于源端存储，上传到influxDB或者openTSDB系统。

3、Prometheus集群化程度不高，一般都是单节点部署

zabbix：

大而全的系统，而且功能非常完善，机制非常成熟。具有完善的web页面。可视化和告警。在zabbix界面上可以完成绝大多数的操作，上手的难度很低，可以快速掌握。

他的集成度太高，定制化比较难，扩展比较差

Prometheus：

最近几年比较火的监控系统，基于go语言开发的。

他只是专注于监控的功能，提供一个简单的UI界面供用户查询。

可视化是Grafana提供，告警是Altermanager提供，第三方来实现

Prometheus比较小巧灵活，但是门槛高

二者之间功能的比较：

指标收集方式：

zabbix：基于server和agent，agent部署在目标服务器，数据传送到server，基于tcp协议进行通信。agent把数据推送到server，或者是server主动发起请求获取客户端agent数据

Prometheus：基于客户单进行数据收集，server会定时与客户端交互，通过pull方式获取监控数据

数据存储：

zabbix：使用外部的数据库来保存数据（mysql）

Prometheus：存储在内置的TSDB当中，时间序列数据库

查询性能：

zabbix：zabbix的查询性能较弱，只能在web界面做一些有限的操作

Prometheus：查询功能强大，自带查询语句。查询结果都是以图形或者表格数据展示的

总的来说，zabbix更成熟，上手难度低，对于传统的服务器，系统和网络都有优秀的监控能力。但是他不适配云原生，不适配容器监控

而Prometheus就是容器化监控，支持K8S的监控功能。但是难，promQL不好学

二、实验：二进制部署Prometheus

上传prometheus-2.45.0.linux-amd64.tar.gz

mkdir -p /opt/prometheus
cd /opt/prometheus
tar xf prometheus-2.35.0.linux-amd64.tar.gz
mv prometheus-2.35.0.linux-amd64 /usr/local/prometheus

scrape_interval: 15s
#采集数据的间隔时间，15秒采集一次。默认1分钟
evaluation_interval: 15s
#告警的间隔时间，15秒告警一次。默认1分钟
scrape_timeout: 
#数据采集的超时时间，默认10s

alerting:
  alertmanagers:
    - static_configs:
        - targets:
          # - alertmanager:9093

rule_files:
  # - "first_rules.yml"
  # - "second_rules.yml"
#配置告警的规则

scrape_configs:
#采集时序数据的源，配置采集的主机。静态、动态两种方式

- job_name: "prometheus"
#每一个监控实例都是以-job_name来表示整体的集合

metrics_path defaults to '/metrics'
#指标数采集的默认路径

static_configs:
#静态配置发现实例（目标节点服务器）

将Prometheus加入到系统服务 

vim /usr/lib/systemd/system/prometheus.service

[Unit]
Description=node_exporter
Documentation=https://prometheus.io/
After=network.target
 
[Service]
Type=simple
ExecStart=/usr/local/bin/node_exporter \
--collector.ntp \
--collector.mountstats \
--collector.systemd \
--collector.tcpstat
 
ExecReload=/bin/kill -HUP $MAINPID
Restart=on-failure
 
[Install]
WantedBy=multi-user.target

时间同步做一下，web访问Prometheus页面
yum -y install ntpdate.x86_64
ntpdate ntp.aliyun.com

静态配置（手动添加）加入node节点：

所有节点上上传node_export，安装配置

mdkir -p /opt/prometheus
cd /opt/prometheus
tar xf node_exporter-1.5.0.linux-amd64.tar.gz
mv node_exporter-1.5.0.linux-amd64.tar.gz/node_exporter /usr/local/bin

将 node_exporter添加到系统服务中

vim /usr/lib/systemd/system/node_exporter.service

[Unit]
Description=node_exporter
Documentation=https://prometheus.io/
After=network.target
 
[Service]
Type=simple
ExecStart=/usr/local/bin/node_exporter \
--collector.ntp \
--collector.mountstats \
--collector.systemd \
--collector.tcpstat
 
ExecReload=/bin/kill -HUP $MAINPID
Restart=on-failure
 
[Install]
WantedBy=multi-user.target

看端口起没起：9100

在master的Prometheus上配置节点

vim prometheus.yml

前端访问

http://20.0.0.61:9090/

安装可视化工具Grafana

安装在master上就可以

rpm -ivh grafana-enterprise-7.5.11-1.x86_64.rpm

http://20.0.0.61:3000/

账号和密码都是admin

关联集群成功

添加监控模版

https://grafana.com/grafana/dashboards

模版网站。找模版，填写模版id

几个常用的模版id：12633、11074、15172

三、总结：

Prometheus就是一个时序数列的图形化监控工具。他不在意数据的持久化，只关注最近的需要查询的数据

更适配K8S集群，当然了，也可以对服务器进行一般监控（内存、CPU、硬盘，网络）

CPU负载：什么原因，什么时间点形成报告，一段时间不降，向上级部门报告

每天记录，每周算平均值

数据要复现，每天都会出现某种情况，占了大量的CPU、内存，这个需要关注

但是不是复现的情况，可以不管，某时限突然增高，但是可以下降，如无特殊需求，可以不用管，但是要记录下来

基本上来说，不是复现的数据，可以不管，但是要记录

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.coloradmin.cn/o/1419226.html

如若内容造成侵权/违法违规/事实不符，请联系多彩编程网进行投诉反馈，一经查实，立即删除！

相关文章

MG7050HAN 基于声表的差分多输出 晶体振荡器 (HCSL)

MG7050HAN 基于声表的差分多输出 晶体振荡器 (HCSL)

基于MG7050 HAN的声表差分多输出晶体振荡器(HCSL)，采用两路或四路差分HCSL（高速电流驱动逻辑）输出，可以减少外部扇出缓冲区，特别适用于需要超低抖动、高频率范围内稳定工作的应用场合。其输出特性曲线超低抖动&#xf…
阅读更多...
OpenGL ES 渲染 NV21、NV12 格式图像有哪些“姿势”？

OpenGL ES 渲染 NV21、NV12 格式图像有哪些“姿势”？

使用2个纹理实现 NV21 格式图像渲染 前文提到渲染 NV21 格式图像需要使用 2 个纹理，分别用于保存 Y plane 和 UV plane 的数据，然后在片段着色器中分别对 2 个纹理进行采样，转换成 RGB 数据。 OpenGLES 渲染 NV21或 NV12 格式图像需要用到 GL_LUMINANCE 和 GL_LUMINANCE_A…
阅读更多...
数学公式OCR识别php 对接mathpix api 使用公式编译器

数学公式OCR识别php 对接mathpix api 使用公式编译器

数学公式OCR识别php 对接mathpix api 一、注册账号官网网址：https://mathpix.com 二、该产品支持多端使用注意说明（每月10次） 三、api 对接第一步创建create keyphp对接api这里先封装两个请求函数，get 和post ，通过官方…
阅读更多...
matlab appdesigner系列-仪器仪表4-旋钮（离散）

matlab appdesigner系列-仪器仪表4-旋钮（离散）

旋钮（离散），或叫分档旋钮，跟旋钮的连续性相区别，呈分档性。 示例：模拟空调档位切换 操作步骤： 1）将旋钮（离散）、信号灯、标签拖拽到画布上，并设…
阅读更多...
自然语言处理（NLP）技术使用

自然语言处理（NLP）技术使用

自然语言处理（NLP）技术使用 以下是一些自然语言处理（NLP）技术的例子：以上只是一些NLP技术的例子，还有许多其他的技术和应用，如文本分类、文本生成、问答系统等。NLP技术的发展正逐渐改变人们与计…
阅读更多...
MySQL解决 恢复从备份点到灾难点之间数据恢复

MySQL解决 恢复从备份点到灾难点之间数据恢复

CSDN 成就一亿技术人！ 今天分享一期 mysql中 备份之后发生灾难造成数据丢失 那么如何恢复中间的数据呢？ 数据库数据高于一切（任何数据是不能丢失的） CSDN 成就一亿技术人！ 目录 1.准备测试数据库 2.备份数据库 观…
阅读更多...
JMeter GUI：测试计划和工作台

JMeter GUI：测试计划和工作台

什么是测试计划？ 测试计划是您添加 JMeter 测试所需元素的地方。 它存储运行所需测试所需的所有元素（如线程组、计时器等）及其相应的设置。 下图显示了测试计划的示例 测试计划是您添加 JMeter 测试所需元素的地方。 它存储运行所需测试…
阅读更多...
UI界面设计新手指南 | 零基础快速入门教程

UI界面设计新手指南 | 零基础快速入门教程

随着互联网的快速发展，许多互联网相关的职位应运而生，其中UI界面设计师是互联网的核心职位之一。UI界面设计已经渗透到我们生活的方方面面，包括网站、应用程序或其他数字平台上的按钮和菜单布局、配色方案和排版。许多人认为 UI界面设计只是关…
阅读更多...
算法-枚举专栏

算法-枚举专栏

（Acwing 140场周赛 5462） 1. 给定一个长度为 的正整数数列 你可以对其中任意个（可以是 个）元素进行修改。 但是，每个元素最多只能修改一次，每次修改：要么令其加 ，要么令其减 。…
阅读更多...
数据结构之最短路径

数据结构之最短路径

数据结构之最短路径 1、单源点最短路径2、每对顶点间的最短路径 数据结构是程序设计的重要基础，它所讨论的内容和技术对从事软件项目的开发有重要作用。学习数据结构要达到的目标是学会从问题出发，分析和研究计算机加工的数据的特性，以便为应…
阅读更多...
【Python笔记-设计模式】建造者模式

【Python笔记-设计模式】建造者模式

一、说明 又称生成器，是一种创建型设计模式，使其能够分步骤创建复杂对象。允许使用相同的创建代码生成不同类型和形式的对象。 (一) 解决问题 对象的创建问题：当一个对象的构建过程复杂，且部分构建过程相互独立时，可…
阅读更多...
idea 创建 spring boot

idea 创建 spring boot

1.创建步骤 2. 编码添加 2.1 这是自动生成的启动函数 package com.example.comxjctest4;import org.springframework.boot.SpringApplication; import org.springframework.boot.autoconfigure.SpringBootApplication;SpringBootApplication public class Application {publi…
阅读更多...
STM32控制DHT11温湿度传感器模块获取温湿度数据

STM32控制DHT11温湿度传感器模块获取温湿度数据

时间记录：2024/1/29 一、DHT11引脚介绍 （1）VCC：电源引脚，3.3-5.5V （2）DATA：数据输入输出引脚 （3）NC：保留引脚，悬空即可 （…
阅读更多...
postgresql慢查询排查和复现

postgresql慢查询排查和复现

postgresql慢查询排查和复现 一. 介绍一张表：pg_stat_activity pg_stat_activity 是 PostgreSQL 中一个非常有用的系统视图，提供了有关当前数据库连接和活动查询的信息。通过查询这个视图，你可以获取有关正在执行的查询、连接的用户、进程 …
阅读更多...
VitePress-04-文档中的表情符号的使用

VitePress-04-文档中的表情符号的使用

说明 vitepress 的文档中是支持使用表情符号的，像 😂 等常用的表情都是支持的。 本文就来介绍它的使用方式。 使用语法 语法 ： :表情名称: 例如 ： :joy: 😂 使用案例代码 # 体会【表情】的基本使用 > hello world …
阅读更多...
设计模式——2_0 职责链（Chain of Responsibility）

设计模式——2_0 职责链（Chain of Responsibility）

楼下一个男人并得要死，那家隔壁的一家唱着留声机，对面是弄孩子。楼上有两人狂笑；还有打牌声，河中的船上有女人哭她死去的母亲。人类的悲欢并不相通，我只觉得他们吵闹 ——鲁迅 定义 使多个对象都有机会处理请求&#…
阅读更多...
VScode注释快捷键，RStudio注释快捷键， Texmaker注释快捷键

VScode注释快捷键，RStudio注释快捷键， Texmaker注释快捷键

VScode：一款界面简单的代码编辑器；RStudio: R语言的IDE，包含代码编辑器，运行，绘图窗口等；Texmaker：Latex编译器（编辑编译），界面简单，个人认为比Te…
阅读更多...
sqli-labs第一关

sqli-labs第一关

1.判断是否存在注入，注入是字符型还是数字型? ?id1 and 11 ?id1 and 12 因为输入and 11与and 12 回显正常，所以该地方不是数字型。 ?id1 ?id1-- 输入单引号后报错，在单引号后添加--恢复正常，说明存在字符注入 2.猜解SQL查…
阅读更多...
安全 输入输出类 XSS CSRF

安全 输入输出类 XSS CSRF

输入输出类（留言板） 执行JS语句（XSS漏洞） XSS漏洞（有输入框就可能-见框就X） 反射型 语句植入并执行 存储型 语句植入到数据库，调用数据库就执行 UA头判断访问者浏览器信息 可以XSS php…
阅读更多...
亚组分析、P交互、P趋势是什么？如何计算呢？

亚组分析、P交互、P趋势是什么？如何计算呢？

亚组分析、P交互、P趋势是什么？如何计算呢？ （1）亚组分析如何计算？ （2）P交互作用的计算方法？ （3）P趋势如何计算？ （1）亚组…
阅读更多...
推荐文章
最新文章

Copyright @ 2022~2023