【博客647】MetricsQL(VictoriaMetrics)和PromQL(Prometheus)的不同之处

news2024/11/7 11:22:34

MetricsQL(VictoriaMetrics)和PromQL(Prometheus)的不同之处

1、如果对PromSQL不熟悉可以先看以下链接

https://valyala.medium.com/promql-tutorial-for-beginners-9ab455142085

2、与PromQL相比,以下功能在MetricsQL中的实现方式不同,这也改善了用户体验

2-1、MetricsQL 考虑了方括号中窗口之前的前一个点,用于范围函数,例如速率和增加。这允许返回用户对 increase(metric[$__interval]) 查询期望的准确结果,而不是 Prometheus 为此类查询返回的不完整结果

2-2、MetricsQL不推断范围函数结果,(且考虑方括号中窗口之前的前一个点)使得rate函数更为精确

MetricsQL 有意使 rate 和 increase 的实现略有不同。它考虑了前一个时间间隔的最后一个样本,这允许在计算速率或增加时捕获时间序列中的所有信息:

rate-in-msql

rate-in-psql

此外,如果间隔中没有足够的样本用于计算 和 ,MetricsQL 会自动增加方括号中的间隔(也称为后视窗口rate)increase。这解决了放大时出现意外“无数据”错误的问题。

2-3、MetricsQL 在计算rate和increase时不应用外推法。这解决了整数计数器的小数结果问题:

extrapolate

2-4、MetricsQL支持更完善的负偏移

VictoriaMetrics 支持负偏移量,如果启用了特定功能标志, Prometheus 从2.26版开始也支持负偏移量。但是,由于 Prometheus 在额外的 5 分钟内继续使用指标的最后一个值,因此即使使用启用的功能标志,查询结果也不同:

negative-offset

原因:这是因为在获取系列时进行了回溯而不是陈旧,并且它被设置为从查询时间回溯 5m。如果您尝试查询时间为 X 的系列,查询引擎会查找从 X-5m 到 X 的系列并获取最新样本。因此,当您以偏移量 -10m 展望未来时,回溯将找到未来 5m 内的最后一个样本。

相关issue:https://github.com/prometheus/prometheus/discussions/9428

2-5、相比vm,prometheus外推可能带来数据不准确问题:

因为有时候prometheus漏掉了一半的点,然后由于需要外推,就会自动按那个趋势去算,导致以下问题:

下面假设每个点间隔5s,计算间隔10s。1121这种的其实增量1,但是如果外推只取到了中间的数据点1和2,然后根据增量1和只采了一半的数据点来外推乘2倍数,那就是2了,导致错误数据

1-----1-----2------1
   |------|-----|

此时取了中间两个点的增量2-1=1,然后两个点间隔5s,计算间隔又是10s,那就做外推,得到估计的增量是2,就变成了正常数值的2倍,实际就偏差了很多

2-6、MetricsQL支持查询:{name=~“.*”}

PromQL 拒绝这样的查询以防止数据库过载,因为查询会从中选择所有指标。同时,PromQL 不会阻止用户运行几乎相同的查询{name=~“.+”},其目的相同。

2-7、metrics有着比prometheus更大的精度损失

由于使用了压缩算法, VictoriaMetrics 可能会降低超过 15 位小数的值的精度。
虽然这种精度损失在极少数情况下可能很重要,但在大多数实际情况下并不重要,因为测量误差通常比精度损失大得多。

2-8、metricsQL可以省略后视窗口,自动计算

为 Prometheus和在 Prometheus 中选择正确的后视窗口非常重要。否则,可能会返回不正确的数据或不返回任何数据。Grafana甚至引入了一个特殊的变量$__rate_interval来解决这个问题,但它可能会导致比它解决的问题更多的问题:

  • 1、用户需要在数据源设置中配置抓取间隔值才能使其工作;
  • 2、用户仍然需要$__rate_interval手动添加到每个使用的查询rate;
  • 3、如果数据源存储具有不同抓取间隔的指标(例如跨多个数据源的全局视图),它将不起作用;

它仅适用于 Grafana。在 MetricsQL 中,可以省略方括号中的后视窗口。VictoriaMetrics 会根据当前步骤自动选择后视窗口,因此rate(node_network_receive_bytes_total)与rate(node_network_receive_bytes_total[$__interval]). 并且即使间隔太小而无法捕获足够的数据点,MetricsQL 也会自动对其进行扩展。

这就是为什么类似deriv(demo_disk_usage_bytes[1s])Prometheus不返回任何数据,但VictoriaMetrics 的查询会在进行计算之前扩展后视窗口。

2-9、MetricsQL返回step小于scrape interval的rate的预期非空响应结果

rate() 函数为您提供所提供的时间序列的变化率,因此rate(mysql_global_status_questions[10s])基本上会为我们提供过去 10 秒内 MySQL 问题的平均数。到目前为止一切都很好。
但是,如果这个时间序列的分辨率低于 10 秒,例如,如果我们只每分钟测量一次mysql_global_status_questions怎么办?在这种情况下,rate() 函数将不返回任何内容,数据将从图中消失。

MetricsQL在间隔太小而无法捕获足够的数据点时也会自动对其进行扩展

我们查看对于上述情况,prometheus与vm的不同处理方式

rate-in-psql-and-msql.png

2-10、MetricsQL 将scalar类型视为与不带标签的instant vector相同,因为这些类型之间的细微差别通常会使用户感到困惑

2-11、MetricsQL从输出中移除所有NaN值,因此一些查询(如 (-1)^0.5)在 VictoriaMetrics 中返回空结果,而在 Prometheus 中返回一系列 NaN 值。请注意,Grafana 不会为 NaN 值绘制任何线条或点,因此 VictoriaMetrics 和 Prometheus 的最终结果看起来相同。

2-12、MetricsQL 在应用函数后保留指标名称,这不会改变原始时间序列的含义。例如,min_over_time(foo) 或 round(foo) 在结果中留下 foo 指标名称

PromSQL:

input:min_over_time(foo)
output:{xxx} value

MetricsQL:

input:min_over_time(foo)
output:foo{xxx} value

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/624806.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

AI实战营第二期 第六节 《MMDetection代码课》——笔记7

什么是MMDetection? MMDetection 是被广泛使用的检测工具箱,包括了目标检侧、实例分割、全景分割等多个通用检测方向,并支持了 75 个主流和前沿模型, 为用户提供超过 440 个预训练模型, 在学术研究和工业落地中拥有广泛应用。该恇…

帧布局叠放视图

线性视图只会将视图组织到一行或一列中&#xff0c;每个视图都在屏幕上有自己的位置不会重叠。如果希望布局能够重叠&#xff0c;有个很简单的做法就是使用帧布局。 本文实现一个图像上显示文本的例子。 定义帧布局 <?xml version"1.0" encoding"utf-8&quo…

C++类和对象-5

本篇博客来讲述C类和对象中的最后一些内容&#xff0c;即友元和const的使用方法。 目录 1.友元 1.1引入 1.2内容 1.2.1友元函数 1.2.2友元类 1.3内部类 2.const修饰 2.1内容 2.1.1常数据成员 2.1.2常成员函数 2.1.3常对象 2.2示例 1.友元 1.1引入 在讲述友元之…

使用DR对流量进行管理 subnet子集的定义

这里vs可以控制往svc1和svc2流量走的比例&#xff0c;但是这里只假设往svc3里面走。现在想控制的是往pod1和pod2各走多少流量。 流量到了svc3的时候还是使用的是kube-proxy对流量进行转发。 了解DR DR定义的是经过VS之后已经到达service的流量&#xff0c;主要可以用于&#xf…

【深度学习入门:基于Python的理论与实现】

文章目录 神经网络从感知机到神经网络神经网络的例子复习感知机激活函数登场 激活函数sigmoid函数阶跃函数的实现sigmoid函数的实现 sigmoid函数和阶跃函数的比较ReLU函数 3层神经网络的实现符号确认代码实现 输出层的设计恒等函数和softmax函数输出层的神经元数量 手写数字识别…

【ArcGIS Pro二次开发】(36):度分秒转十进制度

经纬度坐标的表达方式比较常用的一般有2种&#xff0c;【度分秒和十进制度】。 在成果展示中&#xff0c;以【度分秒】居多&#xff0c;但如果要将坐标导入ArcGIS中&#xff0c;则一般需要用到【十进制度】&#xff0c;这个转换可以在Excel中进行&#xff0c;也可以在ArcGIS中的…

火龙果MM32F3273G8P开发板MindSDK开发教程4 - 滴嗒定时器Systick的配置

火龙果MM32F3273G8P开发板MindSDK开发教程4 - 滴嗒定时器Systick的配置 1、Systick寄存器 Systick是ARM内核的一个外设&#xff0c;所以在不同芯片的代码上移植比较方便&#xff0c;他总共有4个寄存器&#xff0c; 从Systick定义中可以看到&#xff1a; typedef struct {__I…

Android系统的启动流程(二):SystemServer处理过程

Android系统的启动流程&#xff08;二&#xff09;&#xff1a;SystemServer处理过程 摘要 在上篇文章中&#xff0c;我们已经将启动的进程推进到了ZygoteInit的main中&#xff0c;在ZygoteInit中我们已经知道它的main方法中的forkSystemServer方法将会启动系统服务&#xff0…

机器学习 | 支持向量机SVM | 概念了解向

概念了解向&#xff0c;参考视频&#xff1a; 【小萌五分钟】机器学习 | 支持向量机 SVM &#x1f4da;最大间隔分类器 如下图有两种不同颜色的点。我需要一个分类器告诉我&#xff0c;假设在下图中新加入一个点&#xff0c;应该将它分类至红点还是蓝点。考虑加入一条决策边界…

【4 微信小程序学习 - WXSS-WXML-WXS语法】

1 WXSS相关 1 小程序样式的写法 2 WXSS支持的选择器 3 wxss的扩展 – 尺寸单位RPX rpx是为了屏幕自适应. 4 逻辑判断 wx:if – wx:elif – wx:else 对应v-if <!-- 2.条件判断 --> <view wx:if"{{score > 90}}">优秀</view> <view wx:…

程序员兼职接单的平台列表

最近有很多程序员朋友说想要找一份合适的兼职工作&#xff0c;却苦于找不到一个正规靠谱的平台。今天我特意整理了一份超详尽的程序员兼职接单平台list&#xff0c;各位可以按需选择&#xff0c;也希望大家都能找到心仪的工作~ 中高端开发者必备的兼职接单平台&#xff1a;程序…

Ubuntu 登录提示信息`Message of The Day`(MOTD)定制与开关

一、效果 登录Ubuntu的时候&#xff0c;在控制台可能会弹出一系列提示消息&#xff0c;有欢迎消息、系统信息、更新信息等等&#xff1a; 这些提示消息被称为Message of The Day&#xff0c;简称MOTD。 Ubuntu与其它Linux版本不太一样&#xff0c;它引入了MOTD 的概念。 这些…

如何使用SonarQube+ SonarScanner分析项目

前言&#xff1a; 六一儿童节要玩程序员的玩具&#xff0c;动手试一试挺有意思的 目录 1. 安装sonarqube 2. 获取Sonarqube令牌 3. 下载安装SonarScanner 5. SonarScanner分析项目 7. 查看分析结果 8.常见问题 版本信息&#xff1a; Sonarqube7.6Sonar-scanner-4.8.0 …

[操作系统]关于进程的管理

首先注明:仍然是复习阶段,所以和课本可能有些许冲突和不同,只是图谱来自于王道考研2022操作系统,旨在快速梳理操作系统的基本知识 1.进程的定义,概念和特征: 多道程序环境下,多个程序并发执行,因此他们将会失去封闭性,不适宜于管理,所以引入了进程这种概念. 进程是程序的一次…

Python自动化测试:pytest实现关键字驱动

在上一篇文章中&#xff0c;我编写了一个非常简单的关键字驱动程序&#xff0c; 不过这个程序只是跑通了功能&#xff0c;还有很多可以优化的地方&#xff0c;这篇文章我想通过 pytest 来简化自动化测试用例的编写&#xff0c;使用的是比较基础的 pytest 功能。 下篇文章我再写…

spark安装部署

spark安装部署 需要指导私信 所有节点安装scala&#xff0c;安装scala需要安装openjdk-8-jre&#xff08;当前用户如果没有sudo权限可将其加入sudo组里&#xff09;,以ubuntu2204-LTS为例&#xff1a; $ sudo apt update $ sudo apt-get install openjdk-8-jre-headless -y (红…

【03Eclipse 窗口说明】对每个窗口和视图的功能和用途的详细说明导航栏编辑器窗口项目资源管理器

Eclipse 窗口说明 简介 Eclipse 是一款功能强大的集成开发环境&#xff08;IDE&#xff09;&#xff0c;提供了丰富的窗口和视图来支持开发工作。本教程将详细介绍 Eclipse 主要窗口和常见视图的功能和用途。 主要窗口 1. 导航栏 导航栏位于 Eclipse 窗口的顶部&#xff0…

Java学习路线(22)——测试框架Junit

一、单元测试概念 单元测试就是针对最小的功能单元编写测试代码&#xff0c;Java程序最小的功能单元是方法&#xff0c;因此&#xff0c;单元测试就是针对Java方法的测试&#xff0c;进而检查方法正确性。 二、Junit测试框架 &#xff08;一&#xff09;概念&#xff1a; Jun…

认识、使用 yarn

概念 npm 是前端开发过程中常常使用的命令&#xff0c;比如构建 Vue 项目&#xff0c;亦或下载 Vue 项目依赖但是该命令效率低下&#xff0c;且容易出错&#xff0c;有没有更好的解决方案呢?有&#xff0c;Yarn ta是一个快速、可靠且安全的 JS 包管理工具: 快速:Yamn 本地缓…

黑客松指南|如何快速注册参与Sui x KuCoin Labs Hackathon

由Sui和KuCoin Labs联合主办的夏季黑客松&#xff0c;将为开发者、设计师、创业者和区块链爱好者提供一个交流和合作的平台。参与者将有机会利用Sui的先进技术和KuCoin Labs的资源&#xff0c;开发创新的区块链应用和解决方案。 我们鼓励参与者围绕「基础设施和工具」、「NFT、…