【prometheus上报和使用】

news2024/11/16 21:48:02

prometheus上报和使用

  • prometheus
  • 环境搭建
  • 进行上报
    • Count
      • rate
      • irate
      • increase
    • Gauge
    • histogram
      • 分位线
    • summary

prometheus

Prometheus是由SoundCloud开发的开源监控系统,由GO语言编写而成,采用Pull的方式来获取监控信息,并且提供了多维度的数据模型和灵活的查询接口。Prometheus既支持通过静态文件配置监控对象,还支持自动发现机制,能通过Kubernetes、Consl、DNS等多种方式动态获取监控对象。

环境搭建

接下来先通过docker-compose搭建一个环境,有需要的同学可以私聊我,如下:
在这里插入图片描述
这个是启动之后在本地启动的服务,也是默认的前端,可以在搜索栏中搜索自己上报的指标。

进行上报

然后就是进行上报了,prometheus 使用的metric然后语法是PromQL的语法。然后基于时间维度进行聚合。
然后metric总共分为四种指标,Counter,Gauge,Histogram,Summary。接下来把这些指标都进行上报,看一下演示的代码:

var httpRequestCount = prometheus.NewCounterVec(
	prometheus.CounterOpts{
		Name:      "http_request_count",
		Subsystem: "req",
		Help:      "http request count"},
	[]string{"endpoint"})

var httpRequestGauge = prometheus.NewGauge(
	prometheus.GaugeOpts{
		Name:      "http_request_gauge",
		Subsystem: "req",
		Help:      "http request gauge"})

var httpRequestHistogram = prometheus.NewHistogramVec(prometheus.HistogramOpts{
	Name:      "http_request_duration_histogram",
	Subsystem: "req",
	Help:      "http request duration",
	Buckets:   []float64{10, 40, 50, 70, 100},
}, []string{"endpoint"})

var httpRequestDuration = prometheus.NewSummaryVec(
	prometheus.SummaryOpts{
		Name:       "http_request_duration",
		Subsystem:  "req",
		Help:       "http request duration",
		Objectives: map[float64]float64{0.5: 0.05, 0.9: 0.01, 0.95: 0.005, 0.99: 0.001},
	},
	[]string{"endpoint"},
)

func init() {
	prometheus.MustRegister(httpRequestCount)
	prometheus.MustRegister(httpRequestGauge)
	prometheus.MustRegister(httpRequestDuration)
	prometheus.MustRegister(httpRequestHistogram)
}

func main() {
	http.Handle("/metrics", promhttp.Handler())
	http.HandleFunc("/request", request)
	http.HandleFunc("/request1", request1)
	fmt.Println("服务器启动 :9101")
	err := http.ListenAndServe(":9101", nil)
	if err != nil {
		fmt.Println(err)
	}
}

func request(w http.ResponseWriter, r *http.Request) {
	httpRequestCount.With(map[string]string{"endpoint": r.URL.Path}).Inc()
	start := time.Now()
	n := rand.Intn(100)
	if n >= 90 {
		httpRequestGauge.Dec()
		time.Sleep(100 * time.Millisecond)
	} else {
		httpRequestGauge.Inc()
		time.Sleep(50 * time.Millisecond)
	}

	elapsed := (float64)(time.Since(start) / time.Millisecond)
	httpRequestDuration.WithLabelValues(r.URL.Path).Observe(elapsed)
	httpRequestHistogram.WithLabelValues(r.URL.Path).Observe(elapsed)
	w.Write([]byte("ok"))
}

func request1(w http.ResponseWriter, r *http.Request) {
	httpRequestCount.With(map[string]string{"endpoint": r.URL.Path}).Inc()
	start := time.Now()
	n := rand.Intn(100)
	if n >= 90 {
		httpRequestGauge.Dec()
		time.Sleep(100 * time.Millisecond)
	} else {
		httpRequestGauge.Inc()
		time.Sleep(50 * time.Millisecond)
	}

	elapsed := (float64)(time.Since(start) / time.Millisecond)
	httpRequestDuration.WithLabelValues(r.URL.Path).Observe(elapsed)
	httpRequestHistogram.WithLabelValues(r.URL.Path).Observe(elapsed)
	w.Write([]byte("ok"))
}

这里监听了2个路由,分别是request和request1这两个路由,然后每个指标都会上报四种指标,分别是httpRequestCount,httpRequestGauge,httpRequestHistogram,httpRequestDuration,然后对应的metric的指标分别是Count,Gauge,Histogram,Summary。

Count

请求几次看看这个效果。
在这里插入图片描述
在这里插入图片描述
注意第一个是时间分配图,然后第二个是具体的打点分布图,然后取的是当前的时间也就是选中的时间的点。然后endpoint=“/request”,env=“test”,instance=“127.0.0.1:9101”,job=“metrics”,endpoint是请求的路由,后面的分别是在启动prometheus中指定的参数,如下在这里插入图片描述
因为counte是增长,不会降低,看一下counter的常规用法,需要配合函数一起使用。先简单介绍一下几个相关的函数

rate

rate函数是计算一定范围方向内容内的平均增长率,对应的该时间范围内第一个和最后一个点。看个例子,取5分钟的数据,如下,在这里插入图片描述
在这里插入图片描述
第一个点是22,最后一个点是30,那么平均增长率=(30-22)%30 =0.0266666。然后看一下结果
在这里插入图片描述
然后因为时间和精度问题有一点差距,但是总体是对的上的。

irate

rate可以反应一段时间的平均增长率,但是对于方差过大的数据,存在被平均的情况,比如对于5分钟内的点,第一分钟和第五分钟的这两个点,分别是1,100,那么就会被平均下去,那么irate就登场了。
irate计算范围向量中时间序列的每秒瞬时增加率。这基于最后两个数据点。还是一样举个例子。
可以看出来irate在14:09:26的irate的点是1对应下面,然后对应的值最近的两个点,分别是图二的103和图三的101,平均下就是1了。
图一

图二
图三

increase

increase计算的是一段时间内的差值,例如接下来是increase的值是20如下面图一,然后在15分钟的第一个点107,然后第二个是127,对应的值就20
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

Gauge

这个是可以增加或者减少,和counter相比就是可以减少。
往往计算动态变化的,例如温度变化、内存使用变化。

histogram

这个是柱状图,可以分析当前值的分布图。我们这边上面的代码分为了10, 40, 50, 70, 100这四个桶。然后histogram分为了_bucket,记录的是每个桶里面的值,_sum所有的值的和,_count所有值的数量。
下面的分为别是记录了bucket,sum,count对应的图。
在这里插入图片描述
在这里插入图片描述
在这里插入图片描述

分位线

然后看一下经常所有的99线的语法,一般就是请求耗时。如下因为手动请求样本较少,使用了90线.这个如果就是取的样本就是90%的值是多少
在这里插入图片描述

summary

summary其实有点类似上面的histogram_quantile函数,可以在生成指标的时候指定默认分位数。也就是指定不同的分位所对应的值,举个例子,如图,在这张图中50%的值小于53,90%小于104等等。
在这里插入图片描述

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/30399.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

Linux-sed

sed sed是一种几乎包括所有UNIX平台(包括Linux)的轻量级流编辑器。sed主要用来将数据进行选取、替换、删除、新增的命令 sed [选项] ‘[动作]’ 文件名 选项: -n:一般sed命令会把所有数据都输出到屏幕,如果加入此选项…

vue.js毕业设计,基于vue.js前后端分离订座预约系统设计与实现(H5移动项目)

功能介绍 【后台功能】 广告管理:设置小程序首页轮播图广告和链接 留言列表:所有用户留言信息列表,支持删除 会员列表:查看所有注册会员信息,支持删除 录入资讯:录入资讯标题、内容等信息 管理资讯&#x…

HTTP Only下的XSS攻击

今天继续给大家介绍渗透测试相关知识,本文主要内容是HTTP Only下的XSS攻击。 免责声明: 本文所介绍的内容仅做学习交流使用,严禁利用文中技术进行非法行为,否则造成一切严重后果自负! 再次强调:严禁对未授权…

程序猿成长之路之密码学篇-密码学简介

在阅读本文前需要了解的术语: 授权人/非授权人:授权人指获取了查看数据权限的用户,非授权人则是指未获取到权限的用户。明文/密文:明文指没有加密的数据内容,密文是指加密后的数据内容CIA(密码学中不是美国中情局的意思…

npm 如何更新项目最新依赖包

NPM 是什么? Node 软件包管理器(NPM)提供了各种功能来帮助你安装和维护项目的依赖关系。 由于错误修复、新功能和其他更新,依赖关系可能会随着时间的推移而变得过时。你的项目依赖越多,就越难跟上这些更新。 老旧的软件包会对安全构成威胁&am…

USB-数据传输

一、USB编码-反向不归零编码(NRZI)位填充 规则:数据为0,电平反转,数据为1,电平不翻转;当连续出现6个相同的1穿插一个0,目的是为了防止连续出现多个1导致的同步漂移。 二、USB传输帧 帧是USB传输的时间单位&#xff0…

深入浅出PyTorc——进阶训练技巧

1. 自定义损失函数 1.1 以函数方式定义 手动写出损失的公式并用函数进行存储,方便调用。 def my_loss(output, target):loss torch.mean((output - target)**2)return loss 1.2 以类方式定义 1.2.1 损失函数的继承关系 (1)Loss函数部分继…

POI及EasyExcel

1.谈谈 POI 和 easyExcel 应用场景 1.将用户信息导出为excel表格(导出数据....)2.将Excel表中的信息录入到网站数据库(习题上传....) 开发中经常会设计到excel的处理,如导出Excel,导入Excel到数据库中&…

详解Spring面试IoC和AOP

Spring IOC 和 AOP 文章目录Spring IOC 和 AOP前言什么是 IoC?**为什么叫控制反转**不用IoC:所有对象开发者自己创建使用IoC:对象不用卡法这创建,而是交给Spring框架完成基于XML和基于注解基于XML:基于注解&#xff1a…

TeeChart Pro for .NET 2022.10.24 Crack

.NNET 的 TeeChart 图表控件提供了一个很好的通用组件套件,可以满足无数的图表需求,也针对重要的垂直领域,例如金融、科学和统计领域。 数据可视化 数十种完全可定制和交互式的图表类型、地图和仪表指示器,以及完整的功能集&#…

大一html5期末大作业 :基于html实现传统文化网页设计题材

Web前端开发技术 描述 网页设计题材,DIVCSS 布局制作,HTMLCSS网页设计期末课程大作业 | 国家级非遗 | 非遗文化 | 非遗网页设计 | 非遗保护 | 非遗之旅 | 非遗传承HTML期末大学生网页设计作业 HTML:结构 CSS:样式 在操作方面上运用了html5和…

第八章:堆的讲解与实现

第八章:堆的实现与堆相关的算法一、堆1、什么是堆?2、堆的实现(1)堆的定义(2)接口函数初始化销毁插入删除判断是否为空返回堆顶返回堆中的元素个数打印一、堆 1、什么是堆? 在前面的章节中&am…

机器学习算法交叉验证最频繁犯的6个错误

交叉验证是保证模型有效的方法,同时也是防止模型过拟合的方法。但在有限的数据集中,交叉验证容易出现一些错误使用。 本文将介绍在使用交叉验证中,常见的一些错误情况,希望读者在阅读后可以避免再次犯错。 文章目录技术提升什么是…

轻松玩转树莓派Pico之四、Ubuntu下在线debug环境搭建

目录 1、openocd编译安装 1)安装依赖 2)下载 3)编译 4)安装GDB 2、Picoprobe编译与连接 1)下载、编译 2)开发板连接 3)Picoprobe连接至Linux 3、手工运行openocd和gdb 4、VSCode在线调…

Niantic CEO:AR有望取代二维码,理想的AR眼镜还需3-5年

早前,Niantic CEO John Hanke就曾谈到过对于元宇宙的愿景,相比于VR的沉浸式体验,他认为未来元宇宙应该是将虚拟和现实融合的AR体验。尽管如此,现在还没有一款足够普及的AR眼镜产品,仅依赖手机、平板电脑并不能展现沉浸…

《Linux-常见指令详解》

目录 Linux背景 开源 操作系统的理解 问题 1.空文件占磁盘空间吗? 2.创建的文件是在内存中还是磁盘中? 3.绝对路径和相对路径的区别 4.Linux下的文件后缀可以随便写,不同于Windows 常见指令和权限 查看 Linux 主机 ip 使用 XSh…

Alibaba 官方上线,SpringBoot+SpringCloud 全彩指南(第五版)

Alibaba 作为国内一线互联网大厂,其中 springcloudAlibaba 更是阿里微服务最具代表性的技术之一,很多人只知道 springcloudAlibaba 其实面向微服务技术基本上都有的下面就给大家推荐一份 Alibaba 官网最新版:SpringBootSpringCloud 微服务全栈…

面试系列分布式事务:谈谈2PC的理解

2PC其实就是两阶段提交的分布式事务中事务类型,两阶段提交就是分两个阶段提交: 第一阶段询问各个事务数据源是否准备好。 第二阶段才真正将数据提交给事务数据源。 为了保证该事务可以满足ACID,就引入一个协调者(Cooradinator&…

【OpenCV-Python】教程:3-9 轮廓(2)轮廓特征

OpenCV Python 轮廓特征 【目标】 轮廓矩轮廓周长、轮廓面积轮廓拟合、轮廓凸包、轮廓凹凸性检查外接矩形、最小包围圈椭圆拟合、直线拟合 【代码】 周长、面积、矩 第一幅图像为原始轮廓图像,第二幅图像为轮廓点拟合图像(精度为周长的1/10&#xff…