【云原生】k8s集群资源监控平台搭建—20230227

news2024/9/25 8:24:58

1. 监控指标

  1. 集群监控
    ①节点资源利用率
    ②节点数
    ③运行pods

  2. pod监控
    ①容器指标
    ②应用程序

2. 监控平台

1. Prometheus

开源的；集成了很多功能，比如监控、报警、数据库等；以HTTP协议周期性的抓取被监控组件的状态以及相应的数据；不需要复杂的集成过程，只需要使用HTTP接口接入就可以了。

2. Grafana

开源的数据分析和可视化的工具；支持多种数据源。

在这里插入图片描述
通过Prometheus抓取数据，进行存储，通过Grafana读取展示可视化。

3. 搭建监控平台

（1）部署Prometheus
使用二进制包或者通过yaml文件部署，这里采用yaml文件部署。
将Windows系统中的yaml文件传入Linux系统，逐个运行。
在这里插入图片描述
在这里插入图片描述

  1. 部署守护进程
    node-exporter.yaml文件内容如下
kubectl create -f node-exporter.yaml  

---
apiVersion: apps/v1
kind: DaemonSet
metadata:
  name: node-exporter
  namespace: kube-system
  labels:
    k8s-app: node-exporter
spec:
  selector:
    matchLabels:
      k8s-app: node-exporter
  template:
    metadata:
      labels:
        k8s-app: node-exporter
    spec:
      containers:
      - image: prom/node-exporter
        name: node-exporter
        ports:
        - containerPort: 9100
          protocol: TCP
          name: http
---
apiVersion: v1
kind: Service
metadata:
  labels:
    k8s-app: node-exporter
  name: node-exporter
  namespace: kube-system
spec:
  ports:
  - name: http
    port: 9100
    nodePort: 31672
    protocol: TCP
  type: NodePort
  selector:
    k8s-app: node-exporter
  1. 部署其他yaml文件
    ①rbac-setup.yaml文件内容
kubectl create -f rbac-setup.yaml

apiVersion: rbac.authorization.k8s.io/v1
kind: ClusterRole
metadata:
  name: prometheus
rules:
- apiGroups: [""]
  resources:
  - nodes
  - nodes/proxy
  - services
  - endpoints
  - pods
  verbs: ["get", "list", "watch"]
- apiGroups:
  - extensions
  resources:
  - ingresses
  verbs: ["get", "list", "watch"]
- nonResourceURLs: ["/metrics"]
  verbs: ["get"]
---
apiVersion: v1
kind: ServiceAccount
metadata:
  name: prometheus
  namespace: kube-system
---
apiVersion: rbac.authorization.k8s.io/v1
kind: ClusterRoleBinding
metadata:
  name: prometheus
roleRef:
  apiGroup: rbac.authorization.k8s.io
  kind: ClusterRole
  name: prometheus
subjects:
- kind: ServiceAccount
  name: prometheus
  namespace: kube-system

②configmap.yaml文件内容

kubectl create -f configmap.yaml	

apiVersion: v1
kind: ConfigMap
metadata:
  name: prometheus-config
  namespace: kube-system
data:
  prometheus.yml: |
    global:
      scrape_interval:     15s
      evaluation_interval: 15s
    scrape_configs:

    - job_name: 'kubernetes-apiservers'
      kubernetes_sd_configs:
      - role: endpoints
      scheme: https
      tls_config:
        ca_file: /var/run/secrets/kubernetes.io/serviceaccount/ca.crt
      bearer_token_file: /var/run/secrets/kubernetes.io/serviceaccount/token
      relabel_configs:
      - source_labels: [__meta_kubernetes_namespace, __meta_kubernetes_service_name, __meta_kubernetes_endpoint_port_name]
        action: keep
        regex: default;kubernetes;https

    - job_name: 'kubernetes-nodes'
      kubernetes_sd_configs:
      - role: node
      scheme: https
      tls_config:
        ca_file: /var/run/secrets/kubernetes.io/serviceaccount/ca.crt
      bearer_token_file: /var/run/secrets/kubernetes.io/serviceaccount/token
      relabel_configs:
      - action: labelmap
        regex: __meta_kubernetes_node_label_(.+)
      - target_label: __address__
        replacement: kubernetes.default.svc:443
      - source_labels: [__meta_kubernetes_node_name]
        regex: (.+)
        target_label: __metrics_path__
        replacement: /api/v1/nodes/${1}/proxy/metrics

    - job_name: 'kubernetes-cadvisor'
      kubernetes_sd_configs:
      - role: node
      scheme: https
      tls_config:
        ca_file: /var/run/secrets/kubernetes.io/serviceaccount/ca.crt
      bearer_token_file: /var/run/secrets/kubernetes.io/serviceaccount/token
      relabel_configs:
      - action: labelmap
        regex: __meta_kubernetes_node_label_(.+)
      - target_label: __address__
        replacement: kubernetes.default.svc:443
      - source_labels: [__meta_kubernetes_node_name]
        regex: (.+)
        target_label: __metrics_path__
        replacement: /api/v1/nodes/${1}/proxy/metrics/cadvisor

    - job_name: 'kubernetes-service-endpoints'
      kubernetes_sd_configs:
      - role: endpoints
      relabel_configs:
      - source_labels: [__meta_kubernetes_service_annotation_prometheus_io_scrape]
        action: keep
        regex: true
      - source_labels: [__meta_kubernetes_service_annotation_prometheus_io_scheme]
        action: replace
        target_label: __scheme__
        regex: (https?)
      - source_labels: [__meta_kubernetes_service_annotation_prometheus_io_path]
        action: replace
        target_label: __metrics_path__
        regex: (.+)
      - source_labels: [__address__, __meta_kubernetes_service_annotation_prometheus_io_port]
        action: replace
        target_label: __address__
        regex: ([^:]+)(?::\d+)?;(\d+)
        replacement: $1:$2
      - action: labelmap
        regex: __meta_kubernetes_service_label_(.+)
      - source_labels: [__meta_kubernetes_namespace]
        action: replace
        target_label: kubernetes_namespace
      - source_labels: [__meta_kubernetes_service_name]
        action: replace
        target_label: kubernetes_name

    - job_name: 'kubernetes-services'
      kubernetes_sd_configs:
      - role: service
      metrics_path: /probe
      params:
        module: [http_2xx]
      relabel_configs:
      - source_labels: [__meta_kubernetes_service_annotation_prometheus_io_probe]
        action: keep
        regex: true
      - source_labels: [__address__]
        target_label: __param_target
      - target_label: __address__
        replacement: blackbox-exporter.example.com:9115
      - source_labels: [__param_target]
        target_label: instance
      - action: labelmap
        regex: __meta_kubernetes_service_label_(.+)
      - source_labels: [__meta_kubernetes_namespace]
        target_label: kubernetes_namespace
      - source_labels: [__meta_kubernetes_service_name]
        target_label: kubernetes_name

    - job_name: 'kubernetes-ingresses'
      kubernetes_sd_configs:
      - role: ingress
      relabel_configs:
      - source_labels: [__meta_kubernetes_ingress_annotation_prometheus_io_probe]
        action: keep
        regex: true
      - source_labels: [__meta_kubernetes_ingress_scheme,__address__,__meta_kubernetes_ingress_path]
        regex: (.+);(.+);(.+)
        replacement: ${1}://${2}${3}
        target_label: __param_target
      - target_label: __address__
        replacement: blackbox-exporter.example.com:9115
      - source_labels: [__param_target]
        target_label: instance
      - action: labelmap
        regex: __meta_kubernetes_ingress_label_(.+)
      - source_labels: [__meta_kubernetes_namespace]
        target_label: kubernetes_namespace
      - source_labels: [__meta_kubernetes_ingress_name]
        target_label: kubernetes_name

    - job_name: 'kubernetes-pods'
      kubernetes_sd_configs:
      - role: pod
      relabel_configs:
      - source_labels: [__meta_kubernetes_pod_annotation_prometheus_io_scrape]
        action: keep
        regex: true
      - source_labels: [__meta_kubernetes_pod_annotation_prometheus_io_path]
        action: replace
        target_label: __metrics_path__
        regex: (.+)
      - source_labels: [__address__, __meta_kubernetes_pod_annotation_prometheus_io_port]
        action: replace
        regex: ([^:]+)(?::\d+)?;(\d+)
        replacement: $1:$2
        target_label: __address__
      - action: labelmap
        regex: __meta_kubernetes_pod_label_(.+)
      - source_labels: [__meta_kubernetes_namespace]
        action: replace
        target_label: kubernetes_namespace
      - source_labels: [__meta_kubernetes_pod_name]
        action: replace
        target_label: kubernetes_pod_name

③prometheus.deploy.yml文件内容

kubectl create -f prometheus.deploy.yml

---
apiVersion: apps/v1
kind: Deployment
metadata:
  labels:
    name: prometheus-deployment
  name: prometheus
  namespace: kube-system
spec:
  replicas: 1
  selector:
    matchLabels:
      app: prometheus
  template:
    metadata:
      labels:
        app: prometheus
    spec:
      containers:
      - image: prom/prometheus:v2.0.0
        name: prometheus
        command:
        - "/bin/prometheus"
        args:
        - "--config.file=/etc/prometheus/prometheus.yml"
        - "--storage.tsdb.path=/prometheus"
        - "--storage.tsdb.retention=24h"
        ports:
        - containerPort: 9090
          protocol: TCP
        volumeMounts:
        - mountPath: "/prometheus"
          name: data
        - mountPath: "/etc/prometheus"
          name: config-volume
        resources:
          requests:
            cpu: 100m
            memory: 100Mi
          limits:
            cpu: 500m
            memory: 2500Mi
      serviceAccountName: prometheus    
      volumes:
      - name: data
        emptyDir: {}
      - name: config-volume
        configMap:
          name: prometheus-config

④prometheus.svc.yml文件内容

kubectl create -f prometheus.svc.yml

---
kind: Service
apiVersion: v1
metadata:
  labels:
    app: prometheus
  name: prometheus
  namespace: kube-system
spec:
  type: NodePort
  ports:
  - port: 9090
    targetPort: 9090
    nodePort: 30003
  selector:
    app: prometheus

⑤查看pod

kubectl get pods -n kube-system

（2）部署Grafana
在这里插入图片描述
①grafana-deploy.yaml文件内容

kubectl create -f grafana-deploy.yaml

apiVersion: apps/v1
kind: Deployment
metadata:
  name: grafana-core
  namespace: kube-system
  labels:
    app: grafana
    component: core
spec:
  replicas: 1
  selector:
    matchLabels:
      app: grafana
      component: core
  template:
    metadata:
      labels:
        app: grafana
        component: core
    spec:
      containers:
      - image: grafana/grafana:7.4.3
        name: grafana-core
        imagePullPolicy: IfNotPresent
        # env:
        resources:
          # keep request = limit to keep this container in guaranteed class
          limits:
            cpu: 100m
            memory: 100Mi
          requests:
            cpu: 100m
            memory: 100Mi
        env:
          # The following env variables set up basic auth twith the default admin user and admin password.
          - name: GF_AUTH_BASIC_ENABLED
            value: "true"
          - name: GF_AUTH_ANONYMOUS_ENABLED
            value: "false"
          # - name: GF_AUTH_ANONYMOUS_ORG_ROLE
          #   value: Admin
          # does not really work, because of template variables in exported dashboards:
          # - name: GF_DASHBOARDS_JSON_ENABLED
          #   value: "true"
        readinessProbe:
          httpGet:
            path: /login
            port: 3000
          # initialDelaySeconds: 30
          # timeoutSeconds: 1
        volumeMounts:
        - name: grafana-persistent-storage
          mountPath: /var/lib/grafana
      volumes:
      - name: grafana-persistent-storage
        emptyDir: {}

②grafana-svc.yaml文件内容

kubectl create -f grafana-svc.yaml

apiVersion: v1
kind: Service
metadata:
  name: grafana
  namespace: kube-system
  labels:
    app: grafana
    component: core
spec:
  type: NodePort
  ports:
    - port: 3000
  selector:
    app: grafana
    component: core

③grafana-ing.yaml文件内容

kubectl create -f grafana-ing.yaml

apiVersion: extensions/v1beta1
kind: Ingress
metadata:
   name: grafana
   namespace: kube-system
spec:
   rules:
   - host: k8s.grafana
     http:
       paths:
       - path: /
         backend:
          serviceName: grafana
          servicePort: 3000

（3）打开Grafana，配置数据源，导入显示模板
①测试

kubectl get svc -n kube-system -o wide

查看端口号，用节点IP+端口号，访问Grafana
默认用户名密码都是：admin
在这里插入图片描述
在这里插入图片描述

②配置数据源，使用Prometheos
在这里插入图片描述
在这里插入图片描述
Url那里填写prometheus对应的CLUSTER-IP
在这里插入图片描述
在这里插入图片描述

③设置显示数据模板
在这里插入图片描述
在这里插入图片描述
选择自己的数据源后import
在这里插入图片描述
导入后即可看到检控看板。
在这里插入图片描述

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.coloradmin.cn/o/376522.html

如若内容造成侵权/违法违规/事实不符，请联系多彩编程网进行投诉反馈，一经查实，立即删除！

相关文章

HarmonyOS Connect “Device Partner”专场FAQ来啦

HarmonyOS Connect “Device Partner”专场FAQ来啦

Device Partner平台是面向AIoT产业链伙伴的一站式服务平台，伙伴可以通过平台获取最新的产品、服务与解决方案，实现智能硬件产品的开发、认证、量产和推广等全生命周期的管理，加入HarmonyOS Connect生态，共同提升消费者的智慧生活体…
阅读更多...
就业天花板？33% 程序员月薪达到 5 万元以上

就业天花板？33% 程序员月薪达到 5 万元以上

2023年，随着互联网产业的蓬勃发展，程序员作为一个自带“高薪多金”标签的热门群体，被越来越多的人所关注。 在过去充满未知的一年中，他们的职场现状发生了一定的改变。那么，程序员岗位的整体薪资水平、婚恋现状、职业…
阅读更多...
主流消息队列RocketMq,RabbitMq比对使用

主流消息队列RocketMq,RabbitMq比对使用

首先整理这个文章是因为我正好有机会实战了一下rocketmq，阿里巴巴的一个开源消息中间件。所以就与以往中rabbitmq进行小小的比较一下。这里主线的根据常见面试问题进行整理。1.消息队列常用的场景1.1.削峰例如我们做得考试系统中，用户通过人脸识别登录系…
阅读更多...
Java查漏补缺（16）网络编程概述、网络通信要素、谈传输层协议：TCP与UDP协议、网络编程API、TCP网络编程、UDP网络编程、URL编程

Java查漏补缺（16）网络编程概述、网络通信要素、谈传输层协议：TCP与UDP协议、网络编程API、TCP网络编程、UDP网络编程、URL编程

Java查漏补缺（16）网络编程概述、网络通信要素、谈传输层协议：TCP与UDP协议、网络编程API、TCP网络编程、UDP网络编程、URL编程本章专题与脉络1. 网络编程概述1.1 软件架构1.2 网络基础2. 网络通信要素2.1 如何实现网络中的主机互相通信2.2 通…
阅读更多...
【全网最细PAT题解】【PAT乙】1024 科学计数法

【全网最细PAT题解】【PAT乙】1024 科学计数法

题目链接 1024 科学计数法 题目描述 科学计数法是科学家用来表示很大或很小的数字的一种方便的方法，其满足正则表达式 [-][1-9].[0-9]E[-][0-9]，即数字的整数部分只有 1 位，小数部分至少有 1 位，该数字及其指数部分的正负号即使对…
阅读更多...
Linux下安装Redis（云服务器）

Linux下安装Redis（云服务器）

一、选择自己需要下载的版本后，右击选择复制链接，然后利用命令进行下载，进入Xshell控制台，输入wget将复制的链接粘帖上 命令如下： wget https://download.redis.io/releases/redis-6.0.5.tar.gz 解压安装Redis解压 将下…
阅读更多...
Pure Admin - 基于 Vue3 / Vite / Pinia 等主流技术栈打造的免费开源中后台管理系统，包含前后端源码

Pure Admin - 基于 Vue3 / Vite / Pinia 等主流技术栈打造的免费开源中后台管理系统，包含前后端源码

有一段时间没有推荐 admin 管理系统了，今天推荐一个完整度很高，教程详细，很容易上手的 admin 框架。 关于 Pure Admin Pure Admin 是一款开源免费且开箱即用的中后台管理系统模版，内置超多页面模板以及基于 node.js 的后端开发源…
阅读更多...
金融信创步入快车道，应“需”而生的监控易运维方案为国产化助力

金融信创步入快车道，应“需”而生的监控易运维方案为国产化助力

在我国“28N”信创三步走战略中，金融信创赫然名列其中，成为最早践行信创理论与实操的行业之一。截止到目前，金融信创渗透率业已仅次于党政部门，位列“8”大重点行业之首。超快的发展速度，让金融信创较早的步入“买方市…
阅读更多...
Android 应用启动速度优化问题分析

Android 应用启动速度优化问题分析

在移动端程序中，用户希望的是应用能够快速打开。启动时间过长的应用不能满足这个期望，并且可能会令用户失望。轻则鄙视你，重则直接卸载你的应用。因此，App打开的速度的快慢是影响用户体验的重要因素之一。本篇文章主要为大家分享&…
阅读更多...
电信网上营业厅用户自服务系统的设计与实现

电信网上营业厅用户自服务系统的设计与实现

技术：Java、JSP等摘要：本文在对目前各种网上营业厅的功能原理进行了分析后，在山西省移动公司实习期间，为保证电信网上营业厅系统中心数据库的安全，设计了一个具有三层结构的网上营业厅，以web页面方式实现了…
阅读更多...
设计模式(十三)----结构型模式之桥接模式

设计模式(十三)----结构型模式之桥接模式

1 概述 现在有一个需求，需要创建不同的图形，并且每个图形都有可能会有不同的颜色。我们可以利用继承的方式来设计类的关系： 我们可以发现有很多的类，假如我们再增加一个形状或再增加一种颜色，就需要创建更多的类。 试…
阅读更多...
linux_实操篇

linux_实操篇

linux_实操篇]六、Linux远程登录6.1为什么linux要远程登录6.2远程登录linux-Xshell76.3远程上传下载文件-Xftp76.3.1解决中文乱码七、vi与vim编辑器7.1vim快速入门7.1.1基本介绍7.1.2 vi与vim常用三种模式7.1.3vi和vim基本使用7.2vi和vim快捷键7.2.1 快捷键练习八、linux的开机…
阅读更多...
Linux MISC 驱动实验

Linux MISC 驱动实验

目录 一、MISC 设备驱动简介 misc_deregister 函数 二、MISC驱动编写 1、编写框架 2、platform结构体对应的函数 2、宏定义和miscbeep设备结构体 3、定义miscdevice结构体 字符设备操作集 4、probe函数 5、remove函数​编辑 验证 6、添加开关 三、总代码 APP mis…
阅读更多...
MySQL-锁

MySQL-锁

MySQL-4-锁概述锁的分类全局锁基本语法：特点表级锁介绍分类表锁读锁测试写锁测试写锁测试元数据锁意向锁分类行级锁介绍行锁间隙锁/临键锁概述 锁是计算机协调多个进程或者线程并发访问某一资源的机制，在数据库中，除传统的计算资源&#xff…
阅读更多...
PCB第六道主流程之AOI，你都知道吗

PCB第六道主流程之AOI，你都知道吗

衔接上文，继续为朋友们分享普通单双面板的生产工艺流程。 如图，第六道主流程为AOI。 AOI的目的为： 利用光学原理，比对资料，进行检验，并附带相应的维修与报废处理。 其子流程，主要为3个。 【…
阅读更多...
面试必刷101 Java题解 -- part 3

面试必刷101 Java题解 -- part 3

part1 – https://blog.csdn.net/qq_41080854/article/details/129204480 part2 – https://blog.csdn.net/qq_41080854/article/details/129224785 面试必刷101 Java题解 -- part 3动规五部曲71、斐波那契数列72、跳台阶73、最小花费爬楼梯74、最长公共子序列(二)75、最长公共…
阅读更多...
比特数据结构与算法（第四章_中_续②）堆解决Topk问题（最小的k个数）

比特数据结构与算法（第四章_中_续②）堆解决Topk问题（最小的k个数）

TopK问题介绍：在N个数中找出最大/小的前K个 （比如在1000个数中找出最大/小的前10个）以前的方法：冒泡排序。时间复杂度： O(N^2)现在找最大的k个数的方法：方法1：堆排序降序，前N个就是最…
阅读更多...
提高香港数据中心安全性的 5 种方法

提高香港数据中心安全性的 5 种方法

在说明如何有效提高香港数据中心安全性之前，让我们快速了解什么是香港数据中心，以及为什么它对任何企业都很重要。 什么是香港数据中心? 无需深入研究复杂的术语和过多的细节，香港数据中心只是负责保存公司大量敏感或专有信息的设施&#xf…
阅读更多...
使用gitee搭建图床，并解决防盗链问题

使用gitee搭建图床，并解决防盗链问题

使用gitee搭建图床，并解决防盗链问题 一、搭建图床（图床—般是指储存图片的服务器） 1、有gitee账号，并搭建一个gitee仓库 点击新建仓库： 填写信息： 新建完就是这个模样了，点击管理&#xff1…
阅读更多...
RFID射频卡写入手机NFC心路小记

RFID射频卡写入手机NFC心路小记

声明： 本文仅是作者学习探索的心里路程日记，如果您看完以后，从中获得了一些知识，作者不胜荣幸。科技是一把双刃剑，利用好了，可以方便生活，利用不当也肯能扰乱公共管理秩序，造成不必要…
阅读更多...
推荐文章
最新文章

Copyright @ 2022~2023