list-watch和节点亲和性和node亲和性

news2024/9/21 12:41:58

k8s的集群调度

scheduler:负责调度资源,把pod调度到node节点

预算策略

优先策略

1、list-watch

k8s集群当中,通过list-watch的机制进行每个组件的协作,保持数据同步,每个组件之间解耦

kubectl配置文件,向APIserver发送命令----apiserver把命令发送到各个组件

kubectl run nginx --image=nginx:1.22 ---- apiserver -----controller manager ---scheduler ---- kubelet管理容器生命周期

创建成功之后,kubectl get pod describe pod nginx----保存在etc的数据库当中

list-watch 会在每一步把监听的消息(监听APIserver:6443)-----每个组件contrlller manager, scheduler, kubelet,etcd都要监听apiserver:6443端口

如何把pod分配到node

2、调度的过程和策略:

scheduler是k8s集群的调取器,把pod分配到集群节点

一下几个问题:

1、公平,每个节点都能够分配资源

2、资源高效利用,集群当中的资源可以被最大化使用

3、效率:调度的性能要好,能够尽快的完成大批量的pod的调度工作

4、灵活:用户允许用户根据自己的需求,控制和改变调度的逻辑

scheduler是一个单独运行的程序,启动之后就会一直监听APIserver 获取报文中的字段:spec.nodeName

创建pod时候,为每个pod创建一个binding,表示该往哪个节点上部署。

创建pod到节点时,有两个策略,先执行预算策略,在执行优先策略,这两步的操作都必须成功,否则立刻返回报错

也就是说,部署的node,必须满足这两个策略

预算策略

predicate自带一些算法,选择node节点(scheduler自带的算法策略,不需要人工干预)

算法:

1、podfitsresources:pod适应资源,检查节点上的剩余资源是否满足pod请求的资源,主要是cpu和内存

2、podfitshost:pod适应主机,如果pod指定了node的name, nginx1pod检测node01是否存在,检测主机名是否存在,存在要和pod指定的名称匹配,之才能调度过去

3、podselectormatches:pod选择器匹配,创建pod的时候也可以根据node节点的标签来进行匹配,查找指定的node节点上标签是否存在,存在的标签是否匹配

4、nodiskconflict:无磁盘冲突,确保已经挂载的卷于pod的卷不发生冲突,除非目录是只读

如果预算策略都不满足,pod将始终处于pending状态,还在不断重启调度,直到有节点满足为止

node1 node2 node3

经过预算策略,上诉三个节点都满足条件 >优选

优先策略

leastrequestedpriority:最低请求优先级,通过算法计算节点上的cpu和内存使用率。确定节点的权重,使用率越低的节点相应的权重越高。调度时会更倾向于使用率低的节点,实现资源合理的利用

balanceresourceallocation:平衡资源分配,cpu和内存使用率,给节点赋予一个权重,权重算的是cpu和内存使用率接近。使用率越接近权重越高

和上面的leastrequestedpriority最低请求优先级一起使用

比如 node1:cpu用了20%内存60%

node2:cpuyongle 50%内存50%

node2在被调度时会被优先选择,node2的有优先级更高

imagelocalitypriority:节点上是否已经有了要部署的镜像。和镜像的总数成正比,满足的镜像数越多,权重越高。

以上这些策略都是scheduler自带的算法。通过预算策略选择出合适的节点,再通过优选策略选择出来最好的节点,以上都是自带的算法,k8s集群自己来选择

指定节点和指定标签

指定节点:

spec参数设置当中

加上nodeName:node02

指定了节点,再参数中设置了nodeName,指定了节点的名称,会跳过scheduler的调度策略。这个规则是强制匹配

指定标签

spec

nodeSelector:

kubectl get nodes --show-labels 查看节点的标签

自定义标签 kubectl lable nodes master01 test1=a

kubectl lable nodes node01 test1=b

kubectl lable nodes node02 test3=c

指定节点标签部署pod,是要经过schedluler的算法,如果节点不满足条件,pod会进入pending状态,直到节点满足条件为止

亲和性:

F

软策略和硬策略

node节点亲和性:

preferredDuringSchedulingIgnoredDuringExecution 软策略:选择node节点时,我声明了最好能部署在node01,软策略会尽量满足这个条件,不一定会完全部署在node01节点上。

requiredDuringSchedulinglgnoredDuringExeution硬策略:选择pod时,声明了node01,如果是硬策略,必须必须部署在node01,也可以理解为强制性要求。

pod的亲和性

preferredDuringSchedulingIgnoredDuringExecution 软策略:要求调度器将pod调度到其他pod的亲和性匹配的节点上,可以是,也可以不是,尽量满足

两个pod nginx1和nginx2 nginx2希望和nginx1部署在一个节点上,会尽量满足

requiredDuringSchedulinglgnoredDuringExeution硬策略

两个pod nginx1和nginx2 必须要和nginx的亲和性匹配,只能部署在node01

键值的运算关系

根据标签选择亲和性

In:在,选择的标签值在node节点上存在

Notin:不在,选择标签的值不在node节点上

Gt:大于,大于选择的标签值

Lt:小于,小于选择的标签纸

只能比较整数值

亲和性策略更具标签来进行选择

Exists:存在,选择标签对象,不考虑值

DoesNotExist:不存在,选择不具有指定标签的对象,值不考虑。

怎么删除标签

kubectl label nodes master01 test1-

Gt:大于,大于选择的标签值

Lt:小于,小于选择的标签纸

只能比较整数值

亲和性策略更具标签来进行选择

指定键值对的算法为Exists' or 'DoesNotExist不能使用values字段

软策略

多个软策略看的是权重,权重高执行指定的软策略

硬策略先满足策略,在满足软策略

例子

你在部署pod时如何选择策略:

node的亲和性:性能不一致时,我尽量把pod把性能高的多部署,选择软策略

如果节点故障或者维护中,只能选择硬策略,要把故障或者维护的节点剔除。

node01:4核8g

node02: 4核8g

node03: 2核4g

看性能 选择一个软策略,尽量把pod部署在node01和node02上

如果其中一台node03挂了,我会选择硬策略排除挂了的节点

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/1365980.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

城堡世界定制

城堡世界是一款移动应用程序,通常在手机上使用。 该游戏的主要功能丰富多样,用户可以通过购买不同的城堡卡来开启自己的城堡,这不仅可以满足玩家对个性化的追求,还可以让玩家在游戏中获得更多的乐趣。 作为一家专注于互联网领域的…

Linux进程通信——system V进程间通信

目录 system V共享内存 共享内存的原理 共享内存的建立与释放 共享内存的创建 shmget 共享内存的释放 shmctl 共享内存的关联 shmat 共享内存的去关联 shmdt 用共享内存实现serve和client的简单通信 共享内存区是最快的IPC形式。一旦这样的内存映射到共享它的进程的…

分治法:分而治之

排序算法中的快速排序,归并排序都用了分治思想 题目描述: 题目地址:LeetCode 50 数组中的第K个最大元素 题目描述: 题目地址:LeetCode 215

基于ssm的高校智能培训管理系统分析与设计论文

摘 要 如今的年代,已经是步入信息社会了,不仅信息更新速度频繁,信息量也大,在信息时代必须有相应的处理信息的方法,如果还采用以前的结绳记事或者笔写纸记,不仅是信息录入效率上赶不上节奏,在信…

Superset二次开发之提高Charts下载图片分辨率

需求:图片变高清 现状:Charts下载图片功能,下载的图片分辨率太差,用户体验不友好 源码分析 路径1:superset-frontend/src/dashboard/components/SliceHeaderControls/index.tsx接口1:DOWNLOAD_AS_IMAGE路径2:superset-frontend/src/utils/downloadAsImage.ts接口2:d…

VmWare虚拟机的安装

VmWare官方最新版下载地址 vmware官方下载地址 安装流程 安装成功验证 安装完成之后,打开网络中心,一定要确认这里多出两个网络连接,才证明Vmware已经安装成功

静态网页设计——千姿百色旅游网(HTML+CSS+JavaScript)(dw、sublime Text、webstorm、HBuilder X)

前言 声明:该文章只是做技术分享,若侵权请联系我删除。!! 感谢大佬的视频: https://www.bilibili.com/video/BV1oe411m7kH/?vd_source5f425e0074a7f92921f53ab87712357b 源码:https://space.bilibili.co…

编码数据集生成框架 UnitGen 0.4.0:代码文档生成、测试代码生成

UnitGen 是我们从 UnitEval 拆分出来的代码数据集生成项目,旨在为基于开源模型供的私有化部署提供更好的编码数据集。 在结合开源模型 AutoDev 插件之后,你可以使用 UnitGen 结合企业内部现有的代码生成微调数据集,以让模型生成的代码更适合…

【大数据进阶第三阶段之Hive学习笔记】Hive安装

目录 1、环境准备 2、下载安装 3、配置环境变量 4、配置文件 4.1、配置hive-env.sh ​编辑4.2、配置hive-site.xml 5、上传配置jar 6、启动 1、环境准备 安装hadoop 以及 zookeeper、mysql 【大数据进阶第二阶段之Hadoop学习笔记】Hadoop 运行环境搭建-CSDN博客 《z…

AntDB内存管理之内存上下文之如何使用内存上下文

5.如何使用内存上下文 使用内存上下文之前,我们需要先对其进行创建。AntDB启动时已经创建并初始化好了部分内存上下文,例如:TopMemoryContext。这个TopMemoryContext是所有内存上下文的父节点或者祖先节点。一般我们创建的内存上下文都在Top…

【docker笔记】Docker容器数据卷

Docker容器数据卷 卷就是目录或者文件,存在于一个或多个容器中,由docker挂载到容器,但不属于联合文件系统,因此能够绕过Union File System提供一些用于持续存储或共享数据的特性 卷的设计目的就是数据的持久化,完全独…

西南地区直播产业市场规模分析,透视成都直播基地产业全景

直播电商已进入全民化发展,作为一种新型的电子商务形式,成都直播产业园利用互联网渠道进行营销,为用户提供更具高度互动性、专业性、丰富、直观、实时的全面购物体验。本年度,西南地区直播产业市场规模宏大,以成都为代…

mysql服务多实例运行

1、官网下载mysql安装包 https://downloads.mysql.com/archives/community/ 2、解压安装包 tar -zxvf mysql-8.1.0-linux-glibc2.28-aarch64.tar.xz -C /usr/localmv /usr/local/mysql-8.1.0-linux-glibc2.28-aarch64 /usr/local/mysql 3、创建mysql用户组 groupadd…

【面试】 前端竞争压力大?揭秘让你们学后端的真实动机!

前端开发属于程序员吗? 网友是这样回答的: 看完前端同学的评论,我悟了,你们让人都去学后端卷,然后减小前端竞争压力是吧? 哈哈哈,你们这帮老6…… 于是我去拿出了我收藏的 某前端招聘JD来盘一盘 那些…

APP加固技术及其应用

文章目录 引言 APP加固的概念 APP加固的方案 APP加固在实际开发中的应用 总结 引言 在移动应用开发过程中,APP加固技术起到了非常重要的作用。APP加固是将apk文件进行混淆加密,以防止别人反编译获取我们的源码和资源文件。目前市场上主流的APP加固…

【ros笔记】urdf文件

urdf文件属于xml文件&#xff0c;他的标签有&#xff1a; <robot name"robot_name"><!-- 看的见摸的着刚体用link --><link name"base_link"><!-- 可视化部分 --><visual><!-- 几何形状 --><geometry><!-- b…

VOSviewer分析知网文献以及图片导出

目录 1.结果展示&#xff1a;2.操作步骤&#xff1a;2.1创建图片&#xff1a;2.2调整图片&#xff1a;2.3保存图片&#xff1a; 小结&#xff1a; 1.结果展示&#xff1a; 2.操作步骤&#xff1a; 2.1创建图片&#xff1a; 在知网上搜索关键词&#xff0c;然后将所有文献以相…

SpringBoot怎么写一个自定义的starter,Gradle依赖引入starter的Jar包

1.新建一个Spring的项目myasset-spring-boot-starter 项目结构如下: 注意:不需要Application启动类 和 application.yml/application.properties文件 2. resources下添加spring.factories文件 # Auto Configure org.springframework.boot.autoconfigure.EnableAutoConfigu…

Prometheus实战篇:Prometheus监控rabbitmq

Prometheus实战篇:Prometheus监控rabbitmq 准备环境 docker-compose安装rabbitmq 这里注意rabbitmq需要暴露2个端口 docker-compose.yaml version: 3 services:rabbitmq:image: rabbitmq:3.7.15-managementcontainer_name: rabbitmqrestart: alwaysvolumes:- /data/rabbitmq…

计算机网络(超级详细笔记)

使用教材计算机网络&#xff08;第8版&#xff09;&#xff08;谢希仁&#xff09; 第一章&#xff1a;概述 第二章&#xff1a;物理层 第三章&#xff1a;数据链路层 第四章&#xff1a;网络层 第五章&#xff1a;运输层 第六章&#xff1a;应用层 目…