云计算的学习(二)

news2024/11/28 16:49:15

二、计算虚拟化

1.计算虚拟化的介绍

1.1虚拟化简介

a.什么是虚拟化

将物理设备逻辑化,转化成文件或者文件夹,这个文件或文件夹一定包含两个部分:一部分用于记录设备配置信息,另一部分记录用户数据。

虚拟机摆脱了服务器的禁锢,允许虚拟机在集群内迁移。

b.计算虚拟化发展史

在这里插入图片描述

c.计算虚拟化中的重要概念

在这里插入图片描述

Host Machine:物理机;一定需要转配操作系统(Host OS)

Hypervisor:虚拟化软件层/虚拟机监控机(Virtual Machine Monitor,VMM);虚拟化核心,负责监控虚拟机状态,给虚拟机分配CPU,以及IO虚拟化。

Guest Machine:虚拟出来的虚拟机。

Guest OS:虚拟机操作系统。

d.计算虚拟化的分类

①裸金属型虚拟化(Bare Metal Server,BMS,Ⅰ型模型)
在这里插入图片描述

Hypervisor可以直接调用硬件资源,不需要底层的Host OS,也可以理解为在Ⅰ型虚拟化中Hypervisor本身就是一个定制的Host OS,除了能够起到VMM的作用以外,一般不能在这个Host OS上安装其他的应用。

Hypervisor主要实现两个基本的功能,首先是识别、捕获、响应虚拟机所发出的CPU特权指令或保护指令,其次是负责处理虚拟机队列和调度,并将物理硬件的处理结果返回给相应的虚拟机。

Hypervisor将负责管理所有的资源和虚拟环境,VMM可以作为一个为虚拟化而生的完整的操作系统,掌控的所有资源(内存、CPU、IO设备等),还承担管理资源的重任,向上提供虚拟机用于运行Guest OS,向下负责与硬件的对接。

**主要产品:**VMware ESXI 、Proxmox VE、Microsoft Hyper-V、阿里云神龙、华为云BMS、腾讯云黑石

**优点:**虚拟机不依赖于操作系统;兼容性好,支持多种操作系统和应用;性能好,损耗低

**缺点:**虚拟化内核开发难度大

②宿主型虚拟化(Host-based Model,Ⅱ型模型)
在这里插入图片描述
此模型的物理资源由Host OS管理,虚拟化功能由VMM提供,VMM是底层操作系统(Host OS)上一个普通的应用程序,通过VMM创建相应的虚拟机共享底层的服务器资源,VMM通过调度Host OS的服务获取资源,实现内存、CPU、IO设备的虚拟化,VMM创建出的虚拟机通常作为Host OS的一个进程参与调度。

主要产品:VMware Workstation 、 VirtualBox、Parallels Desktop

优点:简单,易于实现

缺点:安装和应用依赖于组件的操作系统对设备的支持;管理开销大;性能损耗大

e.虚拟化的特点

image.png

分区:一台服务器可以分出很多虚拟机,每太虚拟机拥有自己的操作系统,它们互相间是不干扰的,每个操作系统只能看到它自己的被分配资源(CPU、内存、网卡等)。

隔离:一台服务器上运行了多个Guest OS,如一个Guest OS被攻击,其他Guest OS不受影响,可以正常运行。

封装:虚拟化本质就是将一台服务器逻辑划分成多个文件或文件夹,每个虚拟机都是一个文件夹,里面会分为很多个文件,这就是封装。封装完就可以将操作系统和硬件进行解耦,操作系统就可以跨硬件运行。

独立:当创建一个虚拟机,会产生一个文件夹,当把这个文件夹拷贝到另一台主机指定目录下,也可以正常运行。

1.2计算虚拟化的领域

a.CPU虚拟化

①CPU分级保护域
在这里插入图片描述
在CPU的分级保护域中,CPU被分成了4个环/权限, RING设计的初衷是将系统权限与程序分离出来,使之能够让OS更好的管理当前系统资源,也使得系统更加稳定。

在虚拟化中HostOS和GuestOS或者Hypervisor也是操作系统,应该都具有Ring 0权限,硬件不知道该听谁的指令,这时候引用一种全新指令——敏感指令,具有两种解决方案:全虚拟化和半虚拟化

②全虚拟化
在这里插入图片描述
Guest OS执行敏感指令时Hypervisor也会获取到消息,Hypervisor将指令翻译后再执行敏感指令的执行,调用硬件并将结果返回给Guest OS。

缺点:全虚拟化过程中Guest OS不知道自己时虚拟机执行了一次命令,Hypervisor也翻译并执行了命令,相当于执行了两次命令,所以有一定的性能消耗。

③半虚拟化
在这里插入图片描述

Guest OS发现是敏感指令后调用超级调用(Hypercall),将敏感指令下放给Hypervisor,Hypervisor执行敏感指令,调用硬件并将结果返回给Guest OS。

缺点:很多闭源的操作系统不支持半虚拟化(如:Windows)。

④硬件虚拟化

CPU不再将保护域分为Ring 0到Ring 3,而是分为root模式和非root模式,每个root模式都拥有Ring 0和Ring 3的权限,Guest OS运行在非root模式下的Ring 0上,Host OS运行在root模式下的Ring 0上。

b.内存虚拟化

物理内存面对主机上的多个虚拟机对内存的需求无法解决,因此出现了内存虚拟化。

物理主机分配内存的地址空间时要从0开始,并且内存地址空间是连续的,但是引入虚拟化后,无法满足所有虚拟机对内存使用都从物理地址的0开始的续期需求,也很难保证内存的连续性。

解决办法是进行地址的映射,做内存虚拟化时引入一个新的地址空间,让虚拟机误认为在这里插入图片描述
运行在真实的物理空间中,实际上它看到的是VMM映射给虚拟机的虚拟内存;每个虚拟机都感觉地址是连续的,其实在物理机侧是离散的,而这些都是通过VMM实现的。

c.IO虚拟化

IO虚拟化有三种类型:模拟、半虚拟化、IO透传

①模拟(完全虚拟):完全使用软件来模拟真实硬件,模拟通常硬件,例如鼠标键盘,通过焦点捕获,焦点被哪个主机捕获就被哪个主机使用,性能很差

②半虚拟化:对硬件驱动由前端(IO frontend)直接转到后端(IO backend)通用,通常仅使用于硬盘和网卡,性能高

③IO-through:IO透传,直接分配给虚拟机物理设备,例如直接分配一个硬盘或网卡给虚拟机,需要硬件具备IO透传技术,在xen下由Dom0分配,但是访问使用直接使用,不经过Dom0,需要硬件支持

1.3虚拟化与云计算的区别

虚拟化是为了提高硬件的利用率,将一台物理主机虚拟成多台逻辑主机,可以单独运行不同的应用,由于虚拟的主机逻辑被成一个文件或文件夹,打破了软硬件的强耦合,通过自动迁移文件或文件夹可以提高运行在虚拟机上的业务的。

在云计算中使用虚拟化来单纯地实现IaaS的云服务,一部分的IaaS和Paas是基于虚拟化来实现的,另一部分是基于物理硬件和分布式计算来实现的。

1.4主流计算虚拟化技术

在这里插入图片描述
在这里插入图片描述

KVM:全虚拟化,是Linux内核中的一个模块,用于实现CPU和内存的虚拟化,是Linux的一个进程,其他IO设备需要KVM来实现)。

Xen:全虚拟化/半虚拟化,直接运行在硬件上的,Xen中的虚拟机分为两类:Dom0与DomU;Dom0是一个特权虚拟机,具有直接访问硬件和管理其他DomU的权限,在其他虚拟机启动之前Dom0需要被提前启动;DomU是普通的虚拟机,不能直接访问硬件资源,所有的操作都需要前后端驱动的方式转发给Dom0,再由Dom0完成具体的操作后将结果返回给DomU。

2.KVM简介

2.1什么是KVM

在这里插入图片描述

KVM全称为Kernel-based Virtual Machine,是基于内核的虚拟机,是一种典型的Ⅱ型的全虚拟化,当一个普通的Linux安装了该模块后,会增加三种运行模式,分别是:虚拟模式、用户模式、内核模式。

虚拟模式:主要指虚拟机,包括虚拟机的CPU、内存、磁盘等虚拟设备,被置于一种受限的CPU的模式。

用户模式:主要运行KVM,为虚拟机模拟执行IO类的操作求。

内核模式:可以进行硬件操作,当Guest OS执行IO类操作或特权指令操作的时候,需要向用户模式提交请求,再由用户模式再次发起请求,发送给内核模式,从而进行真正的操作。

2.2KVM的体系

KVM通常被分为三部分:管理工具、KVM、QEMU

在这里插入图片描述
管理工具:用于管理虚拟机的硬件资源。

KVM:实现CPU虚拟化和内存虚拟化。

QEMU:实现IO虚拟化。

2.3Libvirt

在这里插入图片描述

Libvirt是一个强大的管理工具,可以管理虚拟平台,包括KVM、Xen、VMware、Hyper-V等。虚拟平台本身不支持多种语言的运行,Libvirt支持各种开发语言的接口,接通Libvirt便于各种开发语言的插件应用于虚拟平台上。

2.4KVM I/O操作流程-默认

image.png

  1. Guest OS发起一个操作请求发送给虚拟的设备驱动
  2. KVM模块里面有个I/O Trap code,它会捕获这个IO请求
  3. 捕获后KVM将IO请求放到I/O共享页中
  4. 同时KVM也会通知QEMU,QEMU会到I/O共享页中获取这个请求,并查看IO请求的具体需求
  5. QEMU根据IO请求进行模拟,向真实的设备驱动发一个请求
  6. 设备驱动收到QEMU的请求后,会交付给物理硬件处理这个请求
  7. 处理完成后,QEMU将处理结果放到I/O共享页中
  8. 同时通知KVM模块处理结果
  9. KVM模块从I/O共享页中取出结果,并发送给虚拟的设备驱动
  10. 虚拟的设备驱动根据结果进行模拟,并将模拟结果发送给Guest OS,这样整个IO请求就完成了

2.5KVM I/O操作流程-Virtio

让Guest OS与QUEM直接联络不经过KVM,可以简化请求步骤,提高性能。

在Virtio中,IO请求和QEMU返回不再经过KVM,而放在一个叫vring的空间中,这就是半虚拟化。

在这里插入图片描述

3.FusionCompute简介

3.1FusionCompute架构

image.png

FC架构和KVM架构很相似,都是管理工具来管理产品,FC的管理工具是VRM,VRM可以给管理员和用户提供web的图形化管理界面,在上面可以看到虚拟机的状态、虚拟资源池的状态、物理硬件的信息、虚拟机的信息等。

集群向上提供了计算资源、存储资源、网络资源

3.2FusionCompute优势

①可以对虚拟化和物理资源统一管理

②通过VRM可以快速发放虚拟机,复制、模板等

3.3FusionCompute组件

FC由两大组件构成,分别是VRM和CAN

组件功能
CNA①提供虚拟计算
②管理计算节点上的虚拟机
③关机计算节点上的计算、存储、网络资源
VRM①管理集群内的块存储资源
②管理集群内的网络资源(IP/vlan),为虚拟机分配地址
③管理集群内虚拟机的生命周期及虚拟机在计算节点上的分布与迁移
④管理集群内资源的动态调整
⑤通过对虚拟资源、用户数据的统一管理,对外提供弹性计算、存储、网络等服务
⑥通过提供统一的维护管理接口,操作维护人员通过web管理界面远程访问操作

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/741820.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

Centos7安装go语言环境

Centos7安装go语言环境 文章目录 下载解压缩配置变量验证已安装 下载 从go语言官网下载对应的二进制存档包 wget https://dl.google.com/go/go1.12.linux-amd64.tar.gz解压缩 解压缩到/usr/local,将自动在其中创建一个Go树 /usr/local/go tar -C /usr/local -xz…

HashMap学习总结

1. JDK 1.8 主要进行了哪些优化? 1)底层数据结构从“数组链表”改成“数组链表红黑树”,主要是优化了 hash 冲突较严重时,链表过长的查找性能:O(n) -> O(logn)。 2)计算 table 初始容量的方式发生了改…

GLM 130B和chatGLM2-6B模型结构

GLM-130B 一、预训练 采用双向注意力机制,对被遮挡的部分及逆行预测, 可以自由设置单词mask,句子smask,文章gmask,可以根据任务的不同设置mask,文本理解设置单词级别mask,文本生成色湖之句子级别的gmask,glm130B中设置…

Streamsets binlog采集时区问题

通过Streamsets采集mysql binglog增量数据时候,出现数据库中datetime时区问题。 要注意一点是,streamsets的前端展示的时间也是有时区的,后端返回的数据是时间戳,等于做了两次时区的转换 后端binglog时区转换->时间戳->前端…

ELK日志记录——Kibana组件——grok 正则捕获插件

grok 正则捕获插件 grok 使用文本片段切分的方式来切分日志事件 内置正则表达式调用 %{SYNTAX:SEMANTIC} ●SYNTAX代表匹配值的类型,例如,0.11可以NUMBER类型所匹配,10.222.22.25可以使用IP匹配。 ●SEMANTIC表示存储该值的一个变量声明&…

Linux——SIGCHLD信号——第17号信号

目录 什么是僵尸进程? 僵尸进程的目的? 如何避免僵尸进程? 总结: 提到SIGCHLD信号,就不得不先说一个有关僵尸状态的进程知识点了。 什么是僵尸进程? 首先内核会释放终止进程(调用了exit系统调用)所使用的所有存情区,关闭所有打开的文…

计代码行数cloc,一个代码统计行数很好用的工具

分为window、mac系统区分,基本是一样的,一个代码统计行数很好用的工具。 CLOC简介 Cloc是一款使用Perl语言开发的开源代码统计工具,支持多平台使用、多语言识别,能够计算指定目标文件或文件夹中的文件数(files&#x…

Linux——sigaction信号捕捉函数

目录 一.sigaction () ; struct sigaction结构体的成员: sigaction()和signal()函数的区别: 二.sigaction函数的使用 sigaction函数使用案例1: 对该进程发送指定的信号 案例2:对该进程发送多个同类型的信号时: …

vim中文帮助文档安装

vim自带的帮助手册是英文的, 对平时编程的人来说没有多大阅读困难,在何况还有"星级译王"呢, 但是我猜和我一样连英语四级都愁的大有人,可偏偏就有一帮好心人人将其翻译成了中文, 可偏偏我又挡不住诱惑将它安装了, 唉.......又痛失一个学习英文的好机会, 下…

J2EE集合框架Map

目录 一.Map特点 1.无序,键值对,键不能重复,值可以重复 2.键重复则覆盖,没有继承Collection接口 二.遍历方式 1.拿到key,再拿值2.拿到映射关系,键值都有 取出保存所有Entry的Set,再遍历此Set即可 三.HashMap与H…

SpringBoot实现返回值数据脱敏

介绍 SpringBoot实现返回数据脱敏 有时,敏感数据返回时,需要进行隐藏处理,但是如果一个字段一个字段的进行硬编码处理的话,不仅增加了工作量,而且后期需求变动的时候,更加是地狱般的工作量变更。 下面&am…

HLS入门简述

What‘s HLS? HLS(High-Level Synthesis)高层次综合。何谓高层次?意味着我们可以使用高层次的语言来对设计进行描述,如C,C,System C等;那何谓综合呢?HLS在其中起了重要的…

Denosing score matching (公式+代码)

加噪声的分数匹配 def anneal_dsm_score_estimation(scorenet, samples, labels, sigmas, anneal_power2.):# 取出每个样本对应噪声级别下的噪声分布的标准差,即公式中的sigma_i,# 这里的 labels 是用于标识每个样本的噪声级别的,就是 i&…

JavaEE——常见的锁策略、CAS、synchronized 原理(八股)

文章目录 一、常见的锁策略1.乐观锁 & 悲观锁2.轻量级锁 & 重量级锁3.自旋锁 & 挂起等待锁4.互斥锁 & 读写锁5. 公平锁 & 非公平锁 二、CAS1、什么是 CAS2. CAS 的应用场景2.实现自旋锁3. CAS 中的 ABA 问题 三、 Synchronized 原理 一、常见的锁策略 当前…

DataFun: ChatGPT背后的模型详解

ChatGPT背后的模型详解 Overview Transofrmer 各个构件都有一定的作用 Multi-head self attention 每个字的重要性不一样,学习QKV三个矩阵(query,key,value) 多组QKV RLHF ChatGPT训练过程 思维链 COT

C++_简单模拟实现string的基本结构

C中,string早于STL问世。使用string中的构造函数可以实现对string类型的字符串的一系列操作。 今天来模拟C中的string的基本结构。注意仅仅是简单模拟,string内部结构其实非常复杂,并且不同版本的IDEstring的内部结构也不尽相同。尽管有所不…

SpringBoot2+Vue2实战(十五)高德地图集成

1.地图官网&#xff1a; 高德开放平台 | 高德地图API 2.开发文档(web js) 正式集成&#xff1a; 1.再index.html中引入script标签 <script type"text/javascript" src"https://webapi.amap.com/maps?v2.0&key您申请的key值"></script>…

第五章 PCIe介绍 5.1-5.7

5.1 从PCIe的速度说起 为什么SSD要用PCIe接口&#xff1f;因为它快&#xff0c;比SATA快。 Lane&#xff1a;通道&#xff0c;PCIe最多可以有32个通道。 1. PCIe的工作模式 两个设备之间的PCIe连接&#xff0c;叫做一个Link。如下图&#xff0c;设备A和设备B是个双向连接&#…

【读书笔记】只管去做

《只管去做》是一本很容易读完的书&#xff0c;这本书是以故事的形式来阐述把愿景落实到每天的行动中的方法&#xff0c;对我们做人生规划很有帮助。

使用leaflet在html中加载天地图且去掉左上角的缩放图标以及右下角的logo

前言 我们这一节使用轻量化的javascript库leaflet来实现在html中加载天地图&#xff0c;实现类似高德地图、百度地图的效果。 效果图如下&#xff1a; 话不多说&#xff0c;进入主题&#xff01;&#xff01; 一、注册开发者权限 我们需要在天地图平台注册一个账号&#xff0…