微服务自动化管理初步认识与使用

news2024/11/24 13:23:19

目录

一、ETCD

1.1、ETCD简介

对于实施工程师：

1.2、特点

1.3. 使用场景

1.4、 关键字

1.5 工作原理

二、ETCD的安装

2.1、下载路径

2.2、介绍

2.3、具体操作

 安装服务端

安装etcd客户端

测试

三、ETCD使用

 3.1、前奏具体操作

3.2、 常用操作

一、ETCD

1.1、ETCD简介

etcd是一个开源的分布式键值存储系统(数据库)，通常用于在分布式系统中存储配置信息、元数据等。它是由CoreOS开发的，基于Raft一致性算法实现高可用性和一致性。etcd提供简单的HTTP API，使得应用程序可以方便地读写存储在其中的键值数据。在Kubernetes等容器编排平台中，etcd通常用于存储集群状态信息。

是CoreOS团队于2013年6月发起的开源项目，它的目标是构建一个高可用的分布式键值(key-value)数据库。

干什么的：是数据库存储数据，监听状态

对于实施工程师：

服务注册于发现，可以做不同宿主机，里面容器互相通信，因为现在服务器不同了一个是Linux一个是Windows他们两通信，所有需要借助etcd完成

1.2、特点

1. 一致性：etcd使用Raft一致性算法来保证集群中数据的一致性，确保数据的可靠性和正确性。

2. 高可用性：etcd支持自动选举和故障转移，即使部分节点故障，集群仍然可以正常运行，保证系统的高可用性。

3. 高性能：etcd使用Go语言编写，具有高效的读写性能，适用于需要快速响应的应用场景。

4. 安全性：etcd支持SSL/TLS加密传输，可以保护数据在网络传输中的安全，同时支持访问控制和认证机制，确保数据的安全性。

5. 简单易用：etcd提供了简单的HTTP API和命令行工具，方便用户进行数据的读写和管理，降低了系统的维护成本。

1、简单的接口，通过标准的HTTP API进行调用，也可以使用官方提供的 etcdctl 操作存储的数据（通信使用）

2、键值对存储

3、有监听机制，可以监听特定键的变化，并作出响应

总的来说，etcd是一个可靠、高效、安全且易用的分布式键值存储系统，适用于构建分布式系统和微服务架构。

监控机制类似之前抖音： 发一个视频----->发消息到注册中心----->监听节点方式变化任务

1.3. 使用场景

  • 服务发现（Service Discovery）（一需要mysql服务，一个找mysql服务，所有他们会去中心找）
  • 消息发布与订阅
  • 负载均衡（多个人找）
  • 分布式通知与协调
  • 分布式锁

1.4、 关键字

Raft：etcd所采用的保证分布式系统强一致性的算法。
Node：一个Raft状态机实例。
Member： 一个etcd实例。它管理着一个Node，并且可以为客户端请求提供服务。
Cluster：由多个Member构成可以协同工作的etcd集群。
Peer：对同一个etcd集群中另外一个Member的称呼。
Client： 向etcd集群发送HTTP请求的客户端。
WAL：预写式日志，etcd用于持久化存储的日志格式。
snapshot：etcd防止WAL文件过多而设置的快照，存储etcd数据状态。
Proxy：etcd的一种模式，为etcd集群提供反向代理服务。
Leader(领导者)：Raft算法中通过竞选而产生的处理所有数据提交的节点。
Follower(跟随者)：竞选失败的节点作为Raft中的从属节点，为算法提供强一致性保证。
Candidate：当Follower超过一定时间接收不到Leader的心跳时转变为Candidate开始Leader竞选。
Term：某个节点成为Leader到下一次竞选开始的时间周期，称为一个Term。
Index：数据项编号。Raft中通过Term和Index来定位数据。

1.5 工作原理


第1部分是HTTP Server： 用于处理用户发送的API请求，以及其它etcd节点的同步与心跳信息请求
第2部分是Store：用于处理etcd支持的各类功能的事务，包括数据索引、节点状态变更、监控与反馈、事件处理与执行等等，是etcd对用户提供的大多数API功能的具体实现
第3部分是Raft：Raft强一致性算法的具体实现，是etcd的核心
第4部分是WAL：Write Ahead Log（预写式日志），是etcd的数据存储方式。除了在内存中存有所有数据的状态以及节点的索引以外，etcd就通过WAL进行持久化存储。
在WAL中，所有的数据提交前都会事先记录日志。Snapshot是为了防止数据过多而进行的状态快照；Entry表示存储的具体日志内容

二、ETCD的安装

2.1、下载路径

  • etcd项目地址：https://github.com/coreos/etcd/
  • etcd下载地址：https://github.com/etcd-io/etcd/releases 根据需要查找对应版本下载即可

2.2、介绍

  • etcd在生产环境中一般推荐集群方式部署
  • etcd使用的2个默认端口号：2379和2380
    2379：用于客户端通信(类似于sqlserver的1433/oracle的1521/mysql的3306)
    2380：用于与集群中的Peer通信
  • 因为etcd是go语言编写的，安装只需要下载对应的二进制文件，并放到合适的路径就行。

2.3、具体操作

1、 创建etc存放路径并切换到下载目录

mkdir /usr/local/mytools && cd /usr/local/mytools

 mytools放etcd工具----安装包

&&：同时执行多个命令

2、下载安装包，并存放到目录上

wget https://github.com/etcd-io/etcd/releases/download/v3.4.3/etcd-v3.4.3-linux-amd64.tar.gz

下载比较慢

3、解压文件到当前目录

 tar xzvf etcd-v3.4.3-linux-amd64.tar.gz

4、进入解压后的文件，查看内容

切换至etcd根目录，运行查看命令ls，里面会有一些文档和2个二进制文件etcd和etcdctl。etcd是server端，etcdctl是客户端

cd etcd-v3.4.3-linux-amd64 && ls

 安装服务端

5、复制到bin，--------------------就安装服务端好了

将etcd和etcdctl二进制文件复制到/usr/local/bin目录, 这样系统中可以直接调用etcd/etcdctl这两个程序

bin：二进制文件

cp etcd etcdctl /usr/local/bin

etcd启动市数据含义 

1.name表示节点名称，默认为default。

2.data-dir 保存日志和快照的目录，默认为当前工作目录default.etcd/目录下。

3.在http://localhost:2380和集群中其他节点通信。

4.在http://localhost:2379提供客户端交互。

5.heartbeat为100ms，该参数的作用是leader多久发送一次心跳到followers，默认值是100ms。

6.election为1000ms，该参数的作用是重新投票的超时时间，如果follow在该时间间隔没有收到心跳包，会触发重新投票，默认为1000ms。

7.snapshot count为10000，该参数的作用是指定有多少事务被提交时，触发截取快照保存到磁盘。

8.集群和每个节点都会生成一个uuid。

9.启动的时候会运行raft，选举出leader

6、查看etcd版本

etcd --version

安装etcd客户端

注意：etct3.4.3默认使用v3命令所以步骤7可省略，之前版本此步骤不可少，例如：v3.3.10

1、配置环境变量

#编辑配置文件
vi /etc/profile

加的内容：

# 最后一行指定etcdctl命令的版本为v3
export ETCDCTL_API=3

i进入编辑模式，ESC :wq退出并保存

2、 刷新环境变量 


source /etc/profile


#查看当前etcdctl的版本信息
#v2版本命令和v3命令是不一样的，例如：
#v2查看版本号
etcdctl -version或 etcdctl -v
#v3查看版本号
etcdctl version
# 更多命令帮助可以查询
etcdctl --help  

测试

#v3查看版本号
etcdctl version

三、ETCD使用

 3.1、前奏具体操作

  1. 建立两个etcd相关目录(即数据文件和配置文件的保存位置，类似mysql里面的data文件夹)
    /etc目录是整个Linux系统的中心，其中包含所有系统管理和维护方面的配置文件，所以etcd的配置也放在这里

1、创建文件夹

创建新的：因为etcd做一个数据库，默认之前安装的服务，不去指定存储路径，所有需要做配置，重新做一个新的etcd服务，所有只具备存储数据功能

mkdir -p /var/lib/etcd/ && mkdir -p /etc/etcd/

lib存数据，etc放配置文件夹 

2、切换到目录中，创建etcd配置文件

cd /etc/etcd/

3、重命名

 配置文件名必须叫etcd.conf

mv etcd-单机版.conf  etcd.conf

4、做成服务

cd /etc/systemd/system

 

5、服务重命名

  配置文件名必须叫etcd.service

mv etcd-单机版.service  etcd.service

7、重新加载systemd服务

systemctl daemon-reload

  

8、设置开机自启动

systemctl enable etcd

9、查看etcd运行状态

systemctl status etcd

10、启动etcd 

systemctl start etcd

 

其他操作：

停止服务
systemctl stop etcd

重启etcd
systemctl restart etcd
 

3.2、 常用操作

1、 如何获取帮助

etcdctl -h

2、put把值放到键里 

etcdctl put /testdir/testkey "Hello world"

 testdir---键

"Hello world"-----值

支持的选项包括
--ttl '0' 该键值的超时时间(单位为秒)，不配置(默认为0)则永不超时
--swap-with-value value 若该键现在的值是value，则进行设置操作
--swap-with-index '0' 若该键现在的索引值是指定索引，则进行设置操作

3、get通过键获取值

etcdctl get /testdir/testkey

--sort 对结果进行排序
--consistent 将请求发给主节点，保证获取内容的一致性。

4、del删除

# 清空数据--清除所有
etcdctl del / --prefix

#删除所有/test前缀的节点----清除指定的
etcdctl del /test --prefix

 

5、watch监听

#1. 增加一个key，（客户端窗口1）
etcdctl put key1 "hello"



#2. 打开一个新的客户端窗口2，监听key1的变化
etcdctl watch key1

#3. 回到窗口1，向key1 中put新值
etcdctl put key1 "hello work"

# 4. 此时可以在窗口2中看到监听输出


# 查看版本信息
curl http://127.0.0.1:2379/version

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.coloradmin.cn/o/1494745.html

如若内容造成侵权/违法违规/事实不符，请联系多彩编程网进行投诉反馈，一经查实，立即删除！

相关文章

Java开发进大厂面试必备技能，面试初级java工程师问题

Java开发进大厂面试必备技能，面试初级java工程师问题

前言 今天的分享主要是讲下这个 redis，什么是缓存雪崩、穿透和击穿。这三个技术问题是我们平时开发工作中和面试过程中，必须要会的知识点，因为目前的互联网系统没有几个不需要用到缓存的，只要用到缓存的话，就需要掌握…
阅读更多...
【OJ】日期差值与日期累加

【OJ】日期差值与日期累加

个人主页 ： zxctscl 如有转载请先通知 文章目录 1. KY111 日期差值1.1 题目分析1.2 代码 2. KY258 日期累加2.1 题目分析2.2 代码 1. KY111 日期差值 1.1 题目分析 日期之间比较可能会出现给的两个年月日都不相同，这个就不好作差，每个月给的…
阅读更多...
Apache POI 解析和处理Excel

Apache POI 解析和处理Excel

摘要：由于开发需要批量导入Excel中的数据，使用了Apache POI库，记录下使用过程 1. 背景 Java 中操作 Excel 文件的库常用的有Apache POI 和阿里巴巴的 EasyExcel 。Apache POI 是一个功能比较全面的 Java 库，适合处理复杂的 Offi…
阅读更多...
Stable Diffusion V3测评

Stable Diffusion V3测评

1.引言 3月5号，Stability AI发布了介绍Stable Diffusion V3的研究论文，链接地址：戳我 这是目前他们发布的最先进、功能最强大的图像生成器，与一年多前发布的令人印象深刻的 Stable Diffusion V2.1 相比有了大幅升级。SD3所带来的…
阅读更多...
redis进阶(一)

redis进阶(一)

文章目录 前言一、Redis中的对象的结构体如下：二、压缩链表三、跳跃表 前言 Redis是一种key/value型数据库，其中，每个key和value都是使用对象表示的。 一、Redis中的对象的结构体如下： /** Redis 对象*/ typedef struct redisO…
阅读更多...
软考65-上午题-【面向对象技术】-面向对象分析、设计、测试

软考65-上午题-【面向对象技术】-面向对象分析、设计、测试

一、面向对象分析OOA 1-1、面向对象分析的定义 面向对象分析的目的：为了获得对应用问题的理解。理解的目的是确定系统的功能、性能要求。 面向对象分析包含5个活动：（背！） 认定对象；（重要一点…
阅读更多...
爆肝！Claude3与ChatGPT-4到底谁厉害，看完你就知道了！

爆肝！Claude3与ChatGPT-4到底谁厉害，看完你就知道了！

前言： 相信大家在pyq都被这张图片刷屏了把~ 昨天，为大家介绍了一下什么是Claude，今天咱终于弄到号了（再被ban了3个号之后终于是成功的登上去了，如果各位看官觉得咱文章写的不错，麻烦点个小小的关注~你们的…
阅读更多...
android开发基础有哪些，985研究生入职电网6个月

android开发基础有哪些，985研究生入职电网6个月

不好意思久等了 这篇文章让小伙伴们久等了。 一年多以来，关于嵌入式开发学习路线、规划、看什么书等问题，被问得没有一百，也有大几十次了。但是无奈自己对这方面了解有限，所以每次都没法交代，搞得实在不好意思。 但…
阅读更多...
Linux conntrack和iptables技术解析

Linux conntrack和iptables技术解析

Linux虚拟文件系统管理技术 1. netfilter解析1.1 netfilter的基础原理1.2 netfilter的相关hook 2. conntrack解析2.1 conntrack的基础原理2.2 conntrack的表记录解析 3. iptables解析3.1 iptables基础原理3.2 融合conntrack表的iptables规则 4. 疑问和思考4.1 conntrack和iptab…
阅读更多...
【vue3之组合式API】

【vue3之组合式API】

组合式API 一、setup1.写法2.如何访问3.语法糖4.同步返回对象 二、reactive()和ref()1.reactive()2.ref() 三、computed四、watch函数1侦听单个数据2.侦听多个数据3. immediate4. deep5.精确侦听对象的某个属性 五、生命周期函数六、组件通信1.父传子2. 子传父 七、模版引用1. …
阅读更多...
【C++精简版回顾】20.模板的使用

【C++精简版回顾】20.模板的使用

1.模板起源 1.模板的定义 1.针对函数属性模板 //针对函数属性 template <class VOID > VOID print1(int a) {cout << a << endl; } 2.针对数据属性模板 //针对数据属性 template <typename INT,typename FLOAT> void print2(INT a,FLOAT b) {cout <…
阅读更多...
网工内推 | 华为成都研究所，24届应届生人才储备计划

网工内推 | 华为成都研究所，24届应届生人才储备计划

华为成都研究所 招聘岗位 网络工程师&#xff08;2024应届&#xff09; 岗位要求 24届的学员 本科公办院校 英语4/6级 有HCIP优先 工作地点 成都 私信小编&#xff0c;回复【内推】&#xff0c;获取内推名额申请资格~ 想获取更多『 思科 | 华为 | 红帽 认证真题 』、『 网…
阅读更多...
正向代理和反向代理区别

正向代理和反向代理区别

正向代理和反向代理的区别&#xff1a; 特点正向代理反向代理位置位于客户端和目标服务器之间位于目标服务器和客户端之间代理对象代理服务器代表客户端发送请求到目标服务器代理服务器代表目标服务器接收客户端的请求配置客户端需要手动配置代理服务器客户端不需要知道代理服…
阅读更多...
Redis(5.0)

Redis(5.0)

1、什么是Redis Redis是一种开源的、基于内存、支持持久化的高性能Key-Value的NoSQL数据库&#xff0c;它同时也提供了多种数据结构来满足不同场景下的数据存储需求。 2、安装Redis&#xff08;Linux&#xff09; 2.1、去官网&#xff08;http://www.redis.cn/&#xff09;下…
阅读更多...
7、Redis-事务、持久化、内存淘汰机制和过期key处理

7、Redis-事务、持久化、内存淘汰机制和过期key处理

目录 一、事务 二、持久化 三、内存淘汰机制 四、过期key处理 一、事务 Redis的事务本质上就是一个批量执行命令的操作。分为三个步骤&#xff1a; 开始事务&#xff1a;multi命令入队&#xff1a;正常输入命令即可执行事务&#xff08;依次执行命令&#xff09;&#xf…
阅读更多...
最近开发中遇到的一些问题

最近开发中遇到的一些问题

puppeteer下载失败问题 使用的淘宝镜像&#xff0c;但执行命令npm i puppeteer之后&#xff0c;报错&#xff1a; npm ERR! code 1 npm ERR! path E:\项目-临时\test_install_puppeteer\node_modules\puppeteer npm ERR! command failed npm ERR! command C:\WINDOWS\system3…
阅读更多...
Android开发教程入门，那些被大厂优化的程序员们

Android开发教程入门，那些被大厂优化的程序员们

Binder原理 1、概述 Android系统中&#xff0c;涉及到多进程间的通信底层都是依赖于Binder IPC机制。例如当进程A中的Activity要向进程B中的Service通信&#xff0c;这便需要依赖于Binder IPC。不仅于此&#xff0c;整个Android系统架构中&#xff0c;大量采用了Binder机制作…
阅读更多...
数据库原理（关系代数）

数据库原理（关系代数）

1.集合运算符基础 要求&#xff1a; 具有相同的目n&#xff08;即两个关系都有n 个属性&#xff09;相应的属性取自同一个域t是元组变量&#xff0c; t R表示t是R的一个元组 1.1并 符号&#xff08;&#xff09; R∪S { t|t R∨t S } 结果特征&#xff1a; 仍为n 目关…
阅读更多...
长度为n的数组a初始值全为0，目标是把数组a变为数组b(1＜=bi＜=n), 可以进行任意次操作：选择长度为k的数组c，(1＜=ci＜=n且两两不同)

长度为n的数组a初始值全为0，目标是把数组a变为数组b(1＜=bi＜=n), 可以进行任意次操作：选择长度为k的数组c，(1＜=ci＜=n且两两不同)

对于1<i<k, 把 a[c[i]] 改为c[i % k 1]。给定n&#xff0c;k和数组b&#xff0c;判断能否得到数组b。 题目 思路&#xff1a; #include <bits/stdc.h> using namespace std; #define int long long #define pb push_back #define fi first #define se second #d…
阅读更多...
python使用zmail实现邮件发送

python使用zmail实现邮件发送

一&#xff1a;zmail介绍 1、Zmail的优势 自动填充大多数导致服务端拒信的头信息&#xff08;From To LocalHost之类的)将一个字典映射为email&#xff0c;构造信件就像构造字典一样简单自动寻找邮件服务商端口号地址&#xff0c;自动选择合适的协议&#xff08;经过认证的&am…
阅读更多...
推荐文章
最新文章

Copyright @ 2022~2023