微服务自动化管理【etcd快速集群】

news2024/9/27 21:19:08

  1. 概述
    1.etcd构建自身高可用集群主要有三种形式：
    静态发现
    预先已知etcd集群中有哪些节点，在启动时通过–initial-cluster参数直接指定好etcd的各个节点地址
    etcd动态发现
    静态配置前提是在搭建集群之前已经提前知道各节点的信息，而实际应用中可能存在预先并不知道各节点ip的情况，
    这时可通过已经搭建的etcd来辅助搭建新的etcd集群。通过已有的etcd集群作为数据交互点，然后在扩展新的集群时
    实现通过已有集群进行服务发现的机制。比如官方提供的：discovery.etcd.io
    DNS动态发现:
    通过DNS查询方式获取其他节点地址信息

    本文将介绍如何通过静态发现这种方式来部署一个etcd集群，这种方式也是最简单的

    2.安装环境
    CentOS7
    etcd-v3.4.3-linux-amd64.tar.gz

    本章将通过静态方式部署一个3节点的集群， 以下为3台主机信息

    节点名称 地址(根据自己机器变化)
    node-1 192.168.238.130
    node-2 192.168.238.131
    node-3 192.168.238.132

    注1：通常都是将集群节点部署为3，5，7，9个节点，为什么不能选择偶数个节点？
    1.偶数个节点集群不可用风险更高，表现在选主过程中，有较大概率或等额选票，从而触发下一轮选举。
    2.偶数个节点集群在某些网络分割的场景下无法正常工作。当网络分割发生后，将集群节点对半分割开。
    此时集群将无法工作。按照RAFT协议，此时集群写操作无法使得大多数节点同意，从而导致写失败，集群无法正常工作

  2. 安装etcd
    ##1.创建并切换到下载目录
    ##-p参数作用：没有父目录也可以创建，否则报错
    mkdir -p /usr/local/mytools && cd /usr/local/mytools

    ##2.wget直接下载速度太慢，建议提前下载安装包再用rz上传
    yum install lrzsz
    rz

    ##3.解压文件到当前目录
    tar xzvf etcd-v3.4.3-linux-amd64.tar.gz

    ##4.切换至etcd根目录，运行查看命令ls，里面会有一些文档和2个二进制文件etcd和etcdctl。etcd是server端，etcdctl是客户端
    cd etcd-v3.4.3-linux-amd64 && ls

    ##5.将etcd和etcdctl二进制文件复制到/usr/local/bin目录，why?这样系统中可以直接调用etcd/etcdctl这两个程序
    cp etcd etcdctl /usr/local/bin

    ##6.查看etcd版本
    etcd --version

  3. 创建etcd相关目录即数据文件(即数据文件和配置文件的保存目录)
    mkdir -p /var/lib/etcd/ && mkdir -p /etc/etcd/

  4. 编辑节点node-0配置文件
    vim /etc/etcd/etcd.conf

etcd.conf（每个节点的配置不一样）：

#########################################################
######  请根据各节点实际情况修改配置：1/3/4/5/6/7  ######
#########################################################
#[Member]
#1.节点名称，必须唯一
ETCD_NAME="etcd01"

#2.设置数据保存的目录
ETCD_DATA_DIR="/var/lib/etcd"

#3.用于监听其他etcd member的url
ETCD_LISTEN_PEER_URLS="http://192.168.238.130:2380"

#4.该节点对外提供服务的地址
ETCD_LISTEN_CLIENT_URLS="http://192.168.238.130:2379,http://127.0.0.1:2379"

#[Clustering]
#5.对外公告的该节点客户端监听地址
ETCD_ADVERTISE_CLIENT_URLS="http://192.168.238.130:2379"

#6.该节点成员对等URL地址，且会通告群集的其余成员节点
ETCD_INITIAL_ADVERTISE_PEER_URLS="http://192.168.238.130:2380"

#7.集群中所有节点的信息
ETCD_INITIAL_CLUSTER="etcd01=http://192.168.238.130:2380,etcd02=http://192.168.238.131:2380,etcd03=http://192.168.238.132:2380"

#8.创建集群的token，这个值每个集群保持唯一
ETCD_INITIAL_CLUSTER_TOKEN="etcd-cluster"

#9.初始集群状态，新建集群的时候，这个值为new；
ETCD_INITIAL_CLUSTER_STATE="new"

#10.flannel操作etcd使用的是v2的API，而kubernetes操作etcd使用的v3的API
#   为了兼容flannel，将默认开启v2版本，故配置文件中设置 
ETCD_ENABLE_V2="true"

因为每个节点的conf的配置都不一样，如我的第二个节点配置如下(主要就是修改URL地址,以此类推)：

#########################################################
######  请根据各节点实际情况修改配置：1/3/4/5/6/7  ######
#########################################################
#[Member]
#1.节点名称，必须唯一
ETCD_NAME="etcd02"

#2.设置数据保存的目录
ETCD_DATA_DIR="/var/lib/etcd"

#3.用于监听其他etcd member的url
ETCD_LISTEN_PEER_URLS="http://192.168.238.131:2380"

#4.该节点对外提供服务的地址
ETCD_LISTEN_CLIENT_URLS="http://192.168.238.131:2379,http://127.0.0.1:2379"

#[Clustering]
#5.对外公告的该节点客户端监听地址
ETCD_ADVERTISE_CLIENT_URLS="http://192.168.238.131:2379"

#6.该节点成员对等URL地址，且会通告群集的其余成员节点
ETCD_INITIAL_ADVERTISE_PEER_URLS="http://192.168.238.131:2380"

#7.集群中所有节点的信息
ETCD_INITIAL_CLUSTER="etcd01=http://192.168.238.130:2380,etcd02=http://192.168.238.131:2380,etcd03=http://192.168.238.132:2380"

#8.创建集群的token，这个值每个集群保持唯一
ETCD_INITIAL_CLUSTER_TOKEN="etcd-cluster"

#9.初始集群状态，新建集群的时候，这个值为new；
ETCD_INITIAL_CLUSTER_STATE="new"

#10.flannel操作etcd使用的是v2的API，而kubernetes操作etcd使用的v3的API
#   为了兼容flannel，将默认开启v2版本，故配置文件中设置 
ETCD_ENABLE_V2="true"

注1：修改/etc/etcd/etcd.conf文件要先删除/var/lib/etcd目录下保存的数据，再重新启用服务，不然失败
cd /var/lib/etcd && rm -rf *

注2：ETCD3.4版本中ETCDCTL_API=3和etcd --enable-v2=false成为了默认配置
flannel操作etcd使用的是v2的API，而kubernetes操作etcd使用的v3的API
为了兼容flannel，将默认开启v2版本，故配置文件中还要设置
ETCD_ENABLE_V2=“true”

    ETCD3.4版本ETCDCTL_API=3 etcdctl 和 etcd --enable-v2=false 成为了默认配置，如要使用v2版本，
    执行etcdctl时候需要设置ETCDCTL_API环境变量，例如：ETCDCTL_API=2 etcdctl
  1. 节点etcd01创建一个etcd服务
    vim /etc/systemd/system/etcd.service

每个节点的service的配置都一样:

[Unit]
Description=Etcd Server
Documentation=https://github.com/etcd-io/etcd
After=network.target

[Service]
User=root
Type=notify
## 根据实际情况修改EnvironmentFile和ExecStart这两个参数值
## 1.EnvironmentFile即配置文件的位置，注意“-”不能少
EnvironmentFile=-/etc/etcd/etcd.conf
## 2.ExecStart即etcd启动程序位置
ExecStart=/usr/local/bin/etcd
Restart=always
RestartSec=10s
LimitNOFILE=65536

[Install]
WantedBy=multi-user.target

注1：如果是Centos7以上的系统，它都自带了firewalld防火墙，并使用firewalld作为防火墙，则需要开放端口2379和2380
firewall-cmd --zone=public --add-port=2379/tcp --permanent && firewall-cmd --zone=public --add-port=2380/tcp --permanent && firewall-cmd --reload && firewall-cmd --list-port

注2：etcd 集群搭建，启动时候报错：
master-16 etcd[25461]: request cluster ID mismatch (got bdd7c7c32bde1208 want 698851d67fea3c17)
集群ip地址变化后，除了修改/etc/etcd/etcd.conf 文件并重新启用服务外，还需要删除/var/lib/etcd目录下保存的数据；

    解决办法：删除了etcd集群所有节点中的--data_dir的内容，
    分析： 因为集群搭建过程，单独启动过单一etcd做为测试验证，集群内第一次启动其他etcd服务时候，
    是通过发现服务引导的，所以需要删除旧的成员信息 

    cd /var/lib/etcd && rm -rf *

注3：集群ip地址变化后，除了修改/etc/etcd/etcd.conf 文件并重新启用服务外，还需要删除/var/lib/etcd目录下保存的数据
这里面包括两部分的数据，一是etcd数据库数据、二是etcd集成成员信息数据，都要删除
数据库文件：${name}.etcd
成员数据文件：member/*
此处，与注3的错误性质是一样的

  1. 为节点etcd02/etcd03重复3、4这两个步骤，记得修改对应的IP
    注1：etcd集群最少要同时启动2个节点，集群才能启动成功

  2. 重启etcd服务并查看服务状态
    systemctl daemon-reload && systemctl enable etcd && systemctl start etcd
    systemctl status etcd
    systemctl stop etcd
    systemctl restart etcd

    cd /var/lib/etcd && rm -rf *
    systemctl daemon-reload && systemctl restart etcd

    如果启动失败，可通过如下命令查看原因

    显示概要

    systemctl status etcd.service

    查看启动详情

    journalctl -xe

    显示实时日志

    journalctl -f

    查看本机监听端口

    netstat -tunlp|grep etcd

    journalctl -xe -u etcd //查看日志细节
    netstat -nal //查看接口

    分析命令主要包括
    systemctl list-unit-files 列出所有可用的Unit
    systemctl list-units 列出所有正在运行的Unit
    systemctl --failed 列出所有失败单元
    systemctl mask httpd.service 禁用服务
    systemctl unmask httpd.service
    systemctl kill httpd 杀死服务

    cat /var/log/messages | grep nginx

    systemctl查看完整非截断日志显示详细信息详细日志用
    systemctl status etcd.service -l
    systemctl status etcd -l

  3. 测试集群
    各节点重启启动完成后，在任意节点执行etcdctl member list可列所有集群节点信息，如下所示:
    1.etcdctl命令
    etcdctl member list
    etcdctl member list -w table
    etcdctl endpoint health
    etcdctl endpoint status
    在这里插入图片描述

    2.http命令
    etcdctl --endpoints=http://192.168.199.160:2379,http://192.168.199.157:2379,http://192.168.199.158:2379 endpoint health
    etcdctl --endpoints=http://192.168.199.158:2379 endpoint health
    etcdctl --endpoints=http://192.168.199.160:2379 member list -w table

附录一：3.4注意事项

  1. ETCD3.4版本ETCDCTL_API=3 etcdctl 和 etcd --enable-v2=false 成为了默认配置，
    如要使用v2版本，执行etcdctl时候需要设置ETCDCTL_API环境变量，例如：
    ETCDCTL_API=2 etcdctl
  2. ETCD3.4版本会自动读取环境变量的参数，所以EnvironmentFile文件中有的参数，不需要再次在ExecStart启动参数中添加，
    二选一，如同时配置，会触发以下类似报错
    “etcd: conflicting environment variable “ETCD_NAME” is shadowed by corresponding command-line flag (either unset environment variable or disable flag)”
  3. flannel操作etcd使用的是v2的API，而kubernetes操作etcd使用的v3的API

附录二：linux环境变量的查看
1 使用echo命令查看单个环境变量。例如：
echo $PATH
2 使用env查看所有环境变量。例如：
env
3 使用set查看所有本地定义的环境变量

集群数据一致:
在这里插入图片描述
在这里插入图片描述

本文来自互联网用户投稿，该文观点仅代表作者本人，不代表本站立场。本站仅提供信息存储空间服务，不拥有所有权，不承担相关法律责任。如若转载，请注明出处：http://www.coloradmin.cn/o/150775.html

如若内容造成侵权/违法违规/事实不符，请联系多彩编程网进行投诉反馈，一经查实，立即删除！

相关文章

使用VS Code创建第一个Flutter工程

使用VS Code创建第一个Flutter工程

一、前言 你可以使用任意文本编辑器，再结合命令行工具来开发 Flutter 应用。然而，我们推荐使用本文接下来介绍的编辑器插件以获取更好的开发体验。这些插件提供了代码补全、代码高亮、widget 辅助编辑的功能，以及为项目的运行和调试提供支持…
阅读更多...
【Denial-of-Service on FPGA-based Cloud Infrastructures论文笔记】

【Denial-of-Service on FPGA-based Cloud Infrastructures论文笔记】

基于FPGA的云基础设施拒绝服务摘要引言背景FPGA TechnologyFPGA设计的实现用户设计在AWS的注册用户设计在AWS上的部署基于FPGA的系统攻击与对策客户端的FPGA使用基于云的fpga的使用信息泄露错误注入攻击对策云FPGA上的拒绝服务攻击攻击模型AWS FPGA安全架构AWS EC2 F1强力锤击攻…
阅读更多...
@Validated+循环依赖报错

@Validated+循环依赖报错

目录 测试demo 回顾下三级缓存 循环依赖bean实例化初始化过程​​​​​​​ 源码解读 实例化myZmTest1 myZmTest1依赖myZmTest2，实例化2去注入 myZmTest2依赖myZmTest1，获取myZmTest1去注入 获取到myZmTest1，继续myZmTest2初始化 m…
阅读更多...
TCP协议的三次握手与四次挥手（附带常见面试题）

TCP协议的三次握手与四次挥手（附带常见面试题）

目录 一.TCP/UDP的区别 二.三次握手 三.四次挥手 四.常见面试题 一.TCP/UDP的区别 TCP：TCP协议是面向连接，连接稳定可靠适用于网络连接连接较高的场景，可以准确无误的把数据传递给对方，但传输速度上可能会存在一定的延迟。TCP…
阅读更多...
Leetcode.32 最长有效括号

Leetcode.32 最长有效括号

题目链接 Leetcode.32 最长有效括号 题目描述 给你一个只包含 (和 )的字符串，找出最长有效（格式正确且连续）括号子串的长度。 示例 1： 输入：s “(()” 输出：2 解释：最长有效括号子串是 “()”…
阅读更多...
【报表设计器ActiveReportsJS（二）】第一个 ActiveReportsJS 报表设计器项目，本地化

【报表设计器ActiveReportsJS（二）】第一个 ActiveReportsJS 报表设计器项目，本地化

上一篇：【Vue集成在线报表设计器ActiveReportsJS（一）】前言，ActiveReportsJS介绍， 在 Vue 框架中集成纯前端报表设计器 本篇将介绍如何使用ActiveReportsJS创建第一个web前端报表设计器 1. 创建 Vue应用 创建 Vue …
阅读更多...
GNN笔记系列 5

GNN笔记系列 5

GNN笔记系列 51.Permutation Equivariance of Graph Filters2.Lipschitz and Integral Lipschitz Filters3.Stability of Graph Filters to Scaling4.Stability of Graph Neural Networks to Scaling1.Permutation Equivariance of Graph Filters 图滤波器的置换等价性 引入置…
阅读更多...
【ROS】—— ROS常用组件_TF坐标变换_静态坐标变换与动态坐标变换(十)

【ROS】—— ROS常用组件_TF坐标变换_静态坐标变换与动态坐标变换(十)

文章目录前言1. 坐标msg消息1.1 geometry_msgs/TransformStamped1.2 geometry_msgs/PointStamped2. 静态坐标变换2.1 C实现2.1.1 发布方2.1.2 订阅方2.2 python实现2.2.1 发布方2.2.2 订阅方2.3 补充3. 动态坐标变换3.1 C实现3.1.1 发布方3.1.2 订阅方3.2 python实现3.2.1 发布…
阅读更多...
Gin框架快速入门实战

Gin框架快速入门实战

gin 框架快速入门 工具 测试工具： 浏览器拓展 postwomanapipost gin路由，gin 程序的热加载 gin官网文档： https://gin-gonic.com/zh-cn/docs/ fresh安装 ： go get github.com/pilu/fresh package mainimport ("github…
阅读更多...
Revit标注时尺寸界线的设置及标注避让调整功能

Revit标注时尺寸界线的设置及标注避让调整功能

一、Revit标注时尺寸界线的设置 利用墙体一次性标注轴网尺寸时常遇到如图1所示尺寸边界线上翻的情况，需要手动将其逐一调整，十分繁琐，有没有更为快速地解决方法呢？ 此问题可以通过为这些尺寸界线反向显示的尺寸标注单独设置一个新…
阅读更多...
CHK文件丢失怎么办？chk文件恢复技巧就看这一个！

CHK文件丢失怎么办？chk文件恢复技巧就看这一个！

很多人不知道CHK文件是什么，其实它是一种后缀名为CHK格式的文件，也属于日常生活中比较常见的文件格式。通常，当用户使用“磁盘碎片整理”时，电脑系统会生成一串“群集”文件，这些文件主要用于保存计算机删除的文件的一…
阅读更多...
【中等】最长回文子串-C语言实现

【中等】最长回文子串-C语言实现

题目链接：https://leetcode.cn/problems/longest-palindromic-substring/思路：起始位置为初始位置向右走，即第一次a为起始位置，第二次b为起始位置结束位置从末尾向左走，即第一次c为末尾，第二次b为末尾&…
阅读更多...
BMS中常用的NTC温敏电阻及代码实现

BMS中常用的NTC温敏电阻及代码实现

1、什么是NTC？ NTC热敏电阻是一种负温度系数的热敏电阻，它的性性是阻值随温度的升高而降低，主要作用是对温度的测量及补偿，也用于NTC温度传感器的制作，常用的使用范围在-55℃至200℃之间。 2、NTC的主要技术参数有哪些…
阅读更多...
重发布-路由策略实验1（1.8）

重发布-路由策略实验1（1.8）

目标： 1、首先为每个路由器配置环回和每个接口的ip r1： [r1]interface lo0 [r1-LoopBack0]ip add 1.1.1.1 24 [r1-LoopBack0]int gi 0/0/0 [r1-GigabitEthernet0/0/0]ip add 12.1.1.1 24 [r1-GigabitEthernet0/0/0]int gi 0/0/1 [r1-GigabitEthernet0/…
阅读更多...
Linux--多线程（2）

Linux--多线程（2）

目录1. 条件变量2. 生产者消费者模型2.1 概念3. 基于BlockingQueue的生产者消费者模型3.1 概念3.2 等待函数3.3 等待函数的功能3.4 唤醒函数4. 模型复盘5. 总代码1. 条件变量 当一个线程互斥地访问某个变量或者临界资源时，它可能发现在其它线程改变状态之前&#x…
阅读更多...
物以类聚人以群分,通过GensimLda文本聚类构建人工智能个性化推荐系统(Python3.10)

物以类聚人以群分,通过GensimLda文本聚类构建人工智能个性化推荐系统(Python3.10)

众所周知，个性化推荐系统能够根据用户的兴趣、偏好等信息向用户推荐相关内容，使得用户更感兴趣，从而提升用户体验，提高用户粘度，之前我们曾经使用协同过滤算法构建过个性化推荐系统，但基于显式反馈的算法就…
阅读更多...
【Java寒假打卡】Java基础-集合Map

【Java寒假打卡】Java基础-集合Map

【Java寒假打卡】Java基础-集合Map基本使用Map集合的基本功能Map集合的第一种遍历方式Map集合的第二种遍历方式案例：HashMap集合存储ArrayList元素并遍历案例：统计字符串中每一个字符出现的次数Collections操纵集合基本使用 创建Map集合的对象&#xff1…
阅读更多...
金融历史数据导入之股票 level2 逐笔篇

金融历史数据导入之股票 level2 逐笔篇

在部署完 DolphinDB 后，将历史数据导入数据库是后续进行数据查询、计算和分析的基础。为协助用户快速导入数据，本文档基于 DolphinDB 已有的教程与大量用户的实践经验，从操作者角度出发，以 CSV 格式的文件为例，详细介绍…
阅读更多...
通讯电平转换电路中的经典设计

通讯电平转换电路中的经典设计

今天给大家分享几个通讯电平转换电路。 有初学者问：什么是电平转换？举个例子，比如下面这个电路： 单片机的工作电压是5V，蓝牙模块的工作电压是3.3V，两者之间要进行通讯，TXD和RXD引脚就要进行连接…
阅读更多...
Revit里轴网隐藏尺寸标注跟着消失？快速轴网距离标注

Revit里轴网隐藏尺寸标注跟着消失？快速轴网距离标注

一、Revit中链接项目文件轴网的巧妙处理 问题：在单元式住宅体系中，轴网的使用主要是对尺寸标注的影响，如果要将子文件链接到父文件中，需要隐藏轴网，这样与轴网关联的尺寸标注就会消失。 关于尺寸标注与轴网隐藏方式的关…
阅读更多...
推荐文章
最新文章

Copyright @ 2022~2023