【算法】分布式共识Paxos

news2024/11/24 19:59:00

一、引言

        在分布式系统中,一致性是至关重要的一个问题。Paxos算法是由莱斯利·兰伯特(Leslie Lamport)在1990年提出的一种解决分布式系统中一致性问题的算法。

二、算法原理

        Paxos算法的目标是让一个分布式系统中的多个节点就某个值达成一致。算法通过多个阶段的消息传递来确保一致性:

        准备阶段(Prepare):提议者(Proposer)选择一个提案编号n,并向接受者(Acceptor)发送准备请求。

        承诺阶段(Promise):接受者收到准备请求后,如果提案编号n大于它之前承诺过的任何提案编号,则承诺不再接受编号小于n的提案,并将其之前接受的最高编号的提案作为响应发送给提议者。

        接受阶段(Accept):提议者收到足够多的承诺后,发送接受请求给接受者,请求它们接受提案[n, v],其中v是提议者选择的值。

        学习阶段(Learn):一旦接受者接受了某个提案,它会通知学习者(Learner)该提案已被接受。

三、数据结构

Paxos算法主要涉及以下数据结构:

        提案(Proposal):由提案编号和提议的值组成。

        承诺(Promise):包含接受者承诺不再接受编号小于n的提案,以及它之前接受的最高编号的提案。

四、使用场景

Paxos算法适用于以下场景:

        分布式数据库中的日志复制。

        分布式系统中的状态机复制。

        分布式锁服务。

五、算法实现

以下是Paxos算法的伪代码实现:

class Proposer:
    def propose(value):
        n = generate提案编号()
        send_prepare(n) to all Acceptors
        wait for majority promises
        v = determine_value_to_propose(promises)
        send_accept(n, v) to all Acceptors
        wait for majority accepts
        notify Learners of accepted proposal

class Acceptor:
    def on_prepare(request):
        if request.n > promised_number:
            promised_number = request.n
            send promise with accepted_proposal to Proposer

    def on_accept(request):
        if request.n >= promised_number:
            promised_number = request.n
            accepted_proposal = request
            send accepted_proposal to Learners

class Learner:
    def on_learn(accepted_proposal):
        if enough proposals are accepted:
            chosen_value = accepted_proposal.value
            apply chosen_value to state machine

六、其他同类算法对比

  • Raft算法:相比Paxos更易于理解和实现,提供了更明确的领导选举机制。
  • Zab算法:Zookeeper中使用的算法,结合了Paxos的一些元素,并针对特定场景进行了优化。

七、多语言实现

以下是Paxos算法的简化版实现:

Java

import java.util.HashMap;
import java.util.Map;

class Acceptor {
    private int promisedProposalNumber = -1;
    private int acceptedProposalNumber = -1;
    private String acceptedValue = null;

    public synchronized boolean prepare(int proposalNumber) {
        if (proposalNumber > promisedProposalNumber) {
            promisedProposalNumber = proposalNumber;
            return true;
        }
        return false;
    }

    public synchronized boolean accept(int proposalNumber, String value) {
        if (proposalNumber >= promisedProposalNumber) {
            acceptedProposalNumber = proposalNumber;
            acceptedValue = value;
            return true;
        }
        return false;
    }

    public synchronized int getAcceptedProposalNumber() {
        return acceptedProposalNumber;
    }

    public synchronized String getAcceptedValue() {
        return acceptedValue;
    }
}

class Proposer {
    private final Map<Integer, Acceptor> acceptors;
    private int proposalNumber = 0;
    private String value;

    public Proposer(Map<Integer, Acceptor> acceptors, String value) {
        this.acceptors = acceptors;
        this.value = value;
    }

    public void propose() {
        proposalNumber++;
        int successfulPrepares = 0;
        for (Acceptor acceptor : acceptors.values()) {
            if (acceptor.prepare(proposalNumber)) {
                successfulPrepares++;
            }
        }

        if (successfulPrepares > acceptors.size() / 2) {
            int successfulAccepts = 0;
            for (Acceptor acceptor : acceptors.values()) {
                if (acceptor.accept(proposalNumber, value)) {
                    successfulAccepts++;
                }
            }

            if (successfulAccepts > acceptors.size() / 2) {
                System.out.println("Proposal accepted: " + value);
            } else {
                System.out.println("Proposal rejected");
            }
        } else {
            System.out.println("Prepare rejected");
        }
    }
}

public class PaxosExample {
    public static void main(String[] args) {
        Map<Integer, Acceptor> acceptors = new HashMap<>();
        for (int i = 0; i < 5; i++) {
            acceptors.put(i, new Acceptor());
        }

        Proposer proposer1 = new Proposer(acceptors, "Value 1");
        proposer1.propose();
    }
}

Python

class Acceptor:
    def __init__(self):
        self.promised_proposal_number = -1
        self.accepted_proposal_number = -1
        self.accepted_value = None

    def prepare(self, proposal_number):
        if proposal_number > self.promised_proposal_number:
            self.promised_proposal_number = proposal_number
            return True
        return False

    def accept(self, proposal_number, value):
        if proposal_number >= self.promised_proposal_number:
            self.accepted_proposal_number = proposal_number
            self.accepted_value = value
            return True
        return False

    def get_accepted_proposal(self):
        return self.accepted_proposal_number, self.accepted_value

class Proposer:
    def __init__(self, acceptors, value):
        self.acceptors = acceptors
        self.proposal_number = 0
        self.value = value

    def propose(self):
        self.proposal_number += 1
        successful_prepares = 0
        for acceptor in self.acceptors:
            if acceptor.prepare(self.proposal_number):
                successful_prepares += 1

        if successful_prepares > len(self.acceptors) // 2:
            successful_accepts = 0
            for acceptor in self.acceptors:
                if acceptor.accept(self.proposal_number, self.value):
                    successful_accepts += 1

            if successful_accepts > len(self.acceptors) // 2:
                print(f"Proposal accepted: {self.value}")
            else:
                print("Proposal rejected")
        else:
            print("Prepare rejected")

if __name__ == "__main__":
    acceptors = [Acceptor() for _ in range(5)]
    proposer = Proposer(acceptors, "Value 1")
    proposer.propose()

C++

#include <iostream>
#include <vector>
#include <memory>

class Acceptor {
public:
    Acceptor() : promisedProposalNumber(-1), acceptedProposalNumber(-1) {}

    bool prepare(int proposalNumber) {
        if (proposalNumber > promisedProposalNumber) {
            promisedProposalNumber = proposalNumber;
            return true;
        }
        return false;
    }

    bool accept(int proposalNumber, const std::string &value) {
        if (proposalNumber >= promisedProposalNumber) {
            acceptedProposalNumber = proposalNumber;
            acceptedValue = value;
            return true;
        }
        return false;
    }

    std::pair<int, std::string> getAcceptedProposal() {
        return {acceptedProposalNumber, acceptedValue};
    }

private:
    int promisedProposalNumber;
    int acceptedProposalNumber;
    std::string acceptedValue;
};

class Proposer {
public:
    Proposer(std::vector<std::shared_ptr<Acceptor>> &acceptors, const std::string &value)
        : acceptors(acceptors), proposalNumber(0), value(value) {}

    void propose() {
        proposalNumber++;
        int successfulPrepares = 0;
        for (auto &acceptor : acceptors) {
            if (acceptor->prepare(proposalNumber)) {
                successfulPrepares++;
            }
        }

        if (successfulPrepares > acceptors.size() / 2) {
            int successfulAccepts = 0;
            for (auto &acceptor : acceptors) {
                if (acceptor->accept(proposalNumber, value)) {
                    successfulAccepts++;
                }
            }

            if (successfulAccepts > acceptors.size() / 2) {
                std::cout << "Proposal accepted: " << value << std::endl;
            } else {
                std::cout << "Proposal rejected" << std::endl;
            }
        } else {
            std::cout << "Prepare rejected" << std::endl;
        }
    }

private:
    std::vector<std::shared_ptr<Acceptor>> &acceptors;
    int proposalNumber;
    std::string value;
};

int main() {
    std::vector<std::shared_ptr<Acceptor>> acceptors;
    for (int i = 0; i < 5; ++i) {
        acceptors.push_back(std::make_shared<Acceptor>());
    }

    Proposer proposer(acceptors, "Value 1");
    proposer.propose();

    return 0;
}

Go

package main

import (
    "fmt"
)

type Acceptor struct {
    promisedProposalNumber int
    acceptedProposalNumber int
    acceptedValue          string
}

func NewAcceptor() *Acceptor {
    return &Acceptor{
        promisedProposalNumber: -1,
        acceptedProposalNumber: -1,
    }
}

func (a *Acceptor) Prepare(proposalNumber int) bool {
    if proposalNumber > a.promisedProposalNumber {
        a.promisedProposalNumber = proposalNumber
        return true
    }
    return false
}

func (a *Acceptor) Accept(proposalNumber int, value string) bool {
    if proposalNumber >= a.promisedProposalNumber {
        a.acceptedProposalNumber = proposalNumber
        a.acceptedValue = value
        return true
    }
    return false
}

type Proposer struct {
    acceptors      []*Acceptor
    proposalNumber int
    value          string
}

func NewProposer(acceptors []*Acceptor, value string) *Proposer {
    return &Proposer{
        acceptors: acceptors,
        value:     value,
    }
}

func (p *Proposer) Propose() {
    p.proposalNumber++
    successfulPrepares := 0
    for _, acceptor := range p.acceptors {
        if acceptor.Prepare(p.proposalNumber) {
            successfulPrepares++
        }
    }

    if successfulPrepares > len(p.acceptors)/2 {
        successfulAccepts := 0
        for _, acceptor := range p.acceptors {
            if acceptor.Accept(p.proposalNumber, p.value) {
                successfulAccepts++
            }
        }

        if successfulAccepts > len(p.acceptors)/2 {
            fmt.Println("Proposal accepted:", p.value)
        } else {
            fmt.Println("Proposal rejected")
        }
    } else {
        fmt.Println("Prepare rejected")
    }
}

func main() {
    acceptors := make([]*Acceptor, 5)
    for i := range acceptors {
        acceptors[i] = NewAcceptor()
    }

    proposer := NewProposer(acceptors, "Value 1")
    proposer.Propose()
}

八、实际服务应用场景代码框架

        以下是一个使用Paxos算法实现分布式锁服务的代码框架:

// Java - Distributed Lock Service with Paxos
public class DistributedLockService {
    private final Proposer proposer;
    private final Acceptor acceptor;
    private final Learner learner;

    public DistributedLockService() {
        this.proposer = new Proposer();
        this.acceptor = new Acceptor();
        this.learner = new Learner();
    }

    public boolean lock(String resource) {
        // Use Paxos to agree on the lock owner
        return proposer.propose(resource);
    }

    public boolean unlock(String resource) {
        // Use Paxos to agree on releasing the lock
        return proposer.propose(null);
    }
}

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/1951161.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

LoRaWAN设备的两种入网方式(ABP和OTAA)

目录 一、OTAA 1、名词解释 2、入网流程 二、ABP 三、两种入网方式的比较 一、OTAA 1、名词解释 &#xff08;1&#xff09;AppEUI&#xff1a;64位&#xff08;8字节&#xff09;的唯一标识符&#xff0c;用于标识特定的应用程序或组织&#xff08;如果用的是chirpstac…

Linux的yum源安装MySQL5.7

linux的yum源安装MySQL5.7 一、MySQL 1、简介 MySQL 是一种流行的关系型数据库管理系统&#xff08;RDBMS&#xff09;&#xff0c;由瑞典公司 MySQL AB 开发&#xff0c;后来被 Oracle Corporation 收购。它是一个开源软件&#xff0c;提供了高效、稳定和可靠的数据管理解决…

VLAN与三层交换机

文章目录 VLAN的功能与优势VANE优势基于端口划分 VLAN的优先级最低&#xff0c;是最常用的VLAN划分方式。 VLAN的范围![在这里插入图片描述](https://i-blog.csdnimg.cn/direct/f3f61b8a05ac46a5be263b38816db79f.png)VLAN的帧格式交换网络中的链路类型 交换机的链路类型端口类…

笔试编程算法题笔记(三 C++代码)

1.kotori和n皇后 题意简单来说就是&#xff0c;在一个无穷大的棋盘上&#xff0c;不断插入k个皇后&#xff0c;皇后们如果在 同一行&#xff0c;同一列&#xff0c;在一个45主对角线 在一个135副对角线上&#xff0c;就可以互相攻击。 我们需要判断在第i个皇后插入后&#xff…

Codeforces 903 div3 A-F

A 题目分析 数据范围很小&#xff0c;暴力枚举即可&#xff0c;然后给字符串x的长度设置一个上限&#xff0c;我设了50&#xff0c;因为n*m<25&#xff0c;多一倍够用了 C代码 #include<iostream> using namespace std; void solve(){int n,m;string x,s;cin>>…

视频怎么加密?常见的四种视频加密方法和软件

视频加密是一种重要的技术手段&#xff0c;用于保护视频内容不被未经授权的用户获取、复制、修改或传播。在加密过程中&#xff0c;安企神软件作为一种专业的加密工具&#xff0c;可以发挥重要作用。 以下将详细介绍如何使用安企神软件对视频进行加密&#xff0c;并探讨视频加密…

VUE3学习第三篇:报错记录

1、在我整理好前端代码框架后&#xff0c;而且也启动好了对应的后台服务&#xff0c;访问页面&#xff0c;正常。 2、报错ReferenceError: defineModel is not defined 学到这里报错了 在vue网站的演练场&#xff0c;使用没问题 但是在我自己的代码里就出问题了 3、watchEffec…

等级保护测评解决方案

什么是等级保护测评&#xff1f; 网络安全等级保护是指对国家重要信息、法人和其他组织及公民的专有信息以及公开信息和存储、传输、处理这些信息的信息系统分等级实行安全保护&#xff0c;对信息系统中使用的信息安全产品实行按等级管理&#xff0c;对信息系统中发生的信息安全…

【NPU 系列专栏 3 -- NVIDIA 的 H100 和 H200 的算力介绍】

请阅读【嵌入式及芯片开发学必备专栏】 文章目录 NVIDIA H100 和 H200 的算力NVIDIA H100 芯片的算力NVIDIA H100 算力参数NVIDIA H100 举例 NVIDIA H200 芯片的算力NVIDIA H200 算力参数 H200 的内存和带宽提升H200 推理吞吐量提高H200 性能提升NVIDIA H200 举例Summary NVIDI…

DLMS/COSEM中公开密钥算法的使用_椭圆曲线加密法

1.概述 椭圆曲线密码涉及有限域上的椭圆曲线上的算术运算。椭圆曲线可以定义在任何数字域上(实数、整数、复数)&#xff0c;但在密码学中&#xff0c;椭圆曲线最常用于有限素数域。 素数域上的椭圆曲线由一组实数(x, y)组成&#xff0c;满足以下等式: 方程的所有解的集合构成…

C 语言动态链表

线性结构->顺序存储->动态链表 一、理论部分 从起源中理解事物&#xff0c;就是从本质上理解事物。 -杜勒鲁奇 动态链表是通过结点&#xff08;Node&#xff09;的集合来非连续地存储数据&#xff0c;结点之间通过指针相互连接。 动态链表本身就是一种动态分配内存的…

【C++】C++应用案例-翻转数组

翻转数组&#xff0c;就是要把数组中元素的顺序全部反过来。比如一个数组{1,2,3,4,5,6,7,8}&#xff0c;翻转之后就是{8,7,6,5,4,3,2,1}。 &#xff08;1&#xff09;另外创建数组&#xff0c;反向填入元素 数组是将元素按照顺序依次存放的&#xff0c;长度固定。所以如果想要…

全网最详细Gradio教程系列5——Gradio Client: javascript

全网最详细Gradio教程系列5——Gradio Client: javascript 前言本篇摘要5. Gradio Client的三种使用方式5.2 使用Gradio JavaScript Client5.2.1 安装1. npm方式2. CDN方式3. 在线运行环境&#xff1a;PLAYCODE 5.2.2 连接到Gradio程序1. 通过URL或SpaceID连接2. 辅助&#xff…

RuoYi-Vue-Plus (多数据源注解使用、【手动、拦截器】切换数据源)

接上文多数据源配置&#xff1a; RuoYi-Vue-Plus (多数据源配置)-CSDN博客 一、功能演示 代码生成菜单页面&#xff0c; 展示数据源切换 查询主库 查询从库 二、前端传参切换数据源 页面路径&#xff1a; src/views/tool/gen/index.vue 搜索框如下&#xff1a;下面4发送请求时…

SPICE | 常见电路SPICE模型总结

Ref. 1. CMOS VLSI Design: A Circuits and Systems Perspective 目录 0 基础 1 反相器 inverter 2 缓存器 buffer 3 NAND 4 NOR 5 传输门 Transmission gate 6 三态反相器 Tristate Inverter 7 选择器 Multiplexers 8 D锁存器 D Latch 9 D触发器 D Flip-Flop 0 基础…

Linux文件描述符

前言 我们以前就听过"Linux下一切皆文件"&#xff0c;但是说实话我们只是记住了这句话&#xff0c;实质是不理解的&#xff01;本期我们就会解释&#xff01; 本期内容介绍 • 回顾C语言文件操作 • 系统I/O操作接口 • 文件描述符fd • 理解Linux下一切皆文件 • …

如何设置postgresql数据库的账户密码

说明&#xff1a;在我的云服务器上&#xff0c;postgres是使用yum的方式安装的&#xff0c;不需要设置postgres账户的密码&#xff0c;本文介绍安装后如何手动设置postgres账户的密码&#xff1b; postgres数据库安装&#xff0c;参考下面这篇文章&#xff1a; PostgreSQL安装…

构建基于Spring Boot的SaaS应用

引言 在设计和实现SaaS系统时&#xff0c;安全性是至关重要的考虑因素。一个全面的安全策略不仅能保护系统免受恶意攻击&#xff0c;还能确保用户数据的机密性、完整性和可用性。本文将探讨在SaaS架构中实现数据加密、敏感信息保护以及应用安全的最佳实践和技术方案&#xff0…

【大模型】基于LoRA微调Gemma大模型(1)

文章目录 一、LoRA工作原理1.1 基本原理1.2 实现步骤 二、LoRA 实现2.1 PEFT库&#xff1a;高效参数微调LoraConfig类&#xff1a;配置参数 2.2 TRL库SFTTrainer 类 三、代码实现3.1 核心代码3.2 完整代码 参考资料 大模型微调技术有很多&#xff0c;如P-Tuning、LoRA 等&#…