架构设计基础系列:事件溯源模式浅析

news2025/4/26 7:07:29

图片来源网络,侵权删

1. 引言

1.1 研究背景

  • 传统CRUD模型的局限性:状态覆盖导致审计困难、无法追溯历史。
  • 分布式系统复杂性的提升:微服务架构下数据一致性、回滚与调试的需求激增。
  • 监管合规性要求:金融、医疗等领域对数据不可篡改性的强制需求。

1.2 事件溯源的核心价值

  • 完整历史追溯‌:通过事件流重建任意时间点状态。
  • 业务逻辑显式化‌:事件作为业务意图的直接表达。
  • 解耦与扩展性‌:读写模型分离(CQRS)支持独立优化。

2. 事件溯源的理论基础

2.1 核心概念

  • 事件(Event)‌:不可变的状态变更记录,如 AccountOpenedOrderCancelled
  • 事件存储(Event Store)‌:有序、持久化的事件流数据库。
  • 聚合根(Aggregate Root)‌:一致性边界内的业务实体,负责生成事件。
  • 投影(Projection)‌:从事件流生成实时查询视图。

2.2 事件溯源与CQRS模式

  • 命令与查询职责分离‌:写模型通过事件溯源处理业务逻辑,读模型通过投影提供高性能查询。
  • 最终一致性模型‌:通过异步事件传播实现读写模型同步。

2.3 事件溯源的数学基础

  • 事件流作为状态函数‌:

其中 StSt 表示时间 tt 的状态,eiei 为事件,ff 为状态转换函数。

  • 幂等性与事件顺序‌:事件顺序必须严格保证,幂等性设计可应对重复投递问题。

2.4 事件溯源优点

  • 事件不可变,并且可使用只追加操作进行存储。 用户界面、工作流或启动事件的进程可继续,处理事件的任务可在后台运行。 此外,处理事务期间不存在争用,此过程可极大提高应用程序的性能和可伸缩性,尤其是对于演示级别或用户界面。

  • **事件是描述已发生操作的简单对象以及描述事件代表的操作所需的相关数据。 **事件不会直接更新数据存储。 只会对事件进行记录,以便在合适的时间进行处理。 使用事件可简化实现和管理。

  • 事件通常对域专家而言具有意义,然而对象关系阻抗不匹配却会让复杂数据库表变得难以理解。表是表示系统的当前状态(而不是已发生事件)的人工构造。

  • 事件溯源不需要直接更新数据存储中的对象,因而有助于防止并发更新造成冲突。 但是,域模型必须仍然设计为避免可能导致不一致状态的请求。

  • 事件的只追加存储提供的审核线索可用于监视对数据存储采取的操作。 它可以通过随时重播事件将当前状态重新生成为具体化视图或投影,并且可以帮助测试和调试系统。 此外,使用补偿事件取消更改的要求可以提供反向更改的历史记录。 如果模型存储了当前状态,则此功能不会是这种情况。 事件列表还可用于分析应用程序性能和检测用户行为趋势。 或者,也可用于获取其他有用的业务信息。

  • 事件存储会引发事件,任务会执行操作以响应这些事件。 通过将任务从事件中分离,可提供灵活性和可扩展性。 任务知道事件类型和事件数据,但不知道触发事件的操作。 此外,多个任务可以处理每个事件。 这样可实现与仅侦听事件存储引发的新事件的其他服务和系统的轻松集成。 但是,事件溯源事件的级别通常非常低,可能需要生成特定的集成事件。

通过执行响应事件的数据管理任务和具体化存储事件的视图,事件溯源通常与 CQRS 模式结合。

3. 主流事件溯源框架分析

3.1 框架分类

类别代表框架核心能力
企业级框架Axon Framework完整CQRS支持、分布式事件总线、Saga管理
轻量级库Eventuous (.NET)简化聚合根定义、多存储后端支持
事件流平台Kafka + Kafka Streams高吞吐量事件处理、流式计算集成
云原生服务AWS EventBridge无服务器事件路由、与Lambda/DynamoDB集成

3.2 Axon Framework 深度解析

3.2.1 架构设计

  • 命令模型‌:CommandGateway 处理业务命令,驱动聚合根生成事件。
  • 事件存储‌:支持JDBC、MongoDB、Axon Server(专用存储)。
  • 查询模型‌:QueryGateway 从投影读取数据,支持订阅更新。

3.2.2 核心组件

  • 聚合根生命周期管理‌:通过@Aggregate注解定义,自动处理事件重放。
  • Saga事务协调‌:长流程事务通过@Saga实现最终一致性。
  • 事件回放与快照‌:定期生成快照(Snapshot)优化长事件流重建效率。

3.2.3 代码示例

// 定义聚合根
@Aggregate
public class BankAccountAggregate {
    @AggregateIdentifier
    private String accountId;
    private BigDecimal balance;

    @CommandHandler
    public BankAccountAggregate(OpenAccountCommand cmd) {
        apply(new AccountOpenedEvent(cmd.getAccountId(), cmd.getOwner()));
    }

    @EventSourcingHandler
    public void on(AccountOpenedEvent event) {
        this.accountId = event.getAccountId();
        this.balance = BigDecimal.ZERO;
    }

    // 处理存款命令
    @CommandHandler
    public void handle(DepositCommand cmd) {
        apply(new DepositCompletedEvent(accountId, cmd.getAmount()));
    }
}

3.3 EventStoreDB 的存储引擎优化

  • 追加写优化‌:基于日志结构合并树(LSM-Tree)实现高吞吐量写入。
  • 内置订阅机制‌:支持持久化订阅(Persistent Subscription)与流分区(Stream Partitioning)。
  • 多语言支持‌:通过gRPC/HTTP API提供跨平台兼容性。

3.4 云原生框架对比

框架事件存储适用场景局限性
Axon Server专用存储企业级微服务运维复杂度高
Kafka分布式日志高吞吐量事件流需额外实现聚合根逻辑
AWS EventBridge无服务器事件总线快速构建Serverless应用功能扩展性受限

4. 实际案例研究

4.1 案例一:银行账户管理系统

4.1.1 需求分析

  • 合规性要求:所有资金变动记录必须可审计。
  • 高并发挑战:支持每秒万级交易处理。

4.1.2 技术选型

  • 框架‌:Axon Framework + Axon Server
  • 存储‌:EventStoreDB + PostgreSQL(读模型)
  • 消息总线‌:RabbitMQ

4.1.3 事件流设计

1. AccountOpenedEvent
2. DepositCompletedEvent
3. TransferOutEvent
4. TransferInEvent
5. InterestCalculatedEvent

4.1.4 性能优化

  • 快照机制‌:每1000个事件生成一次快照,减少聚合根重建时间。
  • 分片策略‌:按账户ID哈希分片事件存储,提升并发处理能力。

4.2 案例二:电商订单系统

4.2.1 业务场景

  • 订单状态追踪:从创建、支付到物流的全流程事件记录。
  • 实时库存管理:通过事件流触发库存扣减与回滚。

4.2.2 技术实现

  • 框架‌:.NET + Eventuous
  • 存储‌:MongoDB(事件存储) + Elasticsearch(读模型)
  • 投影逻辑‌:
public class OrderProjection : IEventHandler<OrderCreatedEvent> {
    public async Task Handle(OrderCreatedEvent @event) {
        await _readModel.UpdateAsync(@event.OrderId, model => {
            model.Status = "Created";
            model.Items = @event.Items;
        });
    }
}

5. 技术挑战与解决方案

5.1 事件版本迁移

  • 问题‌:业务变更导致事件结构不兼容。
  • 解决方案‌:
    • 向上兼容‌:新增字段而非修改旧字段。
    • 版本转换中间件‌:在读取时动态转换旧事件版本。

5.2 长事件流性能瓶颈

  • 问题‌:重放数万事件导致响应延迟。
  • 解决方案‌:
    • 定期快照‌:存储聚合根的中间状态。
    • 增量投影‌:仅处理新增事件而非全量重放。

5.3 分布式事务一致性

  • 问题‌:跨服务事件处理的最终一致性。
  • 解决方案‌:
    • Saga模式‌:通过补偿事件实现回滚。
    • 事件幂等性‌:唯一ID去重或版本号校验。

‌**6. **事件溯源使用场景

请在以下方案中使用此模式:

  • 要捕获数据中的意图、用途或原因。 例如,可将对客户实体的更改捕获为一系列特定事件类型,例如_已搬家_、帐户已关闭_或_已身故
  • 尽量减少或完全避免出现数据更新冲突。
  • 需要记录发生的事件,并重播事件以还原系统状态、回滚更改或保留历史记录和审核日志。 例如,任务涉及多个步骤时,可能需要执行操作来恢复更新,并重播某些步骤使数据重返一致的状态。
  • 使用事件时。 这是应用程序操作的自然功能,且几乎不需要其他开发或实现工作。
  • 需要将输入或更新数据的过程从应用这些操作所需的任务中分离。 此更改可能是为了提高 UI 的性能,或者是为了将事件分发给其他在事件发生时采取操作的侦听器。 例如,可以将工资管理系统与开支报销网站集成。 由事件存储引发的用于响应网站中数据更新的事件可同时供该网站和工资管理系统使用。
  • 希望随要求更改而灵活更改具体化模型和实体数据的格式,或需要调整读取模型或公开数据的视图(与 CQRS 结合使用时)。
  • 与 CQRS 结合使用且更新读取模型时最终一致性可接受或事件流中的解冻实体和数据的性能影响可接受。

此模式在以下情况中可能不起作用:

  • **小型域或简单域、几乎或完全没有业务逻辑的**系统或者自然地适用于传统 CRUD 数据管理机制的非域系统。
  • 要求一致性和数据视图实时更新的系统。
  • 不需要审核线索、历史记录以及回滚和重播操作功能的系统。
  • 基础数据更新冲突发生率低的系统。 例如,主要是添加数据而不是更新数据的系统。

7. 结论

事件溯源框架通过将业务逻辑显式化为事件流,为构建高可靠、可审计的分布式系统提供了全新范式。主流框架如Axon、EventStoreDB和Kafka在不同场景下展现出独特优势,但需权衡性能、复杂性与扩展性。未来,随着云原生技术与AI的融合,事件溯源将在实时分析、自动化决策等领域发挥更大价值。


参考文献

  1. https://learn.microsoft.com/zh-cn/azure/architecture/patterns/event-sourcing
  2. https://codeopinion.com/greg-young-answers-your-event-sourcing-questions/

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/2327034.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

【力扣hot100题】(035)二叉树的中序遍历

正常方法递归很简单&#xff0c;于是又学了一种栈的方法。 原理如下&#xff1a;每次循环先尽量将目前节点入栈并左移&#xff0c;没有左节点时回到栈首节点将目前节点放入结果容器中并移出栈外&#xff0c;目前节点变为该节点的右节点&#xff0c;循环结束条件是目前节点为nu…

《数字图像处理》教材寻找合作者

Rafael Gonzalez和Richard Woods所著的《数字图像处理》关于滤波器的部分几乎全错&#xff0c;完全从零开始写&#xff0c;困难重重。关于他的问题已经描述在《数字图像处理&#xff08;面向新工科的电工电子信息基础课程系列教材&#xff09;》。 现寻找能够共同讨论、切磋、…

批量删除 txt/html/json/xml/csv 等文本文件中的重复行

在文本文件中&#xff0c;可能会存在一些重复的数据行&#xff0c;这可能不是我们期望的&#xff0c;因此我们会碰到需要删除文本文件中重复行的情况。如果是人工删除&#xff0c;当文件较大或者数量较多的时候&#xff0c;处理的难度会较大。今天就给大家介绍一下批量删除文本…

基于微信小程序的智慧乡村旅游服务平台【附源码】

基于微信小程序的智慧乡村旅游服务平台&#xff08;源码L文说明文档&#xff09; 目录 4系统设计 4.1系统功能设计 4.2系统结构 4.3.数据库设计 4.3.1数据库实体 4.3.2数据库设计表 5系统详细实现 5.1 管理员模块的实现 5.1.1旅游景点管理…

80. Linux内核定时器实验

一、Linux内核定时器原理 1.1、内核时间管理 1、Cortex-M内核使用systick作为系统定时器。 2、硬件定时器、软件定时器&#xff0c;原理是依靠系统定时器来驱动。 3、linux内核频率可以配置&#xff0c;图形化界面配置。 4、重点&#xff0c;HZ表示系统节拍率&#xff0c; 1.…

C++类与对象(上):从入门到实践

目录 一、引言 二、面向过程和面向对象初步认识 2.1 面向过程编程 2.2 面向对象编程 三、类的引入 四、类的定义 4.1 定义格式 4.2 定义方式 4.3 成员变量命名规则建议 五、类的访问限定符及封装 5.1 访问限定符 5.2 封装 六、类的作用域 七、类的实例化 7.1 概念…

Lumerical ------ Edge coupler design

Lumerical ------ Edge coupler design 引言正文无 Si Substrate 的仿真步骤有 Si Substrate 的仿真步骤引言 本文,我们将使用官方提供的 Edge coupler 设计教程,但是中间会带有作者本人的设计的感悟。 正文 无 Si Substrate 的仿真步骤 打开 Edge_Coupler_No_Substrate.l…

大语言模型本质上还是自动化,而不是智能化

大语言模型本质上仍然是自动化或高级自动化&#xff0c;而非真正的智能化&#xff0c;原因可以从以下几个方面进行分析&#xff1a;1、自动化与智能化的本质区别自动化&#xff1a;大语言模型通过预训练和微调&#xff0c;基于大量数据和规则生成输出。它的行为是基于输入数据的…

python数据结构——链表、栈、队列

一、思维梳理&#xff1a; 二、双向循环链表&#xff1a; class Node:def __init__(self,data):self.data dataself.next Noneself.prev Noneclass DoubleLink:def __init__(self):self.size 0self.head Nonedef is_empty(self):return self.size 0def add_end(self,dat…

centos操作系统如何更换yum镜像源

CentOS Linux 是一个免费提供的、社区支持的Linux发行版,由CentOS项目社区贡献者开发、分发和维护。2020年CentOS项目宣布将把全部投资转移到CentOS Stream,作为即将发布的 Red Hat Enterprise Linux版本的上游开发平台。因此,CentOS Linux更新和发布将在2021年至2024年期间…

【Linux篇】自主Shell命令行解释器

&#x1f4cc; 个人主页&#xff1a; 孙同学_ &#x1f527; 文章专栏&#xff1a;Liunx &#x1f4a1; 关注我&#xff0c;分享经验&#xff0c;助你少走弯路&#xff01; 文章目录 1. 获取用户名的接口2. 等待用户输入接口3. 将上述代码进行面向对象式的封装4. 命令行解析5.…

我的创作纪念日-一周年

目录 机缘 收获 日常 成就 憧憬 机缘 时光荏苒&#xff0c;转行计算机已经是第5个年头了。从Python入门&#xff0c;到C入土&#xff0c;兜兜转转&#xff0c;发现自己也只是初窥门径&#xff0c;习得皮毛。我从6年前开始潜水CSDN&#xff0c;学习各路大佬的技术经验&…

多线程代码案例 - 1

目录 单例模式 1. 饿汉模式 2. 懒汉模式 单例模式与多线程 问题1 问题2 问题3 完&#xff01; 单例模式 单例模式是一种设计模式。 设计模式&#xff0c;是我们在编写代码时候的一种软性的规定&#xff0c;也就是说&#xff0c;我们遵守设计模式&#xff0c;代码的下限…

开发体育赛事直播系统主播认证功能技术实现方案

该体育直播系统系统由东莞梦幻网络科技开发&#xff0c;使用 ThinkPHP 作为后端&#xff0c;Vue.js 作为 PC/H5 端框架&#xff0c;Java 和 Objective-C 分别用于安卓和 iOS 开发。 1、前端实现 (Vue.js) <template><div class"anchor-certification">…

国产三维CAD「皇冠CAD」在汽车零部件领域建模教程:刹车片

本教程深度融合三维皇冠CAD&#xff08;CrownCAD&#xff09;的MBD&#xff08;Model-Based Definition&#xff09;设计理念&#xff0c;通过参数化建模、智能约束管理、动态装配验证等功能&#xff0c;实现数据驱动设计&#xff0c;精准解决了汽车制动系统中精密制动组件的设…

SpringMvc获取请求数据

基本参数 RequestMapping("save5") ResponseBody public User save5(String name, int age) {User user new User();user.setName(name);user.setAge(age);return user; } 在url中将name与age进行编写&#xff0c;通过框架可以提取url中的name与age&#xff0c;这…

大语言模型开发框架——LangChain

什么是LangChain LangChain是一个开发由语言模型驱动的应用程序的框架&#xff0c;它提供了一套工具、组件和接口&#xff0c;可以简化构建高级语言模型应用程序的过程。利用LangChain可以使应用程序具备两个能力&#xff1a; 上下文感知 将语言模型与上下文&#xff08;提示…

机器学习的一百个概念(7)独热编码

前言 本文隶属于专栏《机器学习的一百个概念》&#xff0c;该专栏为笔者原创&#xff0c;引用请注明来源&#xff0c;不足和错误之处请在评论区帮忙指出&#xff0c;谢谢&#xff01; 本专栏目录结构和参考文献请见[《机器学习的一百个概念》 ima 知识库 知识库广场搜索&…

从实用的角度聊聊Linux下文本编辑器VIM

本文从实用的角度聊聊Vim的常用命令。何为实用&#xff1f;我举个不实用的例子大家就明白了&#xff0c;用vim写代码。;) “vim是从 vi 发展出来的一个文本编辑器。代码补全、编译及错误跳转等方便编程的功能特别丰富&#xff0c;在程序员中被广泛使用&#xff0c;和Emacs并列成…

佳能imageRUNNER 2206N基本参数及管理员密码

基本参数&#xff1a; 产品类型 激光数码复合机 颜色类型 黑白 涵盖功能 复印/打印/扫描 速度类型 低速 最大原稿尺寸 A3 复印/打印方式 激光静电转印方式 感光材料 OPC 显影系统 干式单组分显影 定影…