Spring Boot整合Apache BookKeeper教程

news2025/3/28 9:25:25

精心整理了最新的面试资料和简历模板,有需要的可以自行获取

点击前往百度网盘获取
点击前往夸克网盘获取


Spring Boot整合Apache BookKeeper教程

1. 简介

Apache BookKeeper 是一个高性能、持久化的分布式日志存储系统,适用于需要强一致性和高吞吐量的场景(如事件溯源、流处理)。
Spring Boot 提供快速应用开发能力。本教程将演示如何在Spring Boot中集成BookKeeper,实现分布式日志的读写。


2. 环境准备

  • JDK 11+
  • Maven 3.6+
  • Docker(可选,用于本地BookKeeper集群)
  • Spring Boot 3.1+

3. 搭建BookKeeper集群(本地开发)

使用Docker快速启动

# 下载Apache BookKeeper官方镜像
docker run -it --rm -p 3181:3181 apache/bookkeeper:4.16.1 bookkeeper standalone

4. Spring Boot项目配置

添加依赖

<!-- pom.xml -->
<dependencies>
    <!-- BookKeeper Client -->
    <dependency>
        <groupId>org.apache.bookkeeper</groupId>
        <artifactId>bookkeeper-server</artifactId>
        <version>4.16.1</version>
    </dependency>
    
    <!-- Spring Boot Starter -->
    <dependency>
        <groupId>org.springframework.boot</groupId>
        <artifactId>spring-boot-starter</artifactId>
    </dependency>
</dependencies>

配置BookKeeper连接

# application.yml
bookkeeper:
  service-uri: "zk+null://localhost:2181/ledgers"  # 单机模式无需ZooKeeper
  num-worker-threads: 4

5. 核心组件实现

配置类

@Configuration
public class BookKeeperConfig {

    @Value("${bookkeeper.service-uri}")
    private String serviceUri;

    @Bean(destroyMethod = "close")
    public BookKeeper bookKeeper() throws Exception {
        return BookKeeper.newBuilder()
                .metadataServiceUri(serviceUri)
                .build();
    }
}

日志生产者示例

@Service
public class LogProducer {

    @Autowired
    private BookKeeper bookKeeper;

    public void writeEntry(String ledgerName, byte[] data) throws Exception {
        try (LedgerHandle ledger = bookKeeper.createLedger(
                BookKeeper.DigestType.MAC, "password".getBytes())) {
            
            ledger.addEntry(data);
            System.out.println("Entry written to ledger: " + ledger.getId());
        }
    }
}

日志消费者示例

@Service
public class LogConsumer {

    @Autowired
    private BookKeeper bookKeeper;

    public List<byte[]> readEntries(long ledgerId) throws Exception {
        try (LedgerHandle ledger = bookKeeper.openLedger(ledgerId, 
                BookKeeper.DigestType.MAC, "password".getBytes())) {
            
            List<byte[]> entries = new ArrayList<>();
            for (long i = 0; i < ledger.getLastAddConfirmed(); i++) {
                entries.add(ledger.readEntry(i).getEntry());
            }
            return entries;
        }
    }
}

6. 使用示例

控制器层

@RestController
@RequestMapping("/logs")
public class LogController {

    @Autowired
    private LogProducer producer;
    
    @Autowired
    private LogConsumer consumer;

    @PostMapping
    public String writeLog(@RequestBody String logData) throws Exception {
        producer.writeEntry("app-logs", logData.getBytes());
        return "Log stored successfully";
    }

    @GetMapping("/{ledgerId}")
    public List<String> readLogs(@PathVariable long ledgerId) throws Exception {
        return consumer.readEntries(ledgerId).stream()
                .map(String::new)
                .collect(Collectors.toList());
    }
}

7. 高级配置建议

  1. 生产环境集群
    部署ZooKeeper集群,配置多BookKeeper节点:

    bookkeeper:
      service-uri: "zk://zk1:2181,zk2:2181,zk3:2181/ledgers"
    
  2. 持久化策略
    配置Ensemble大小和写入quorum:

    EnsembleSize = 3  // 数据副本数
    WriteQuorumSize = 2  // 写入确认节点数
    
  3. 性能优化

    • 启用DirectIO模式提升吞吐量
    • 配置SortedLedgerStorage优化顺序写入

8. 验证测试

# 写入测试
curl -X POST -d "Hello BookKeeper" http://localhost:8080/logs

# 读取测试(替换实际ledgerId)
curl http://localhost:8080/logs/12345

9. 注意事项

  • 保证BookKeeper客户端版本与服务器一致
  • 重要操作需处理InterruptedExceptionBKException
  • 生产环境建议使用TLS加密通信

通过以上步骤,您已完成Spring Boot与BookKeeper的基础整合。该方案适用于金融交易日志、IoT设备事件收集等需要可靠持久化的场景。可根据业务需求扩展为多数据中心部署架构。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.coloradmin.cn/o/2318910.html

如若内容造成侵权/违法违规/事实不符,请联系多彩编程网进行投诉反馈,一经查实,立即删除!

相关文章

【Linux进程】——进程的程序地址空间

目录 前言 1.程序地址空间 1.1区域划分 1.2程序地址空间的本质 1.3程序地址空间分配原则 2.数据寻找 2.1补充&#xff1a;进程挂起 结语 前言 在Linux系统的神秘世界里&#xff0c;进程就像是一个个小工匠&#xff0c;各自忙碌地完成着不同的任务。你是否想过&#xff…

边缘云原生操作系统的设计与思考

资料来源&#xff1a;火山引擎-开发者社区 边缘云行业现状和发展历程 从 06 年 AWS 推出 EC2 、S3 到今天已经过去了 18 年&#xff0c;云计算早已不是一个新鲜词汇&#xff0c;从当前业务来看&#xff0c;我们能看到云计算从中心到中心边缘的发展趋势&#xff0c;为什么会有 这…

Jenkins muti-configuration-project 中调用pipeline project

Jenkins muti-configuration-project 中调用pipeline project 解决方案示例练习1. 多配置项目设置&#xff1a;2. 触发器配置&#xff1a;3. Pipeline 项目 Jenkinsfile&#xff1a; 解决方案 创建多配置项目&#xff1a; 在 Jenkins 中创建一个新的多配置项目。在“配置矩阵…

AI学习——卷积神经网络(CNN)入门

作为人类&#xff0c;我们天生擅长“看”东西&#xff1a;一眼就能认出猫狗、分辨红绿灯、读懂朋友的表情……但计算机的“眼睛”最初是一片空白。直到卷积神经网络&#xff08;CNN&#xff09;​的出现&#xff0c;计算机才真正开始理解图像。今天&#xff0c;我们就用最通俗的…

双指针算法-day14(分组循环)

1.最长奇偶子数组 题目 解析 分组循环模板&#xff1a; 简单来说&#xff1a; 第一步&#xff1a;指针遍历找到满足条件的开头下标&#xff0c;并用 start i 记录开头&#xff1b;第二步&#xff1a;指针不断右移寻找满足条件的最长子数组&#xff1b;第三步&#xff1a;更新…

Linux基础开发工具--gdb的使用

目录 安装准备&#xff1a; 1. 背景 2. 开始使用 3. 做一个Linux第一个小程序&#xff0d;进度条 安装准备&#xff1a; 对于gdb的学习使用&#xff0c;为了方便大家学习&#xff0c;我建议大家先安装一个cgdb进行学习&#xff0c;这样方便观察操作与学习gdb。 用以下…

RabbitMQ的高级特性介绍(一)

消息确认机制 ⽣产者发送消息之后, 到达消费端之后, 可能会有以下情况: a. 消息处理成功 b. 消息处理异常 RabbitMQ向消费者发送消息之后, 就会把这条消息删掉, 那么第二种情况, 就会造成消息丢失。 那么如何确保消费端已经成功接收了, 并正确处理了呢? 为了保证消息从队列…

QML开发入门1--安装QT6.8和新建第一个QtQuickApplication

1.下载在线安装工具 qt-online-installer-windows-x64-4.8.1.exe 2.安装 注&#xff1a;可能官网qt安装很慢。需要使用国内镜像源。推荐阿里镜像 qt-online-installer-windows-x64-4.8.1.exe --mirror https://mirrors.aliyun.com/qt3.配置QT关键配置 3.1 无法编译 注&#…

如何让节卡机器人精准对点?

如何让节卡机器人精准对点&#xff1f; JAKA Zu 软件主界面主要由功能栏、开关栏、菜单栏构成。 菜单栏&#xff1a;控制柜管理&#xff0c;机器人管理与软件管理组成。主要功能为对控制柜关机、APP 设置、机器人本体设 置、控制柜设置、连接机器人和机器人显示等功能。 开关…

在 Spring Boot 中调用 AnythingLLM 的发消息接口

整体逻辑: 自建系统的web UI界面调用接口: 1.SpringBoot接口&#xff1a;/anything/chatMessageAnything 2.调用anythingLLM - 调用知识库deepseek r1 . Windows Installation ~ AnythingLLMhttps://docs.anythingllm.com/installation-desktop/windows http://localhost:3…

[GHCTF 2025]Popppppp[pop链构造] [php原生类的利用] [双md5加密绕过]

题目 <?php error_reporting(0);class CherryBlossom {public $fruit1;public $fruit2;public function __construct($a) {$this->fruit1 $a;}function __destruct() {echo $this->fruit1;}public function __toString() {$newFunc $this->fruit2;return $new…

Tr0ll2靶机详解

一、主机发现 arp-scan -l靶机ip&#xff1a;192.168.55.164 二、端口扫描、漏洞扫描、目录枚举、指纹识别 2.1端口扫描 nmap --min-rate 10000 -p- 192.168.55.164发现21端口的ftp服务开启 以UDP协议进行扫描 使用参数-sU进行UDP扫描 nmap -sU --min-rate 10000 -p- 19…

制造业数字化转型,汽车装备制造企业数字化转型案例,智能制造数字化传统制造业数字化制造业数字化转型案例

《某制造业企业信息化整体解决方案》PPT展示了一个汽车装备企业的整体信息化解决方案&#xff0c;阐述了该企业的业务特点和现状&#xff0c;主要包括按订单生产、多级计划和产品跟踪等&#xff0c;分析了信息化建设的主要困难&#xff0c;如信息管理手工化、过程数据追溯困难、…

科技云报到:AI Agent打了个响指,商业齿轮加速转动

科技云报到原创。 3月16日&#xff0c;百度旗下文心大模型4.5和文心大模型X1正式发布。目前&#xff0c;两款模型已在文心一言官网上线&#xff0c;免费向用户开放。 同时&#xff0c;文心大模型4.5已上线百度智能云千帆大模型平台&#xff0c;企业用户和开发者登录即可调用AP…

【蓝桥杯python研究生组备赛】005 数学与简单DP

题目1 01背包 有 N 件物品和一个容量是 V 的背包。每件物品只能使用一次。 第 i 件物品的体积是 vi&#xff0c;价值是 wi。 求解将哪些物品装入背包&#xff0c;可使这些物品的总体积不超过背包容量&#xff0c;且总价值最大。 输出最大价值。 输入格式 第一行两个整数&a…

大白话读懂java对象创建的过程

1. java对象创建流程&#xff08;大白话版&#xff09; 咱们java对象被创建的过程大致如下&#xff0c;即&#xff1a; 在 JVM 中对象的创建&#xff0c;从⼀个 new 指令开始&#xff1a; 首先检查这个指令的参数是否能在常量池中定位到⼀个类的符号引用检查这个符号引用代表…

AI图像理解技术的演进

在CLIP等现代多模态模型出现之前&#xff0c;早期的图生文技术主要依赖人工标注的ImageNet等数据集&#xff0c;但其技术路线与当前方法存在本质差异。 一、传统图生文技术的标注依赖 ImageNet的核心地位 在2012-2020年间&#xff0c;ImageNet的1,400万张人工标注图像&#xff…

电脑节电模式怎么退出 分享5种解决方法

在使用电脑的过程中&#xff0c;许多用户为了节省电力&#xff0c;通常会选择开启电脑的节能模式。然而&#xff0c;在需要更高性能或进行图形密集型任务时&#xff0c;节能模式可能会限制系统的性能表现。这时&#xff0c;了解如何正确地关闭或调整节能设置就显得尤为重要了。…

【Java】——程序逻辑控制(构建稳健代码的基石)

&#x1f381;个人主页&#xff1a;User_芊芊君子 &#x1f389;欢迎大家点赞&#x1f44d;评论&#x1f4dd;收藏⭐文章 &#x1f50d;系列专栏&#xff1a;【Java】内容概括 文章目录&#xff1a; 一.顺序结构二.分支结构1.if 语句1.1 语法格式11.2 语法格式21.3 语法格式3 …

卫星互联网智慧杆:开启智能城市新时代​

哇哦&#xff01;在当下这个数字化浪潮正以雷霆万钧之势席卷全球的超酷时代&#xff0c;智慧城市建设已然成为世界各国你追我赶、竞相发力的核心重点领域啦&#xff01;而咱们的卫星互联网智慧杆&#xff0c;作为一项完美融合了卫星通信与物联网顶尖技术的创新结晶&#xff0c;…