当前位置: 首页 > article >正文

基于 SOFAJRaft + Spring Boot 构建高可用 KV 存储集群(完整源码)

基于 SOFAJRaft + Spring Boot 构建高可用 KV 存储集群(完整源码)引言在分布式系统中,一致性是核心难题。Raft 是比 Paxos 更易于理解的共识算法,而 SOFAJRaft 是蚂蚁集团开源的 Java 高性能 Raft 实现。本文带你从零构建一个3 节点高可用 KV 存储集群,包含完整源码、Raft 选举与日志复制、Leader 自动故障转移,以及一个实时 Dashboard 用于可视化验证集群行为。**适用读者**:有 Java/Spring Boot 基础的开发者,对分布式共识感兴趣的同学**学到什么**:Raft 核心概念、SOFAJRaft 集成方式、状态机设计、Leader 重定向、故障转移实战1. 系统架构1.1 角色分配组件技术选型Raft 引擎SOFAJRaft 1.4.0应用框架Spring Boot 2.7.18KV 存储ConcurrentHashMap(状态机)节点 RPCBolt(JRaft 内置)客户端 APIREST (HTTP/JSON)1.2 端口分配节点HTTP (REST API)Raft RPCNode 180808081Node 280828083Node 3808480851.3 架构图┌──────────────────────────────────────────────────────────┐ │ Raft Cluster │ │ │ │ Node1(:8080) ──Raft RPC── Node2(:8082) ──Raft RPC── Node3(:8084) │ RPC:8081 RPC:8083 RPC:8085 │ (Follower) (Leader) (Follower) │ │ ▲ │ ▲ │ │ │ 307 Redirect │ Log Replication │ │ │ └────────────────────────┴────────────────────────┘ │ │ │ └──────────────────────────────────────────────────────────┘ ▲ │ HTTP REST ▼ Client (curl / Dashboard)所有写请求必须提交给 Leader。如果请求落在 Follower 上,返回307 Temporary Redirect自动转发到 Leader。2. 项目结构src/main/java/com/raftha/ ├── RaftHaApplication.java # Spring Boot 入口 ├── config/ │ ├── AppConfig.java # CORS + RestTemplate │ └── RaftProperties.java # 配置映射 + 校验 ├── raft/ │ ├── RaftServerBootstrap.java # JRaft 节点启动/停止 │ ├── KvStateMachine.java # KV 状态机(StateMachine) │ ├── SimpleLogStorage.java # 自定义日志存储 │ └── CustomJRaftServiceFactory.java # 服务工厂 └── controller/ └── KvController.java # REST API + Leader 重定向3. 完整代码实现3.1 pom.xml?xml version="1.0" encoding="UTF-8"? project xmlns="http://maven.apache.org/POM/4.0.0" xmlns:xsi="http://www.w3.org/2001/XMLSchema-instance" xsi:schemaLocation="http://maven.apache.org/POM/4.0.0 https://maven.apache.org/xsd/maven-4.0.0.xsd" modelVersion4.0.0/modelVersion parent groupIdorg.springframework.boot/groupId artifactIdspring-boot-starter-parent/artifactId version2.7.18/version relativePath/ /parent groupIdcom.raftha/groupId artifactIdraft-ha-app/artifactId version1.0.0/version nameraft-ha-app/name properties java.version1.8/java.version jraft.version1.4.0/jraft.version /properties dependencies dependency groupIdorg.springframework.boot/groupId artifactIdspring-boot-starter-web/artifactId /dependency dependency groupIdcom.alipay.sofa/groupId artifactIdjraft-core/artifactId version${jraft.version}/version exclusions exclusion groupIdorg.apache.logging.log4j/groupId artifactIdlog4j-api/artifactId /exclusion exclusion groupIdorg.apache.logging.log4j/groupId artifactIdlog4j-core/artifactId /exclusion /exclusions /dependency /dependencies build plugins plugin groupIdorg.springframework.boot/groupId artifactIdspring-boot-maven-plugin/artifactId /plugin /plugins /build /project3.2 启动入口package com.raftha; import org.springframework.boot.SpringApplication; import org.springframework.boot.autoconfigure.SpringBootApplication; @SpringBootApplication public class RaftHaApplication { public static void main(String[] args) { SpringApplication.run(RaftHaApplication.class, args); } }3.3 配置映射与校验package com.raftha.config; import org.springframework.boot.context.properties.ConfigurationProperties; import org.springframework.stereotype.Component; import javax.annotation.PostConstruct; import java.util.List; @Component @ConfigurationProperties(prefix = "raft") public class RaftProperties { private int serverId; private String serverAddr; private ListString peers; private ListString httpAddrs; private String dataPath; private int electionTimeoutMs = 300; private int heartbeatIntervalMs = 100; // JRaft 1.4.0 内部推导 private int snapshotIntervalSecs = 3600; @PostConstruct public void validate() { if (serverAddr == null || serverAddr.trim().isEmpty()) throw new IllegalStateException("raft.server-addr must not be empty"); if (peers == null || peers.isEmpty()) throw new IllegalStateException("raft.peers must not be empty"); if (httpAddrs == null || httpAddrs.isEmpty()) throw new IllegalStateException("raft.http-addrs must not be empty"); } // getters setters... }3.4 节点配置文件application-node1.yml(节点 1,HTTP 8080 / RPC 8081):server: port: 8080 raft: server-id: 1 server-addr: 127.0.0.1:8081 peers: - 127.0.0.1:8081 - 127.0.0.1:8083 - 127.0.0.1:8085 http-addrs: - http://127.0.0.1

相关文章:

基于 SOFAJRaft + Spring Boot 构建高可用 KV 存储集群(完整源码)

基于 SOFAJRaft + Spring Boot 构建高可用 KV 存储集群(完整源码) 引言 在分布式系统中,一致性 是核心难题。Raft 是比 Paxos 更易于理解的共识算法,而 SOFAJRaft 是蚂蚁集团开源的 Java 高性能 Raft 实现。 本文带你从零构建一个 3 节点高可用 KV 存储集群,包含完整源码、…...

半年飙到 15.7 万 Star!OpenCode:Claude Code 最强开源对手,模型随便挑

👉 这是一个或许对你有用的社群🐱 一对一交流/面试小册/简历优化/求职解惑,欢迎加入「芋道快速开发平台」知识星球。下面是星球提供的部分资料: 《项目实战(视频)》:从书中学,往事上…...

北京欧雷新宇助力重庆机电工程高级技工学校建成“动捕+虚拟拍摄”实训基地,赋能影视动漫人才培养

项目名称:重庆机电工程高级技工学校“计算机动画与制作实训基地”项目 地点:重庆市 应用专业:影视动漫设计与制作专业 项目概述: 近日,北京欧雷新宇动画科技有限公司作为核心产品与技术提供商并承担整体实施的“计算机动画与…...

微信AI机器人终极指南:如何用开源工具打造智能群聊助手

微信AI机器人终极指南:如何用开源工具打造智能群聊助手 【免费下载链接】wechat-bot 🤖一个基于 WeChaty 结合 ChatGPT / Claude / Kimi / DeepSeek / Ollama等Ai服务实现的微信机器人 ,可以用来帮助你自动回复微信消息,或者社群分…...

上机器人真能省人吗,先看这几个车间实情

就以我自己的视角,给同样想推动自动化改造的工厂管理者们,聊聊这里面的门道和实在账。很多人问我,你们做自动化集成的是不是就爱忽悠老板砸钱上机器人?听着光鲜,最后落灰的“铁疙瘩”我见得多了。我是自动化老厂的二代…...

LeetCode 数据流中第K大元素题解

LeetCode 数据流中第K大元素题解 题目描述 设计一个数据流,找到数据流中第 k 大的元素。 示例: 输入:k 3, arr [4,6,5]输出:5 解题思路 方法:堆 思路: 使用最小堆维护前 k 大的元素。遍历数据流&#xff…...

LeetCode IPO问题题解

LeetCode IPO问题题解 题目描述 给定初始资本 w,最多完成 k 个项目。每个项目有利润和最低资本要求。找到能够获得的最大资本。 示例: 输入:capital [0,1,2,3], profits [1,2,3,5], k 2, w 0输出:4 解题思路 方法&#…...

LeetCode 合并K个排序链表题解

LeetCode 合并K个排序链表题解 题目描述 合并 k 个排序链表,返回合并后的排序链表。 示例: 输入:lists [[1,4,5],[1,3,4],[2,6]]输出:[1,1,2,3,4,4,5,6] 解题思路 方法:堆 思路: 使用最小堆存储每个链表的…...

LeetCode 前K个高频元素题解

LeetCode 前K个高频元素题解 题目描述 给定一个数组,找到前 k 个高频元素。 示例: 输入:nums [1,1,1,2,2,3], k 2输出:[1,2] 解题思路 方法:堆 思路: 使用哈希表统计每个元素出现的次数。使用最小堆维护前…...

用数据校准方向,让实习招聘更有章法

为什么盲目投流不如精准的搜索曝光? 在校招实习的日常招募中,HR常常面临一个困惑:明明岗位薪资和公司平台都不错,为什么搜索量和投递量却迟迟上不去?这往往是因为在信息密度极高的春招季,企业的校招信息被…...

R3nzSkin国服换肤工具:免费体验所有英雄联盟皮肤的终极指南

R3nzSkin国服换肤工具:免费体验所有英雄联盟皮肤的终极指南 【免费下载链接】R3nzSkin-For-China-Server Skin changer for League of Legends (LOL) 项目地址: https://gitcode.com/gh_mirrors/r3/R3nzSkin-For-China-Server 你是否梦想在英雄联盟国服中免费…...

为什么你需要FFmpeg Batch AV Converter:视频批量处理的终极解决方案

为什么你需要FFmpeg Batch AV Converter:视频批量处理的终极解决方案 【免费下载链接】ffmpeg_batch FFmpeg Batch AV Converter 项目地址: https://gitcode.com/gh_mirrors/ff/ffmpeg_batch 如果你经常需要处理大量视频文件,一定经历过这样的烦恼…...

【AI概念设计黄金标准】:NASA前可视化总监揭秘——如何用Midjourney输出符合影视工业管线的分镜资产

更多请点击: https://intelliparadigm.com 第一章:AI概念设计黄金标准的工业级定义 在高可靠性AI系统开发中,“概念设计”并非抽象构思阶段,而是承载可验证性、可追溯性与可部署性的工程锚点。工业级定义要求该阶段输出必须满足…...

OBS面部追踪插件:让你的直播镜头自动跟随你的脸

OBS面部追踪插件:让你的直播镜头自动跟随你的脸 【免费下载链接】obs-face-tracker Face tracking plugin for OBS Studio 项目地址: https://gitcode.com/gh_mirrors/ob/obs-face-tracker 还在为直播时频繁调整镜头位置而烦恼吗?OBS Face Tracke…...

【限时公开】DeepSeek官方未披露的GPU最小可行配置表:单卡L4跑7B模型的温度/功耗/吞吐临界点实测数据

更多请点击: https://kaifayun.com 第一章:DeepSeek GPU资源需求全景概览 DeepSeek系列大模型(如DeepSeek-V2、DeepSeek-Coder、DeepSeek-MoE)在训练与推理阶段对GPU硬件存在显著差异化的资源依赖。理解其底层计算特征、显存占用…...

别再死记硬背了!用‘IP地址与运算’这个技巧,5分钟搞懂子网掩码和网络地址

子网掩码实战:5分钟掌握IP与运算的核心技巧 网络工程师面试时总会被问到"如何快速计算网络地址",而很多初学者面对子网掩码和IP地址的二进制转换就头疼不已。其实有个被大多数教材忽略的技巧——IP地址主机位置零法,能让你不用完整…...

华为HCIA-Datacom认证 第七章第八章 案例教程

华为HCIA-Datacom认证 第七章&第八章 案例教程 一、背景延续:小明的网络运维新课题 前几次网络改造完成后,公司的办公网络已经稳定运行了一阵子。小明也从当初的手忙脚乱成长为一名能独立处理基础网络问题的工程师。然而,随着公司网络的不断扩展,新的管理需求随之而来…...

AES128加密实战:用C语言写一个加密函数,并集成到你的STM32项目里

AES128加密实战:用C语言写一个加密函数,并集成到你的STM32项目里 在物联网设备开发中,数据安全传输是至关重要的环节。想象一下,你的STM32设备需要通过无线网络发送传感器数据到云端,如果这些数据以明文传输&#xff0…...

从游戏画面Bug到图形学原理:一次深度测试失败的排查与透视矫正插值的深度理解

从游戏画面Bug到图形学原理:深度测试失败的排查与透视矫正插值解析 深夜调试游戏引擎时,屏幕上的三角形边缘突然出现诡异的闪烁——这种被称为"深度冲突"的现象,往往让开发者陷入漫长的调试循环。本文将以一个实际开发中的深度测试…...

CAD新手别再用直线硬画了!用PL命令的‘A’和‘R’快速搞定带半径的圆弧多段线

CAD高效绘图:用PL命令玩转带半径的圆弧多段线 刚接触CAD的设计师常陷入一个误区——用直线工具硬生生拼接出复杂曲线。这种操作不仅效率低下,后期修改更是噩梦。想象一下绘制建筑装饰线条或机械管道弯头时,反复调整几十个线段连接点的场景。其…...

对比官方原价Taotoken活动价带来的Token成本优化感受

🚀 告别海外账号与网络限制!稳定直连全球优质大模型,限时半价接入中。 👉 点击领取海量免费额度 对比官方原价与Taotoken活动价带来的Token成本优化感受 1. 引言:开发者视角下的模型调用成本 对于频繁使用大模型API进…...

ArcGIS 10.2.2许可服务罢工了?别慌,试试这个替换Service.txt和ARCGIS.exe的终极方案

ArcGIS 10.2.2许可服务故障终极修复指南:深入解析文件替换方案 当ArcGIS 10.2.2的许可服务突然罢工,所有常规方法都失效时,那种挫败感只有GIS专业人员才能真正体会。你试过关闭防火墙、调整服务启动类型、甚至重启服务器,但那个令…...

eLabFTW:开源电子实验笔记本如何重塑科研数据管理流程

eLabFTW:开源电子实验笔记本如何重塑科研数据管理流程 【免费下载链接】elabftw :notebook: eLabFTW is the most popular open source electronic lab notebook for research labs. 项目地址: https://gitcode.com/gh_mirrors/el/elabftw 在数字化科研时代&…...

如何在VSCode中实现高效Mermaid图表实时预览:一站式解决方案

如何在VSCode中实现高效Mermaid图表实时预览:一站式解决方案 【免费下载链接】vscode-mermaid-preview Previews Mermaid diagrams 项目地址: https://gitcode.com/gh_mirrors/vs/vscode-mermaid-preview 还在为技术文档中的图表制作而头疼吗?你是…...

【Midjourney放松模式深度解密】:20年AI图像生成专家亲测的4大核心差异与3种误用陷阱

更多请点击: https://kaifayun.com 第一章:Midjourney放松模式的本质定义与演进脉络 放松模式(Relaxed Mode)是Midjourney V6引入的一项关键资源调度机制,其本质并非降低图像生成质量,而是通过动态协调GPU…...

仅剩最后47份!《Midjourney概念艺术创作密钥手册》(含23个受版权保护的材质编码+动态光照参数表)

更多请点击: https://codechina.net 第一章:《Midjourney概念艺术创作密钥手册》核心价值与版权说明 核心价值定位 本手册聚焦于概念艺术创作中“意图—提示—反馈—迭代”的闭环实践,提炼出可复用的提示工程范式、风格锚定策略与跨模态语义…...

【人工智能核心技术详解】7 深度神经网络正则化技术体系_贝叶斯视角下的统一理论

深度神经网络正则化技术体系:贝叶斯视角下的统一理论手册 文章架构总览 #mermaid-svg-lhtjBcaOxIDdpUDM{font-family:"trebuchet ms",verdana,arial,sans-serif;font-size:16px;fill:#333;}@keyframes edge-animation-frame{from{stroke-dashoffset:0;}}@keyframes …...

如何在5分钟内掌握VSCode Mermaid图表实时预览:开发者终极指南

如何在5分钟内掌握VSCode Mermaid图表实时预览:开发者终极指南 【免费下载链接】vscode-mermaid-preview Previews Mermaid diagrams 项目地址: https://gitcode.com/gh_mirrors/vs/vscode-mermaid-preview 还在为编写技术文档时需要在代码编辑器与图表预览工…...

SoM嵌入式开发实战:从选型到量产的全流程解析

1. 项目概述:为什么SoM正在重塑嵌入式开发 在嵌入式系统开发这个行当里干了十几年,我亲眼见证了开发模式从“一切从零开始”到“模块化集成”的巨大转变。早期做一个项目,从选型MCU、画原理图、设计PCB、焊接调试,再到底层驱动移植…...

FanControl:Windows平台终极风扇控制解决方案

FanControl:Windows平台终极风扇控制解决方案 【免费下载链接】FanControl.Releases This is the release repository for Fan Control, a highly customizable fan controlling software for Windows. 项目地址: https://gitcode.com/GitHub_Trending/fa/FanCont…...