当前位置: 首页 > article >正文

高并发接口总被打崩?我用 ArrayBlockingQueue + 底层源码深度剖析搞定流控

一、实现原理⚠️注意✔️有界阻塞队列容量固定必须在初始化时指定长度无自动扩容机制。✔️先进先出FIFO入队元素从队尾添加出队元素从队首取出。✔️存取互斥所有读写操作共享同一把ReentrantLock 锁同一时间只能执行入队或出队操作。二使用场景1、流控例子package com.nl; import java.util.concurrent.ArrayBlockingQueue; import java.util.concurrent.BlockingQueue; import java.util.concurrent.TimeUnit; /** * 基于阻塞队列的高并发流量控制 * 作用限制同时进入系统的请求数保护系统不被压垮 */ public class FlowControl { // 队列容量 最大允许并发排队的请求数流控核心 private static final int MAX_QUEUE_SIZE 2; // 阻塞队列线程安全自动实现阻塞/唤醒 private static final BlockingQueueString QUEUE new ArrayBlockingQueue(MAX_QUEUE_SIZE); public static void main(String[] args) { System.out.println(系统启动最大并发排队请求 MAX_QUEUE_SIZE); // 消费者固定线程数处理请求保护系统 // 这里只开 1 个处理线程你可以根据系统能力开 3/5/10 个 new Thread(FlowControl::handleRequest, Consumer-Thread).start(); // 生产者模拟高并发请求10个并发请求 for (int i 1; i 5; i) { final int requestNo i; new Thread(() - { try { // 关键队列满了会自动阻塞等待 → 真正限流 QUEUE.put(Request- requestNo); // 阻塞 1 秒丢弃请求 // boolean success QUEUE.offer(Request- requestNo, 1, TimeUnit.SECONDS); // if (!success) { // System.out.println(请求过多系统繁忙拒绝请求 requestNo); // } System.out.println(【入队】 Thread.currentThread().getName() → Request- requestNo); } catch (InterruptedException e) { Thread.currentThread().interrupt(); } }, Producer- i).start(); } } /** * 消费处理请求核心业务 */ private static void handleRequest() { while (true) { try { // 关键队列空会自动阻塞不消耗CPU String request QUEUE.take(); // 模拟业务处理如接口调用、数据库操作 System.out.println(【处理】 Thread.currentThread().getName() 处理 → request); Thread.sleep(500); } catch (InterruptedException e) { Thread.currentThread().interrupt(); break; } } } }2、输出结果系统启动最大并发排队请求2 【入队】Producer-1 → Request-1 【入队】Producer-4 → Request-4 【处理】Consumer-Thread 处理 → Request-1 【入队】Producer-2 → Request-2 【处理】Consumer-Thread 处理 → Request-4 【入队】Producer-3 → Request-3 【处理】Consumer-Thread 处理 → Request-2 【入队】Producer-5 → Request-5 【处理】Consumer-Thread 处理 → Request-3 【处理】Consumer-Thread 处理 → Request-5⚠️注意✔️阻塞队列是高并发限流、削峰、保护系统的最简单高效方案✔️请求不会冲垮系统CPU / 线程 / 内存都可控三、源码分析1、构造函数public class ArrayBlockingQueueE extends AbstractQueueE implements BlockingQueueE, java.io.Serializable { ...... //数据元素数组 final Object[] items; //下一个待取出元素索引 int takeIndex; //下一个待添加元素索引 int putIndex; //数组元素个数 int count; //ReentrantLock 内部锁 final ReentrantLock lock; //消费者条件 private final Condition notEmpty; //生产者条件 private final Condition notFull; public ArrayBlockingQueue(int capacity) { this(capacity, false); } // public ArrayBlockingQueue(int capacity, boolean fair) { if (capacity 0) throw new IllegalArgumentException(); this.items new Object[capacity]; lock new ReentrantLock(fair); notEmpty lock.newCondition(); notFull lock.newCondition(); } ...... }2、ReentrantLock并发控制// 出队 public E take() throws InterruptedException { // ReentrantLock final ReentrantLock lock this.lock; lock.lockInterruptibly(); try { //count判断 while (count 0) notEmpty.await(); return dequeue(); } finally { lock.unlock(); } } // 入队 public void put(E e) throws InterruptedException { checkNotNull(e); final ReentrantLock lock this.lock; lock.lockInterruptibly(); try { while (count items.length) notFull.await(); enqueue(e); } finally { lock.unlock(); } }锁机制使用ReentrantLock保证线程安全入队和出队操作共用同一把锁实现完全互斥。阻塞等待notEmpty当队列为空count0时出队线程会阻塞在该对象上等待新元素入队。notFull当队列已满countlength时入队线程会阻塞在该对象上等待队列腾出空位。3、数据结构3.1、数组Object[]final Object[] items this.items;3.2、入队和出队// 出队 private E dequeue() { // assert lock.getHoldCount() 1; // assert items[takeIndex] ! null; final Object[] items this.items; SuppressWarnings(unchecked) E x (E) items[takeIndex]; items[takeIndex] null; if (takeIndex items.length) takeIndex 0; count--; if (itrs ! null) itrs.elementDequeued(); notFull.signal(); return x; } // 入队 private void enqueue(E x) { // assert lock.getHoldCount() 1; // assert items[putIndex] null; final Object[] items this.items; items[putIndex] x; if (putIndex items.length) putIndex 0; count; notEmpty.signal(); }⚠️注意✔️底层采用静态数组实现。✔️数组中无元素的位置会被 null 占位因此空间利用率固定。4、双指针设计4.1、入队put/offer从putIndex位置开始添加元素。putIndex自增到达数组末尾时重置为 0循环数组。元素入队成功后唤醒阻塞在notEmpty上的出队线程。4.2、出队take/poll从takeIndex位置开始取出元素。takeIndex自增到达数组末尾时重置为 0循环数组。元素出队成功后唤醒阻塞在notFull上的入队线程。⚠️指针设计✔️putIndex和takeIndex均从队首向队尾循环移动严格保证 FIFO 顺序。✔️ArrayBlockingQueue的双指针putIndex和takeIndex是为了在静态数组上高效实现循环队列环形缓冲区。5、固定长度的静态数组底层是固定长度的静态数组没有扩容机制。用putIndex记录下一个入队元素要存放的位置用takeIndex记录下一个出队元素要取出的位置。两个指针都从 0 开始向后移动到达数组末尾index array.length时重置为 0形成逻辑上的环形复用避免数组空间浪费。三、索引变化逻辑为什么初始都是 0put 和 take 会不会冲突两个索引都从 0 开始put 和 take 不会冲突核心原因是count计数 锁的互斥性保证了安全四、总结优势有界设计避免了内存溢出风险锁和条件变量的组合实现了高效的生产者 - 消费者模式。局限容量固定无法动态扩展独占锁ReentrantLock实现线程安全入队和出队操作使用同一个锁对象在高并发场景下会成为性能瓶颈。

相关文章:

高并发接口总被打崩?我用 ArrayBlockingQueue + 底层源码深度剖析搞定流控

一、实现原理⚠️注意 ✔️有界阻塞队列:容量固定,必须在初始化时指定长度,无自动扩容机制。 ✔️先进先出(FIFO):入队元素从队尾添加,出队元素从队首取出。 ✔️存取互斥:所有读写操…...

Linux网络编程核心API速查手册

认识Pass层级结构 Pass范围从上到下一共分为5个层级: 模块层级:单个.ll或.bc文件 调用图层级:函数调用的关系。 函数层级:单个函数。 基本块层级:单个代码块。例如C语言中{}括起来的最小代码。 指令层级:单…...

3分钟搞定GitHub加速:国内开发者必备的免费终极解决方案

3分钟搞定GitHub加速:国内开发者必备的免费终极解决方案 【免费下载链接】Fast-GitHub 国内Github下载很慢,用上了这个插件后,下载速度嗖嗖嗖的~! 项目地址: https://gitcode.com/gh_mirrors/fa/Fast-GitHub 还在为GitHub龟…...

如何一步一步地获取和风天气的天气数据(2026版)

如何一步一步地获取和风天气的天气数据(2026版)一、和风天气核心优势二、前期准备2.1 注册和风天气开发者账号2.2 创建项目并获取认证密钥(API 项目ID/JWT Token)2.2.1 登录控制台 → 进入项目管理 → 点击创建项目。2.2.2 填写项…...

2026届最火的降重复率工具实际效果

Ai论文网站排名(开题报告、文献综述、降aigc率、降重综合对比) TOP1. 千笔AI TOP2. aipasspaper TOP3. 清北论文 TOP4. 豆包 TOP5. kimi TOP6. deepseek 维普平台针对AIGC技术的引入,制定了严谨的检测规范,在当前学术场景里…...

警惕!AI生成的科研插图,为啥不能直接用于期刊发表?

做科研的小伙伴们,大概率都有过这样的经历:为了节省绘图时间,用AI快速生成了科研插图,画面清晰、逻辑贴合,本以为能直接用于论文投稿,却被期刊编辑退回,理由清一色——AI生成图不符合发表规范。…...

怎么将AI生成的图片转成可编辑的矢量图?

做科研的宝子们谁懂啊!绘制科研插图真的太费时间了😭 要么得花几天啃专业绘图软件,要么找素材拼凑导致视觉割裂、标注出错,好不容易用AI生成一张满意的图,却发现无法编辑、分辨率不足,连期刊投稿的基本要求…...

SClick技术解析:防休眠工具的工作原理探讨

SClick是一款轻量级的防休眠工具,能够帮助用户解决Windows系统自动休眠带来的诸多不便。 软件体积仅有几十KB,绿色便携,无需安装,即用即走。 它通过模拟鼠标点击的方式,让系统以为用户一直在操作电脑,从而防…...

SClick进阶技巧:6个提升使用体验的实用功能

SClick是一款轻量级的防休眠工具,能够帮助用户解决Windows系统自动休眠带来的诸多不便。 软件体积仅有几十KB,绿色便携,无需安装,即用即走。 它通过模拟鼠标点击的方式,让系统以为用户一直在操作电脑,从而防…...

基于VLFM的中文指令视觉语言导航系统设计与实现

基于VLFM的中文指令视觉语言导航系统设计与实现 一、引言 1.1 项目背景 视觉语言导航(Vision Language Navigation,VLN)是具身智能领域的核心任务之一,其目标是让智能体根据自然语言指令在三维环境中自主导航,完成路径规划与空间定位任务[reference:0]。近年来,随着大…...

2026最新Node.js+NVM全平台安装教程

2026最新Node.jsNVM全平台安装教程 前言 在前端、后端全栈开发中,Node.js 是必不可少的运行环境,而不同项目往往依赖不同的 Node.js 版本,手动安装卸载不仅麻烦还容易冲突。 NVM(Node Version Manager) 作为 Node.j…...

Lab4-Lab: traps MIT6.1810操作系统工程【持续更新】

kernel/trap.c当中是处理所有中断的代码。 RISC-V assembly (简单) ​ 在这个lab当中,要求我们阅读一些汇编代码,并且了解c语言的某些语句对应的汇编是怎样的,同时了解不同寄存器的不同职责(例如ra寄存器是存放返回地址的寄存器…...

我发现了一个超级好用快速生成er图的工具

写论文、做毕设、搞数据库设计的小伙伴们,谁还在手动画 ER 图?Visio 太笨重、PowerDesigner 上手难、PPT 画出来不规范,调格式调半天,答辩还被老师说图不标准😭 最近我挖到一个免费、在线、一键生成的神器&#xff0c…...

解密Prompt系列69. 从上下文管理到Runtime操作系统

AM)”,将 Runtime 视为“状态(State)”,构建一套属于智能体的“操作系统”。 最近,ByteDance 的 Context-Folding、MIT 的 RLM、以及热门项目 Ralph 的出现,共同指向了一个极其明确的趋势&…...

汇编VS高级语言:从硬件操控到高效开发

汇编语言和Visual Studio(VS)的主要区别如下:核心区别对比维度汇编语言Visual Studio本质一种低级编程语言,直接操作硬件一种集成开发环境(IDE),支持多种高级语言使用场景嵌入式系统、驱动开发、…...

10款主流施工项目管理系统对比:建筑工程企业选型参考

本文将深入对比10款建筑工程项目管理系统:Worktile、Oracle Primavera P6、Oracle Aconex、Autodesk Build、Procore、Microsoft Project、Smartsheet、monday.com、Jira Confluence、广联达数字项目管理平台。文章将从定位、适用规模、部署方式、核心模块、安全合…...

4.2 学习笔记

Mysql 数据库专题1.本专题的学习重点1、熟悉Mysql数据库的连接工具2、掌握查询的SQL语句的编写2.什么是数据库数据库就是存储数据的仓库3.为什么要学数据库Mysql在测试过程中,有时候需要通过访问数据库验证数据的正确性比如:验证统计报表....4.企业主流的…...

【WSL】【OpenClaw】WSL 中配置 SearXNG 指南

SearXNG 部署指南 环境要求 Python 版本:≥ 3.11(推荐 3.13)依赖管理:pip配置目录:~/.searxng/ 安装步骤 1. 克隆 SearXNG 仓库 cd ~ git clone https://github.com/searxng/searxng.git2. 安装 Python 依赖 cd searxn…...

MLOps实践指南:让AI模型持续交付

在人工智能技术日益渗透到各行各业核心业务的今天,一个严峻的现实是:大量机器学习模型在实验室里表现优异,却止步于概念验证阶段,难以稳定、高效地部署到生产环境。对于软件测试从业者而言,传统的测试方法与工具在应对…...

别再让用户装Python了!手把手教你用PyInstaller把Tkinter小工具变成独立EXE

告别Python依赖:用PyInstaller打造零配置的Tkinter桌面应用 每次看到同事对着你开发的工具一脸茫然地问"Python是什么?pip又该怎么装?",作为开发者的你是否感到深深的无力?这种技术鸿沟正在吞噬无数优秀工具…...

保姆级教程:用PyTorch 1.13.1在GPU上跑通PointNet分类与分割(附自写推理脚本)

从零实现PointNet分类与分割:PyTorch 1.13.1 GPU实战指南 当你第一次接触3D点云处理时,可能会被各种复杂的数学公式和算法吓退。但PointNet的出现改变了这一局面——这个开创性的网络架构直接处理原始点云数据,无需复杂的体素化或网格化预处理…...

ESP-01s固件烧录与Arduino编程:从接线玄学到一键下载的避坑指南

1. ESP-01s模块入门:为什么你的接线总是出错? 第一次接触ESP-01s的朋友,十有八九会在烧录固件或上传程序时遇到各种莫名其妙的失败。我见过太多人把模块插上CH340就以为万事大吉,结果在电脑前折腾一整天都搞不定下载。这其实是因为…...

PADS VX2.8 极坐标布局技巧:圆形灯板LED高效排列指南

1. 极坐标布局在圆形灯板设计中的核心价值 第一次接触圆形LED灯板设计时,我被密密麻麻的元件排列搞得头晕眼花。传统直角坐标系下,要精确控制每个LED灯珠的间距和角度,需要反复计算XY坐标,效率极低。直到发现PADS VX2.8的极坐标功…...

3D点云检测实战指南-数据准备篇(一):Nuscenes数据集解析与应用

1. Nuscenes数据集基础解析 第一次接触Nuscenes数据集时,我被它庞大的数据量和精细的标注震撼到了。这个由Motional团队打造的自动驾驶数据集,包含了1000个真实驾驶场景,每个场景持续20秒。不同于普通数据集,Nuscenes最吸引我的是…...

所有下载都一定要直接从个人服务器直接下载--------因为个人宽带的上传速度一点也不慢

可以看到居然速度高达10M/S如果你直接从云服务器下载速度就非常慢:这就是1M的宽带,所以很慢。所以如果是下载apk文件,一定要从自己的服务器直接下载:就是带10001端口号的个人服务器。...

避坑指南:用OpenCV处理Kinetics-400数据集时,你可能遇到的3个典型问题及解决方案

避坑指南:用OpenCV处理Kinetics-400数据集时,你可能遇到的3个典型问题及解决方案 处理大型视频数据集如Kinetics-400时,即使是最有经验的开发者也会遇到各种意料之外的问题。本文将深入探讨三个最常见的技术陷阱,并提供经过实战验…...

服务器速度很慢

表现:20K/s ssh有时候能打开,有时候打不开结果:没有交话费,欠费。解决方式:充值200元现在能打开了,另外添加了一个参数:ProxyPreserveHost off但是很可能没用,因为我一开始直接访问…...

告别CNN!用Mask2Former+Swin Transformer实战图像分割,保姆级代码解析

从CNN到Transformer:Mask2Former与Swin Transformer在图像分割中的实战指南 图像分割技术正在经历一场静默的革命。传统卷积神经网络(CNN)主导的时代逐渐让位于基于Transformer的新型架构,这种转变不仅仅是技术栈的更新&#xff…...

保姆级教程:用AutoDL租4090显卡,在PyCharm里远程复现具身智能论文PAI0(附完整避坑清单)

零基础实战:AutoDLPyCharm复现PAI0具身智能论文全流程指南 第一次接触云端GPU服务器和远程开发?别担心,这篇教程会手把手带你用AutoDL租用4090显卡,并通过PyCharm实现无缝远程开发,完整复现具身智能领域的前沿论文PAI0…...

华为eNSP防火墙GRE over IPSec保姆级排错指南:从隧道起不来、加密失败到稳定通信

华为eNSP防火墙GRE over IPSec实战排错手册:从零排查到稳定通信 当你在华为eNSP环境中搭建GRE over IPSec隧道时,是否遇到过隧道死活起不来、加密协商失败或者路由莫名其妙的消失?这篇文章将带你走进真实排错现场,用工程师的视角一…...