ByteBuffer 与 ByteBuf 的对比与优缺点分析
在 Java 网络编程和高性能 I/O 场景中,ByteBuffer 和 ByteBuf 是两种重要的缓冲区处理工具。ByteBuffer 是 Java NIO 标准库的一部分,而 ByteBuf 是由 Netty 框架提供的增强缓冲区工具。在实际开发中,选择哪一种取决于场景需求和性能目标。
1. 什么是 ByteBuffer?
ByteBuffer 是 Java NIO(New Input/Output)中的核心类,用于以缓冲区的形式处理数据。它可以高效地读取、写入和操作字节数据,广泛用于文件读写、网络传输等场景。
ByteBuffer 的主要特性
- 固定容量:分配时指定固定大小,不能动态扩展。
- 操作模式切换:读写操作需要在 读模式 和 写模式 之间切换。
- 提供基本的字节操作:支持直接操作字节或转换为特定数据类型(如 int、long 等)。
- 堆内存和直接内存支持:
ByteBuffer可分配在堆内存或直接内存中,4.1版本后默认是直接内存,可以调用不同方法进行切换。 -
// 直接内存 ByteBuf directBuf = ByteBufAllocator.DEFAULT.directBuffer(); // 堆内存 ByteBuf heapBuf = ByteBufAllocator.DEFAULT.heapBuffer();
2. 什么是 ByteBuf?
ByteBuf 是由 Netty 框架引入的增强型缓冲区工具。它针对 ByteBuffer 的一些缺点进行了优化,使得缓冲区在高性能场景中更高效且更易用。
ByteBuf 的主要特性
- 动态扩展:支持自动扩容,避免手动重新分配缓冲区。
- 读写指针分离:读操作和写操作有独立的指针,无需切换模式。
- 池化机制:内置内存池,优化了内存分配和回收效率。
- 零拷贝:支持更高级的零拷贝功能(如
slice和复合缓冲区)。 - 引用计数:通过引用计数机制有效管理缓冲区生命周期,避免内存泄漏。
3. ByteBuffer 与 ByteBuf 的对比
下表总结了 ByteBuffer 和 ByteBuf 的核心差异和各自的优缺点:
| 特性 | ByteBuffer | ByteBuf |
|---|---|---|
| 读写模式 | 使用同一个指针,需要切换模式(flip()、compact()) | 读写指针分离,无需手动切换,操作更简单 |
| 扩容支持 | 不支持动态扩容,需手动重新分配 | 支持动态扩容,内存自动调整 |
| 池化机制 | 无池化机制,每次分配都需要系统调用 | 支持内存池化(PooledByteBufAllocator),效率更高 |
| 零拷贝 | 支持基础的 slice() 和 duplicate() | 提供高级零拷贝支持(slice、复合缓冲区等) |
| 引用计数 | 不支持引用计数,生命周期需开发者手动管理 | 支持引用计数(retain()、release()),自动内存回收 |
| API 易用性 | 操作模式复杂,需手动管理指针位置 | 提供更丰富和直观的 API,适合高性能场景 |
| 内存分配 | 支持堆内存和直接内存 | 支持堆内存、直接内存,以及池化内存 |
| 适用场景 | 简单的 I/O 操作或 Java 标准库 | 高性能网络编程(特别是基于 Netty 的开发) |
4. ByteBuf 的优势详解
4.1 读写指针分离
-
ByteBuffer 使用同一个指针来管理读写位置,需要调用
flip()切换读写模式。这种操作容易出错且不直观。比如:
ByteBuffer buffer = ByteBuffer.allocate(10);
buffer.put((byte) 1);
buffer.flip(); // 切换到读模式
byte b = buffer.get();
buffer.compact(); // 再次切换到写模式
ByteBuf 使用独立的读指针和写指针,无需模式切换:
ByteBuf buf = Unpooled.buffer(10);
buf.writeByte(1); // 写数据
byte b = buf.readByte(); // 直接读取,无需模式切换
4.2 动态扩容
-
ByteBuffer 的容量固定,当容量不足时,必须手动扩展。例如:
ByteBuffer buffer = ByteBuffer.allocate(10);
buffer.put((byte) 1); // 容量满了需要手动重新分配
ByteBuffer newBuffer = ByteBuffer.allocate(20);
buffer.flip();
newBuffer.put(buffer);
ByteBuf 支持动态扩容(最大值是Int最大值Integer.MAX_VALUE),无需手动管理:
ByteBuf buf = Unpooled.buffer(10);
buf.writeBytes(new byte[15]); // 自动扩容
4.3 内存池化
- ByteBuf 提供内置内存池(
PooledByteBufAllocator),通过对象复用优化内存分配效率,降低垃圾回收频率。 - 对于高并发、高频分配的场景,池化机制可以显著提升性能。
- netty4.1之后默认开启池化,但是安卓默认是非池化。需要切换到非池化需要加启动参数:
-
-Dio.netty.allocator.type=unpooled
4.4 零拷贝
- ByteBuf 提供更强大的零拷贝功能:
slice:创建子缓冲区,避免数据复制。- 复合缓冲区(CompositeByteBuf):通过逻辑组合多个物理缓冲区,避免拷贝。
- 直接内存支持:减少 JVM 堆到操作系统内核的拷贝。
4.5 引用计数
- ByteBuf 使用引用计数来管理内存,避免内存泄漏或重复释放:
ByteBuf buf = PooledByteBufAllocator.DEFAULT.buffer();
buf.retain(); // 增加引用计数
buf.release(); // 减少引用计数,当计数归零时内存自动回收
5. 适用场景
-
使用
ByteBuffer的场景:- 需要轻量级的缓冲区操作。
- 使用标准 Java 库开发(无需额外依赖)。
- 数据量较小且性能要求不高。
-
使用
ByteBuf的场景:- 高性能网络编程,例如 Netty 中的 HTTP 服务、RPC 框架等。
- 需要频繁扩展缓冲区或并发操作。
- 高吞吐量场景,例如处理大规模流式数据。
相关文章:
ByteBuffer 与 ByteBuf 的对比与优缺点分析
在 Java 网络编程和高性能 I/O 场景中,ByteBuffer 和 ByteBuf 是两种重要的缓冲区处理工具。ByteBuffer 是 Java NIO 标准库的一部分,而 ByteBuf 是由 Netty 框架提供的增强缓冲区工具。在实际开发中,选择哪一种取决于场景需求和性能目标。 …...
js高级06-ajax封装和跨域
8.1、ajax简介及相关知识 8.1.1、原生ajax 8.1.1.1、AJAX 简介 AJAX 全称为 Asynchronous JavaScript And XML,就是异步的 JS 和 XML。 通过 AJAX 可以在浏览器中向服务器发送异步请求,最大的优势:无刷新获取数据。 按需请求,可…...
RabbitMQ3:Java客户端快速入门
欢迎来到“雪碧聊技术”CSDN博客! 在这里,您将踏入一个专注于Java开发技术的知识殿堂。无论您是Java编程的初学者,还是具有一定经验的开发者,相信我的博客都能为您提供宝贵的学习资源和实用技巧。作为您的技术向导,我将…...
D 型 GaN HEMT 在功率转换方面的优势
氮化镓 (GaN) 是一种 III-V 族宽带隙半导体,由于在用作横向高电子迁移率晶体管 (HEMT) 时具有卓越的材料和器件性能,因此在功率转换应用中得到越来越多的采用。 HEMT 中产生的高击穿电场 (3.3 MV/cm) 和高二维电子气 (2DEG) 载流子迁移率 (2,000 cm 2 /…...
Java Web后端项目的特点和组成部分
技术栈 #### Java Web技术: - **Servlet**:Java Web的核心,用于处理HTTP请求。 - **WebServlet注解配置**:用于简化Servlet的配置。 - **HttpServlet基类**:大多数Servlet都继承自此基类。 - **请求响应处理**&#x…...
Vue3 + Vite + TS 项目引入 Eslint + Pritter
文章目录 一、ESLint 简介主要功能适用场景常用的 Eslint 配置项 二、Pritter 简介主要功能适用场景常用的 Prettier 配置项 三、Vue3 Vite TS 项目引入 Eslint Pritter1. 安装 ESLint2. 初始化 ESLint 配置3. 在 Vite 项目中启用 ESLint4. 在 VS Code 中启用 ESLint5. 集成…...
用Tauri框架构建跨平台桌面应用:1、Tauri快速开始
Tauri 是一个构建适用于所有主流桌面和移动平台的轻快二进制文件的框架。开发者们可以集成任何用于创建用户界面的可以被编译成 HTML、JavaScript 和 CSS 的前端框架,同时可以在必要时使用 Rust、Swift 和 Kotlin 等语言编写后端逻辑。 Tauri 是什么? |…...
Django实现智能问答助手-数据库方式读取问题和答案
扩展 增加问答数据库,通过 Django Admin 添加问题和答案。实现更复杂的问答逻辑,比如使用自然语言处理(NLP)库。使用前端框架(如 Bootstrap)增强用户界面 1.注册模型到 Django Admin(admin.py…...
stm32利用LED配置基础寄存器+体验滴答定时器+hal库环境配置
P1 LED控制与流水灯效果实现 概述 大家好,今天我们来学习一下如何在STM32上控制LED灯,并且实现一个流水灯的效果。这不仅是一个基础的实践,也是嵌入式开发中非常常见的需求。 LED控制 1. LED初始化 首先,我们需要对LED灯对应…...
JAVA开源项目 桂林旅游景点导游平台 计算机毕业设计
博主说明:本文项目编号 T 079 ,文末自助获取源码 \color{red}{T079,文末自助获取源码} T079,文末自助获取源码 目录 一、系统介绍二、演示录屏三、启动教程四、功能截图五、文案资料5.1 选题背景5.2 国内外研究现状5.3 可行性分析…...
docker安装使用Elasticsearch,解决启动后无法访问9200问题
1.docker安装、启动es docker pull elasticsearch:8.13.0docker images启动容器 docker run -d -p 9200:9200 -p 9300:9300 -e ES_JAVA_OPTS"-Xms256m -Xmx256m" --name es01 8ebd258614f1-d 后台运行-p 9200:9200 -p 9300:9300 开放与主机映射端口-e ES_JAVA_OPTS…...
GM、BP、LSTM时间预测预测代码
GM clc; clear; close all;%% 数据加载和预处理 [file, path] uigetfile(*.xlsx, Select the Excel file); filename fullfile(path, file); time_series xlsread(filename);% 确保数据是一列 time_series time_series(:);% 归一化数据 min_val min(time_series); max_v…...
《操作系统 - 清华大学》4 -5:非连续内存分配:页表一反向页表
文章目录 1. 大地址空间的问题2. 页寄存器( Page Registers )方案3. 基于关联内存(associative memory )的反向页表(inverted page table)4. 基于哈希(hashed)查找的反向页表5. 小结 1. 大地址空间的问题 …...
志愿者小程序源码社区网格志愿者服务小程序php
志愿者服务小程序源码开发方案:开发语言后端php,tp框架,前端是uniapp。 一 志愿者端-小程序: 申请成为志愿者,志愿者组织端进行审核。成为志愿者后,可以报名参加志愿者活动。 志愿者地图:可以…...
Java语言编程,通过阿里云mongo数据库监控实现数据库的连接池优化
一、背景 线上程序连接mongos超时,mongo监控显示连接数已使用100%。 java程序报错信息: org.mongodb.driver.connection: Closed connection [connectionId{localValue:1480}] to 192.168.10.16:3717 because there was a socket exception raised by…...
使用ufw配置防火墙,允许特定范围IP访问
文章目录 1. 安装 UFW(如果尚未安装)2. 允许特定 IP 地址访问 22 端口3. 允许特定子网访问 22 端口4. 启用 UFW5. 检查 UFW 状态6. 重新加载 UFW(如果需要)7. 删除规则(如果需要) 在ubuntu上使用 ufw&#…...
实现 UniApp 右上角按钮“扫一扫”功能实战教学
实现 UniApp 右上角按钮“扫一扫”功能实战教学 需求 点击右上角扫一扫按钮(onNavigationBarButtonTap监听),打开扫一扫页面(uni.scanCode) 扫描后,以网页的形式打开扫描内容(web-view组件),限制只能浏览带有执行域名的网站,例如…...
【2024亚太杯亚太赛APMCM C题】数学建模竞赛|宠物行业及相关产业的发展分析与策略|建模过程+完整代码论文全解全析
第一个问题是:请基于附件 1 中的数据以及你的团队收集的额外数据,分析过去五年中国宠物行业按宠物类型的发展情况。并分析中国宠物行业发展的因素,预测未来三年中国宠物行业的发展。 第一个问题:分析中国宠物行业按宠物类型的发展…...
ubtil循环函数调用
什么是until until循环是一种控制流结构。它与while循环相反,while循环是在条件为真时执行循环体,而until循环是在条件为假时执行循环体,直到条件为真时才停止循环。 until代码示例: i0 do until [ ! $i -lt 10 ] echo $…...
使用EFK收集k8s日志
首先我们使用EFK收集Kubernetes集群中的日志,本次实验讲解的是在Kubernetes集群中启动一个Elasticsearch集群,如果企业内已经有了Elasticsearch集群,可以直接将日志输出至已有的Elasticsearch集群。 文章目录 部署elasticsearch创建Kibana创建…...
19c补丁后oracle属主变化,导致不能识别磁盘组
补丁后服务器重启,数据库再次无法启动 ORA01017: invalid username/password; logon denied Oracle 19c 在打上 19.23 或以上补丁版本后,存在与用户组权限相关的问题。具体表现为,Oracle 实例的运行用户(oracle)和集…...
(二)TensorRT-LLM | 模型导出(v0.20.0rc3)
0. 概述 上一节 对安装和使用有个基本介绍。根据这个 issue 的描述,后续 TensorRT-LLM 团队可能更专注于更新和维护 pytorch backend。但 tensorrt backend 作为先前一直开发的工作,其中包含了大量可以学习的地方。本文主要看看它导出模型的部分&#x…...
Python爬虫实战:研究feedparser库相关技术
1. 引言 1.1 研究背景与意义 在当今信息爆炸的时代,互联网上存在着海量的信息资源。RSS(Really Simple Syndication)作为一种标准化的信息聚合技术,被广泛用于网站内容的发布和订阅。通过 RSS,用户可以方便地获取网站更新的内容,而无需频繁访问各个网站。 然而,互联网…...
Linux相关概念和易错知识点(42)(TCP的连接管理、可靠性、面临复杂网络的处理)
目录 1.TCP的连接管理机制(1)三次握手①握手过程②对握手过程的理解 (2)四次挥手(3)握手和挥手的触发(4)状态切换①挥手过程中状态的切换②握手过程中状态的切换 2.TCP的可靠性&…...
(转)什么是DockerCompose?它有什么作用?
一、什么是DockerCompose? DockerCompose可以基于Compose文件帮我们快速的部署分布式应用,而无需手动一个个创建和运行容器。 Compose文件是一个文本文件,通过指令定义集群中的每个容器如何运行。 DockerCompose就是把DockerFile转换成指令去运行。 …...
OpenLayers 分屏对比(地图联动)
注:当前使用的是 ol 5.3.0 版本,天地图使用的key请到天地图官网申请,并替换为自己的key 地图分屏对比在WebGIS开发中是很常见的功能,和卷帘图层不一样的是,分屏对比是在各个地图中添加相同或者不同的图层进行对比查看。…...
Spring数据访问模块设计
前面我们已经完成了IoC和web模块的设计,聪明的码友立马就知道了,该到数据访问模块了,要不就这俩玩个6啊,查库势在必行,至此,它来了。 一、核心设计理念 1、痛点在哪 应用离不开数据(数据库、No…...
使用 Streamlit 构建支持主流大模型与 Ollama 的轻量级统一平台
🎯 使用 Streamlit 构建支持主流大模型与 Ollama 的轻量级统一平台 📌 项目背景 随着大语言模型(LLM)的广泛应用,开发者常面临多个挑战: 各大模型(OpenAI、Claude、Gemini、Ollama)接口风格不统一;缺乏一个统一平台进行模型调用与测试;本地模型 Ollama 的集成与前…...
scikit-learn机器学习
# 同时添加如下代码, 这样每次环境(kernel)启动的时候只要运行下方代码即可: # Also add the following code, # so that every time the environment (kernel) starts, # just run the following code: import sys sys.path.append(/home/aistudio/external-libraries)机…...
C++ 设计模式 《小明的奶茶加料风波》
👨🎓 模式名称:装饰器模式(Decorator Pattern) 👦 小明最近上线了校园奶茶配送功能,业务火爆,大家都在加料: 有的同学要加波霸 🟤,有的要加椰果…...
