如何减少锁竞争并细化锁粒度以提高 Rust 多线程程序的性能?
在并发编程中,锁(Lock)是一种常用的同步机制,用于保护共享数据免受多个线程同时访问造成的竞态条件(Race Condition)。然而,不合理的锁使用会导致严重的性能瓶颈,特别是在高并发场景下。本文将探讨如何通过减少锁竞争和细化锁粒度来提升 Rust 多线程程序的性能。
一、什么是锁竞争?
锁竞争(Lock Contention)指的是多个线程尝试同时获取同一个锁时发生的冲突。当一个线程持有锁时,其他线程必须等待该锁释放,这会导致线程阻塞或自旋,从而降低程序吞吐量和响应速度。
示例:粗粒度锁导致的性能问题
use std::sync::{Arc, Mutex};
use std::thread;fn main() {let data = Arc::new(Mutex::new(vec![0; 10000]));let mut handles = vec![];for _ in 0..4 {let data = Arc::clone(&data);let handle = thread::spawn(move || {for i in 0..10000 {let mut d = data.lock().unwrap();d[i % 10000] += 1;}});handles.push(handle);}for handle in handles {handle.join().unwrap();}println!("{:?}", data.lock().unwrap());
}
在这个例子中,我们使用了一个全局的 Mutex
来保护整个数组。虽然保证了安全性,但由于所有线程都争抢同一把锁,造成了严重的锁竞争,性能会显著下降。
二、锁粒度的概念与优化思路
锁粒度(Lock Granularity)是指每次加锁所保护的数据范围大小。锁粒度越细,意味着每个锁保护的数据越少,从而减少不同线程之间的冲突,提高并发效率。
粗粒度 vs 细粒度锁对比:
类型 | 描述 | 优点 | 缺点 |
---|---|---|---|
粗粒度锁 | 一把锁保护大量共享资源 | 实现简单 | 高竞争,低并发性 |
细粒度锁 | 每个子资源都有独立锁 | 减少竞争,提高并发 | 实现复杂,内存开销大 |
三、Rust 中的锁类型与选择建议
在 Rust 中,常见的锁包括:
std::sync::Mutex<T>
:标准库提供的互斥锁。parking_lot::Mutex<T>
:第三方库parking_lot
提供的更高效的互斥锁,适用于大多数高性能场景。RwLock<T>
:读写锁,允许多个读操作同时进行。
推荐优先使用
parking_lot::Mutex
,其性能通常优于标准库的Mutex
,并且支持递归锁等高级特性。
四、如何细化锁粒度?
方法一:对数据结构分片(Sharding)
对于大型共享数据结构(如哈希表、数组),可以将其拆分成多个部分,每个部分由独立的锁保护。
示例:将数组分片为多个 Mutex
use std::sync::{Arc, Mutex};
use std::thread;fn main() {const NUM_SHARDS: usize = 16;let data: Vec<_> = (0..NUM_SHARDS).map(|_| Arc::new(Mutex::new(0))).collect();let mut handles = vec![];for _ in 0..4 {let data = data.clone();let handle = thread::spawn(move || {for _ in 0..10000 {let index = rand::random::<usize>() % NUM_SHARDS;let mut val = data[index].lock().unwrap();*val += 1;}});handles.push(handle);}for handle in handles {handle.join().unwrap();}for (i, shard) in data.iter().enumerate() {println!("Shard {}: {}", i, *shard.lock().unwrap());}
}
在这个例子中,我们将共享计数器分成了 16 个片段,每个片段都有自己的锁。这样大大减少了锁竞争的概率。
方法二:使用读写锁(RwLock)
如果你的数据结构有“读多写少”的特点,可以考虑使用 RwLock
,它允许多个读线程同时访问,但只允许一个写线程独占。
示例:使用 RwLock 提高读取并发
use std::sync::{Arc, RwLock};
use std::thread;fn main() {let data = Arc::new(RwLock::new(vec![0; 1000]));for _ in 0..4 {let data = Arc::clone(&data);thread::spawn(move || {for _ in 0..100 {let read = data.read().unwrap();// 只读操作assert!(read.len() == 1000);}});}// 写操作较少let mut write = data.write().unwrap();write[0] = 1;
}
方法三:避免不必要的锁 —— 使用无锁数据结构或原子变量
在某些情况下,我们可以完全避免使用锁,改用无锁(Lock-Free)算法或原子操作(Atomic Types)。
例如,使用 AtomicUsize
替代简单的计数器:
use std::sync::Arc;
use std::sync::atomic::{AtomicUsize, Ordering};
use std::thread;fn main() {let counter = Arc::new(AtomicUsize::new(0));let mut handles = vec![];for _ in 0..4 {let counter = Arc::clone(&counter);let handle = thread::spawn(move || {for _ in 0..10000 {counter.fetch_add(1, Ordering::Relaxed);}});handles.push(handle);}for handle in handles {handle.join().unwrap();}println!("Counter value: {}", counter.load(Ordering::Relaxed));
}
这种方法不仅避免了锁竞争,还提高了执行效率。
五、进阶技巧:使用 Rayon 并行迭代器简化并发逻辑
如果你的程序是 CPU 密集型任务,且不需要频繁访问共享状态,可以考虑使用 Rayon,这是一个 Rust 的并行迭代器库,能够自动将迭代操作并行化,而无需手动管理锁。
示例:使用 Rayon 进行并行求和
use rayon::prelude::*;fn main() {let v: Vec<i32> = (0..100000).collect();let sum: i32 = v.par_iter().sum();println!("Sum: {}", sum);
}
Rayon 内部使用工作窃取(Work Stealing)调度算法,能高效地利用多核 CPU 资源。
六、总结
优化多线程程序的关键在于:
- 减少锁竞争:尽量避免多个线程频繁争抢同一把锁。
- 细化锁粒度:将共享资源划分为多个小块,各自加锁。
- 合理选择锁类型:根据读写模式选择合适的锁(Mutex / RwLock)。
- 尽可能避免锁:使用原子变量、无锁结构或并行库(如 Rayon)。
在 Rust 中,得益于其强大的类型系统和所有权模型,我们可以安全地编写高性能的并发代码。希望这篇文章能帮助你在开发多线程程序时做出更好的设计决策!
参考资料
- Rust 标准库文档 - Mutex
- parking_lot 文档
- Rust 并发指南
- Rayon 官方文档
相关文章:
如何减少锁竞争并细化锁粒度以提高 Rust 多线程程序的性能?
在并发编程中,锁(Lock)是一种常用的同步机制,用于保护共享数据免受多个线程同时访问造成的竞态条件(Race Condition)。然而,不合理的锁使用会导致严重的性能瓶颈,特别是在高并发场景…...
Logback官方文档翻译章节目录
Logback官方文档翻译章节目录 第一章 Logback简介 第二章 Logback的架构(一) Logback的架构(二) Logback的架构(三) 持续更新中…...

AtCoder Beginner Contest 404 A-E 题解
还是ABC好打~比ARC好打多了( 题解部分 A - Not Found 给定你一个长度最大25的字符串,任意输出一个未出现过的小写字母 签到题,map或者数组下标查询一下就好 #include<bits/stdc.h>using namespace std;#define int long long #def…...

【mysql】常用命令
一 系统mysql用户密码查询 1、在工程目录如/usr/local/httpd/下的*.php中查找类似有db.inf的文件 以php为例。 2、在代码文件中确认有数据库连接的的功能实现 例如: $dbconf parse_ini_file(/usr/local/httpd/conf/db.inf); $link mysql_connect($dbconf[d…...

macOS Arduino IDE离线安装ESP8266支持包
其实吧,本来用platformio也是可以的,不过有时候用Arduino IDE可能更快一些,因为以前一直是Arduino.app和Arduino IDE.app共存了一段时间,后来下决心删掉Arduino.app并升级到最新的Arduino IDE.app。删除了旧的支持板级支持包之后就…...

网络靶场基础知识
一、网络靶场的核心概念 网络靶场(Cyber Range)是一种基于虚拟化和仿真技术的网络安全训练与测试平台,通过模拟真实网络环境和业务场景,为攻防演练、漏洞验证、安全测试和人才培养提供安全可控的实验空间。其核心目标是通过“虚实…...
基于Partial Cross Entropy的弱监督语义分割实战指南
一、问题背景:弱监督学习的挑战 在计算机视觉领域,语义分割任务面临最大的挑战之一是**标注成本**。以Cityscapes数据集为例,单张图像的像素级标注需要约90分钟人工操作。这催生了弱监督学习(Weakly Supervised Learning)的研究方向,其中partial cross entropy loss(部…...
【算法基础】选择排序算法 - JAVA
一、算法基础 1.1 什么是选择排序 选择排序是一种简单直观的排序算法,它的工作原理是:首先在未排序序列中找到最小(或最大)元素,存放到排序序列的起始位置,然后再从剩余未排序元素中继续寻找最小…...
电商平台的流量秘密:代理IP在用户行为分析中的角色
在电商江湖中,流量是氧气,用户行为数据是DNA。当你在电商平台点击商品、加入购物车时,背后有一套精密的系统正在分析你的每个动作。而在这套系统的运作中,代理IP正扮演着"隐形推手"的角色——它既是数据采集的"隐身…...
批量清洗与修改 YOLO 标签:删除与替换指定类别
在使用 YOLO 格式的数据进行训练或部署前,常常需要对标签文件进行清洗或修改。本文整理了两种常见场景的 Python 脚本:删除指定类别 和 修改某类为其他类,并支持自动打印检测到该类别的文件名,帮助你快速定位问题数据。 …...

Python项目源码57:数据格式转换工具1.0(csv+json+excel+sqlite3)
1.智能路径处理:自动识别并修正文件扩展名,根据转换类型自动建议目标路径,实时路径格式验证,自动补全缺失的文件扩展名。 2.增强型预览功能:使用pandastable库实现表格预览,第三方模块自己安装一下&#x…...
TypeScript 中,属性修饰符
在 TypeScript 中,属性修饰符(Property Modifiers)是用于修饰类的属性或方法的关键字,它们可以改变属性或方法的行为和访问权限。TypeScript 提供了三种主要的属性修饰符:public、private 和 protected。此外ÿ…...

雷赛伺服电机
ACM0经济 编码器17位: ACM1基本 编码器23位磁编, ACM2通用 编码器24位光电, 插头定义:...
基础编程题目集 6-8 简单阶乘计算
本题要求实现一个计算非负整数阶乘的简单函数。 函数接口定义: int Factorial( const int N ); 其中N是用户传入的参数,其值不超过12。如果N是非负整数,则该函数必须返回N的阶乘,否则返回0。 裁判测试程序样例: #in…...

【deepseek教学应用】001:deepseek如何撰写教案并自动实现word排版
本文讲述利用deepseek如何撰写教案并自动实现word高效完美排版。 文章目录 一、访问deepseek官网二、输入教案关键词三、格式转换四、word进一步排版 一、访问deepseek官网 官网:https://www.deepseek.com/ 进入主页后,点击【开始对话】,如…...

CH32V208GBU6沁恒绑定配对获取静态地址
从事嵌入式单片机的工作算是符合我个人兴趣爱好的,当面对一个新的芯片我即想把芯片尽快搞懂完成项目赚钱,也想着能够把自己遇到的坑和注意事项记录下来,即方便自己后面查阅也可以分享给大家,这是一种冲动,但是这个或许并不是原厂希望的,尽管这样有可能会牺牲一些时间也有哪天原…...
【C/C++】RPC与线程间通信:高效设计的关键选择
文章目录 RPC与线程间通信:高效设计的关键选择1 RPC 的核心用途2 线程间通信的常规方法3 RPC 用于线程间通信的潜在意义4 主要缺点与限制4.1 缺点列表4.2 展开 5 替代方案6 结论 RPC与线程间通信:高效设计的关键选择 在C或分布式系统设计中,…...
跨线程和跨进程通信还有多种方式对比
📊 常见通信机制对比 通信方式跨线程支持跨进程支持同步/异步性能编程复杂度特点与适用场景SendMessage✅✅(同桌面)同步较高(阻塞)低简单窗口通信、控制PostMessage✅✅(同桌面)异步高低通知、事件触发COM/DCOM✅✅同步/异步中中高系统级服务、进程间服务封装Socket✅…...

RT Thread Studio创建软件和硬件RTC工程
MCU型号:STM32F103RET6 一.配置软件模拟RTC 1.生成一个带串口输出的工程文件,新建RT-Thread项目工程文件。 2.查看电路图中的串口输出管脚,根据STMCubeMx软件可知此串口为USART1,选择芯片型号为STM32F103RET6,控制台…...
Oracle EBS AP发票被预付款核算创建会计科目时间超长
背景 由于客户职能部门的水电、通信和物业等等费用统一管理或对接部门报销费,在报销费的时候,用户把所有费用分摊到各个末级部门,形成AP发票行有上千行, 问题症状 1、用户过账时,请求创建会计科目一直执行20多个小时未完成,只能手工强行取消请求。 2、取消请求以后,从后…...
驱动开发硬核特训 · Day 30(下篇): 深入解析 lm48100q I2C 音频编解码器驱动模型(基于 i.MX8MP)
作者:嵌入式Jerry 视频教程请关注 B 站:“嵌入式Jerry” 一、背景与目标 在本篇中,我们围绕 TI 的 lm48100q 音频编解码器 展开,深入讲解其作为 I2C 外设如何集成至 Linux 内核音频子系统(ASoC)࿰…...
运维--计划任务
计划任务分为一次性和循环性的计划任务 1.date的用法 date 月日时分年 eg:date 100118222023 date:查看时间和日期、修改时间和日期 获取当前日期:date +%F F:日期 获取当前时间:date +%H:%M:%S H:时 M:分 S:秒 获取周几: date +%w w:周 …...

苍穹外卖心得体会
1 登录认证 技术点:JWT令牌技术(JSON Web Token) JWT(JSON Web Token)是一种令牌技术,主要由三部分组成:Header头部、Payload载荷和Signature签名。Header头部存储令牌的类型(如JW…...
Python爬虫实战:获取jd商城最新5060ti 16g显卡销量排行榜商品数据并做分析,为显卡选购做参考
一、引言 1.1 研究目的 本研究旨在利用 Python 爬虫技术,从京东商城获取 “5060ti 16g” 型号显卡的商品数据,并对这些数据进行深入分析。具体目标包括: 实现京东商城的模拟登录,突破登录验证机制,获取登录后的访问权限。高效稳定地爬取按销量排名前 20 的 “5060ti 16g…...
Fedora升级Google Chrome出现GPG check FAILED问题解决办法
https://dl.google.com/linux/linux_signing_key.pub 的 GPG 公钥(0x7FAC5991)已安装 https://dl.google.com/linux/linux_signing_key.pub 的 GPG 公钥(0xD38B4796)已安装 仓库 "google-chrome" 的 GPG 公钥已安装,但是不适用于此软件包。 请检查此仓库的…...
信息系统监理师第二版教材模拟题第三组(含解析)
信息系统监理师模拟题第三组(30题) 监理基础理论 信息系统工程监理的性质是( ) A. 服务性、独立性、公正性、科学性 B. 强制性、营利性、行政性、技术性 C. 临时性、从属性、随意性、主观性 D. 单一性、封闭性、被动性、保守性答案:A 解析:监理具有服务性、独立性、公正…...

Zcanpro搭配USBCANFD-200U在新能源汽车研发测试中的应用指南(周立功/致远电子)
——国产工具链的崛起与智能汽车测试新范式 引言:新能源汽车测试的国产化突围 随着新能源汽车智能化、网联化程度的提升,研发测试面临三大核心挑战:多协议融合(CAN FD/LIN/以太网)、高实时性数据交互需求、复杂工况下…...

青少年抑郁症患者亚群结构和功能连接耦合的重构
目录 1 研究背景及目的 2 研究方法 2.1 数据来源与参与者 2.1.1 MDD患者: 2.1.2 健康对照组: 2.2 神经影像分析流程 2.2.1 图像采集与预处理: 2.2.2 网络构建: 2.2.3 区域结构-功能耦合(SC-FC耦合)…...

SQL手工注入(DVWA)
手工SQL注入攻击的标准思路 Low等级 (1)判断是否存在注入 (2)猜解字段个数 (3)确定字段顺序 (4)获取当前数据库 (5)获取当前数据库中的表 (…...

【大模型系列篇】Qwen3开源全新一代大语言模型来了,深入思考,更快行动
Qwen3开源模型全览 Qwen3是全球最强开源模型(MoEDense) Qwen3 采用混合专家(MoE)架构,总参数量 235B,激活仅需 22B。 Qwen3 预训练数据量达 36T,并在后训练阶段多轮强化学习,将非思…...