当前位置: 首页 > article >正文

如何减少锁竞争并细化锁粒度以提高 Rust 多线程程序的性能?

在并发编程中,锁(Lock)是一种常用的同步机制,用于保护共享数据免受多个线程同时访问造成的竞态条件(Race Condition)。然而,不合理的锁使用会导致严重的性能瓶颈,特别是在高并发场景下。本文将探讨如何通过减少锁竞争细化锁粒度来提升 Rust 多线程程序的性能。


一、什么是锁竞争?

锁竞争(Lock Contention)指的是多个线程尝试同时获取同一个锁时发生的冲突。当一个线程持有锁时,其他线程必须等待该锁释放,这会导致线程阻塞或自旋,从而降低程序吞吐量和响应速度。

示例:粗粒度锁导致的性能问题

use std::sync::{Arc, Mutex};
use std::thread;fn main() {let data = Arc::new(Mutex::new(vec![0; 10000]));let mut handles = vec![];for _ in 0..4 {let data = Arc::clone(&data);let handle = thread::spawn(move || {for i in 0..10000 {let mut d = data.lock().unwrap();d[i % 10000] += 1;}});handles.push(handle);}for handle in handles {handle.join().unwrap();}println!("{:?}", data.lock().unwrap());
}

在这个例子中,我们使用了一个全局的 Mutex 来保护整个数组。虽然保证了安全性,但由于所有线程都争抢同一把锁,造成了严重的锁竞争,性能会显著下降。


二、锁粒度的概念与优化思路

锁粒度(Lock Granularity)是指每次加锁所保护的数据范围大小。锁粒度越细,意味着每个锁保护的数据越少,从而减少不同线程之间的冲突,提高并发效率。

粗粒度 vs 细粒度锁对比:

类型描述优点缺点
粗粒度锁一把锁保护大量共享资源实现简单高竞争,低并发性
细粒度锁每个子资源都有独立锁减少竞争,提高并发实现复杂,内存开销大

三、Rust 中的锁类型与选择建议

在 Rust 中,常见的锁包括:

  • std::sync::Mutex<T>:标准库提供的互斥锁。
  • parking_lot::Mutex<T>:第三方库 parking_lot 提供的更高效的互斥锁,适用于大多数高性能场景。
  • RwLock<T>:读写锁,允许多个读操作同时进行。

推荐优先使用 parking_lot::Mutex,其性能通常优于标准库的 Mutex,并且支持递归锁等高级特性。


四、如何细化锁粒度?

方法一:对数据结构分片(Sharding)

对于大型共享数据结构(如哈希表、数组),可以将其拆分成多个部分,每个部分由独立的锁保护。

示例:将数组分片为多个 Mutex
use std::sync::{Arc, Mutex};
use std::thread;fn main() {const NUM_SHARDS: usize = 16;let data: Vec<_> = (0..NUM_SHARDS).map(|_| Arc::new(Mutex::new(0))).collect();let mut handles = vec![];for _ in 0..4 {let data = data.clone();let handle = thread::spawn(move || {for _ in 0..10000 {let index = rand::random::<usize>() % NUM_SHARDS;let mut val = data[index].lock().unwrap();*val += 1;}});handles.push(handle);}for handle in handles {handle.join().unwrap();}for (i, shard) in data.iter().enumerate() {println!("Shard {}: {}", i, *shard.lock().unwrap());}
}

在这个例子中,我们将共享计数器分成了 16 个片段,每个片段都有自己的锁。这样大大减少了锁竞争的概率。


方法二:使用读写锁(RwLock)

如果你的数据结构有“读多写少”的特点,可以考虑使用 RwLock,它允许多个读线程同时访问,但只允许一个写线程独占。

示例:使用 RwLock 提高读取并发
use std::sync::{Arc, RwLock};
use std::thread;fn main() {let data = Arc::new(RwLock::new(vec![0; 1000]));for _ in 0..4 {let data = Arc::clone(&data);thread::spawn(move || {for _ in 0..100 {let read = data.read().unwrap();// 只读操作assert!(read.len() == 1000);}});}// 写操作较少let mut write = data.write().unwrap();write[0] = 1;
}

方法三:避免不必要的锁 —— 使用无锁数据结构或原子变量

在某些情况下,我们可以完全避免使用锁,改用无锁(Lock-Free)算法或原子操作(Atomic Types)。

例如,使用 AtomicUsize 替代简单的计数器:

use std::sync::Arc;
use std::sync::atomic::{AtomicUsize, Ordering};
use std::thread;fn main() {let counter = Arc::new(AtomicUsize::new(0));let mut handles = vec![];for _ in 0..4 {let counter = Arc::clone(&counter);let handle = thread::spawn(move || {for _ in 0..10000 {counter.fetch_add(1, Ordering::Relaxed);}});handles.push(handle);}for handle in handles {handle.join().unwrap();}println!("Counter value: {}", counter.load(Ordering::Relaxed));
}

这种方法不仅避免了锁竞争,还提高了执行效率。


五、进阶技巧:使用 Rayon 并行迭代器简化并发逻辑

如果你的程序是 CPU 密集型任务,且不需要频繁访问共享状态,可以考虑使用 Rayon,这是一个 Rust 的并行迭代器库,能够自动将迭代操作并行化,而无需手动管理锁。

示例:使用 Rayon 进行并行求和
use rayon::prelude::*;fn main() {let v: Vec<i32> = (0..100000).collect();let sum: i32 = v.par_iter().sum();println!("Sum: {}", sum);
}

Rayon 内部使用工作窃取(Work Stealing)调度算法,能高效地利用多核 CPU 资源。


六、总结

优化多线程程序的关键在于:

  • 减少锁竞争:尽量避免多个线程频繁争抢同一把锁。
  • 细化锁粒度:将共享资源划分为多个小块,各自加锁。
  • 合理选择锁类型:根据读写模式选择合适的锁(Mutex / RwLock)。
  • 尽可能避免锁:使用原子变量、无锁结构或并行库(如 Rayon)。

在 Rust 中,得益于其强大的类型系统和所有权模型,我们可以安全地编写高性能的并发代码。希望这篇文章能帮助你在开发多线程程序时做出更好的设计决策!


参考资料

  • Rust 标准库文档 - Mutex
  • parking_lot 文档
  • Rust 并发指南
  • Rayon 官方文档

相关文章:

如何减少锁竞争并细化锁粒度以提高 Rust 多线程程序的性能?

在并发编程中&#xff0c;锁&#xff08;Lock&#xff09;是一种常用的同步机制&#xff0c;用于保护共享数据免受多个线程同时访问造成的竞态条件&#xff08;Race Condition&#xff09;。然而&#xff0c;不合理的锁使用会导致严重的性能瓶颈&#xff0c;特别是在高并发场景…...

Logback官方文档翻译章节目录

Logback官方文档翻译章节目录 第一章 Logback简介 第二章 Logback的架构&#xff08;一&#xff09; Logback的架构&#xff08;二&#xff09; Logback的架构&#xff08;三&#xff09; 持续更新中…...

AtCoder Beginner Contest 404 A-E 题解

还是ABC好打~比ARC好打多了&#xff08; 题解部分 A - Not Found 给定你一个长度最大25的字符串&#xff0c;任意输出一个未出现过的小写字母 签到题&#xff0c;map或者数组下标查询一下就好 #include<bits/stdc.h>using namespace std;#define int long long #def…...

【mysql】常用命令

一 系统mysql用户密码查询 1、在工程目录如/usr/local/httpd/下的*.php中查找类似有db.inf的文件 以php为例。 2、在代码文件中确认有数据库连接的的功能实现 例如&#xff1a; $dbconf parse_ini_file(/usr/local/httpd/conf/db.inf); $link mysql_connect($dbconf[d…...

macOS Arduino IDE离线安装ESP8266支持包

其实吧&#xff0c;本来用platformio也是可以的&#xff0c;不过有时候用Arduino IDE可能更快一些&#xff0c;因为以前一直是Arduino.app和Arduino IDE.app共存了一段时间&#xff0c;后来下决心删掉Arduino.app并升级到最新的Arduino IDE.app。删除了旧的支持板级支持包之后就…...

网络靶场基础知识

一、网络靶场的核心概念 网络靶场&#xff08;Cyber Range&#xff09;是一种基于虚拟化和仿真技术的网络安全训练与测试平台&#xff0c;通过模拟真实网络环境和业务场景&#xff0c;为攻防演练、漏洞验证、安全测试和人才培养提供安全可控的实验空间。其核心目标是通过“虚实…...

基于Partial Cross Entropy的弱监督语义分割实战指南

一、问题背景:弱监督学习的挑战 在计算机视觉领域,语义分割任务面临最大的挑战之一是**标注成本**。以Cityscapes数据集为例,单张图像的像素级标注需要约90分钟人工操作。这催生了弱监督学习(Weakly Supervised Learning)的研究方向,其中partial cross entropy loss(部…...

【算法基础】选择排序算法 - JAVA

一、算法基础 1.1 什么是选择排序 选择排序是一种简单直观的排序算法&#xff0c;它的工作原理是&#xff1a;首先在未排序序列中找到最小&#xff08;或最大&#xff09;元素&#xff0c;存放到排序序列的起始位置&#xff0c;然后再从剩余未排序元素中继续寻找最小&#xf…...

电商平台的流量秘密:代理IP在用户行为分析中的角色

在电商江湖中&#xff0c;流量是氧气&#xff0c;用户行为数据是DNA。当你在电商平台点击商品、加入购物车时&#xff0c;背后有一套精密的系统正在分析你的每个动作。而在这套系统的运作中&#xff0c;代理IP正扮演着"隐形推手"的角色——它既是数据采集的"隐身…...

批量清洗与修改 YOLO 标签:删除与替换指定类别

在使用 YOLO 格式的数据进行训练或部署前&#xff0c;常常需要对标签文件进行清洗或修改。本文整理了两种常见场景的 Python 脚本&#xff1a;删除指定类别 和 修改某类为其他类&#xff0c;并支持自动打印检测到该类别的文件名&#xff0c;帮助你快速定位问题数据。 &#x1f…...

Python项目源码57:数据格式转换工具1.0(csv+json+excel+sqlite3)

1.智能路径处理&#xff1a;自动识别并修正文件扩展名&#xff0c;根据转换类型自动建议目标路径&#xff0c;实时路径格式验证&#xff0c;自动补全缺失的文件扩展名。 2.增强型预览功能&#xff1a;使用pandastable库实现表格预览&#xff0c;第三方模块自己安装一下&#x…...

TypeScript 中,属性修饰符

在 TypeScript 中&#xff0c;属性修饰符&#xff08;Property Modifiers&#xff09;是用于修饰类的属性或方法的关键字&#xff0c;它们可以改变属性或方法的行为和访问权限。TypeScript 提供了三种主要的属性修饰符&#xff1a;public、private 和 protected。此外&#xff…...

雷赛伺服电机

ACM0经济 编码器17位&#xff1a; ACM1基本 编码器23位磁编&#xff0c; ACM2通用 编码器24位光电&#xff0c; 插头定义&#xff1a;...

基础编程题目集 6-8 简单阶乘计算

本题要求实现一个计算非负整数阶乘的简单函数。 函数接口定义&#xff1a; int Factorial( const int N ); 其中N是用户传入的参数&#xff0c;其值不超过12。如果N是非负整数&#xff0c;则该函数必须返回N的阶乘&#xff0c;否则返回0。 裁判测试程序样例&#xff1a; #in…...

【deepseek教学应用】001:deepseek如何撰写教案并自动实现word排版

本文讲述利用deepseek如何撰写教案并自动实现word高效完美排版。 文章目录 一、访问deepseek官网二、输入教案关键词三、格式转换四、word进一步排版 一、访问deepseek官网 官网&#xff1a;https://www.deepseek.com/ 进入主页后&#xff0c;点击【开始对话】&#xff0c;如…...

CH32V208GBU6沁恒绑定配对获取静态地址

从事嵌入式单片机的工作算是符合我个人兴趣爱好的,当面对一个新的芯片我即想把芯片尽快搞懂完成项目赚钱,也想着能够把自己遇到的坑和注意事项记录下来,即方便自己后面查阅也可以分享给大家,这是一种冲动,但是这个或许并不是原厂希望的,尽管这样有可能会牺牲一些时间也有哪天原…...

【C/C++】RPC与线程间通信:高效设计的关键选择

文章目录 RPC与线程间通信&#xff1a;高效设计的关键选择1 RPC 的核心用途2 线程间通信的常规方法3 RPC 用于线程间通信的潜在意义4 主要缺点与限制4.1 缺点列表4.2 展开 5 替代方案6 结论 RPC与线程间通信&#xff1a;高效设计的关键选择 在C或分布式系统设计中&#xff0c;…...

跨线程和跨进程通信还有多种方式对比

📊 常见通信机制对比 通信方式跨线程支持跨进程支持同步/异步性能编程复杂度特点与适用场景SendMessage✅✅(同桌面)同步较高(阻塞)低简单窗口通信、控制PostMessage✅✅(同桌面)异步高低通知、事件触发COM/DCOM✅✅同步/异步中中高系统级服务、进程间服务封装Socket✅…...

RT Thread Studio创建软件和硬件RTC工程

MCU型号&#xff1a;STM32F103RET6 一.配置软件模拟RTC 1.生成一个带串口输出的工程文件&#xff0c;新建RT-Thread项目工程文件。 2.查看电路图中的串口输出管脚&#xff0c;根据STMCubeMx软件可知此串口为USART1&#xff0c;选择芯片型号为STM32F103RET6&#xff0c;控制台…...

Oracle EBS AP发票被预付款核算创建会计科目时间超长

背景 由于客户职能部门的水电、通信和物业等等费用统一管理或对接部门报销费,在报销费的时候,用户把所有费用分摊到各个末级部门,形成AP发票行有上千行, 问题症状 1、用户过账时,请求创建会计科目一直执行20多个小时未完成,只能手工强行取消请求。 2、取消请求以后,从后…...

驱动开发硬核特训 · Day 30(下篇): 深入解析 lm48100q I2C 音频编解码器驱动模型(基于 i.MX8MP)

作者&#xff1a;嵌入式Jerry 视频教程请关注 B 站&#xff1a;“嵌入式Jerry” 一、背景与目标 在本篇中&#xff0c;我们围绕 TI 的 lm48100q 音频编解码器 展开&#xff0c;深入讲解其作为 I2C 外设如何集成至 Linux 内核音频子系统&#xff08;ASoC&#xff09;&#xff0…...

运维--计划任务

计划任务分为一次性和循环性的计划任务 1.date的用法 date 月日时分年 eg:date 100118222023 date:查看时间和日期、修改时间和日期 获取当前日期:date +%F F:日期 获取当前时间:date +%H:%M:%S H:时 M:分 S:秒 获取周几: date +%w w:周 …...

苍穹外卖心得体会

1 登录认证 技术点&#xff1a;JWT令牌技术&#xff08;JSON Web Token&#xff09; JWT&#xff08;JSON Web Token&#xff09;是一种令牌技术&#xff0c;主要由三部分组成&#xff1a;Header头部、Payload载荷和Signature签名。Header头部存储令牌的类型&#xff08;如JW…...

Python爬虫实战:获取jd商城最新5060ti 16g显卡销量排行榜商品数据并做分析,为显卡选购做参考

一、引言 1.1 研究目的 本研究旨在利用 Python 爬虫技术,从京东商城获取 “5060ti 16g” 型号显卡的商品数据,并对这些数据进行深入分析。具体目标包括: 实现京东商城的模拟登录,突破登录验证机制,获取登录后的访问权限。高效稳定地爬取按销量排名前 20 的 “5060ti 16g…...

Fedora升级Google Chrome出现GPG check FAILED问题解决办法

https://dl.google.com/linux/linux_signing_key.pub 的 GPG 公钥(0x7FAC5991)已安装 https://dl.google.com/linux/linux_signing_key.pub 的 GPG 公钥(0xD38B4796)已安装 仓库 "google-chrome" 的 GPG 公钥已安装&#xff0c;但是不适用于此软件包。 请检查此仓库的…...

信息系统监理师第二版教材模拟题第三组(含解析)

信息系统监理师模拟题第三组(30题) 监理基础理论 信息系统工程监理的性质是( ) A. 服务性、独立性、公正性、科学性 B. 强制性、营利性、行政性、技术性 C. 临时性、从属性、随意性、主观性 D. 单一性、封闭性、被动性、保守性答案:A 解析:监理具有服务性、独立性、公正…...

Zcanpro搭配USBCANFD-200U在新能源汽车研发测试中的应用指南(周立功/致远电子)

——国产工具链的崛起与智能汽车测试新范式 引言&#xff1a;新能源汽车测试的国产化突围 随着新能源汽车智能化、网联化程度的提升&#xff0c;研发测试面临三大核心挑战&#xff1a;多协议融合&#xff08;CAN FD/LIN/以太网&#xff09;、高实时性数据交互需求、复杂工况下…...

青少年抑郁症患者亚群结构和功能连接耦合的重构

目录 1 研究背景及目的 2 研究方法 2.1 数据来源与参与者 2.1.1 MDD患者&#xff1a; 2.1.2 健康对照组&#xff1a; 2.2 神经影像分析流程 2.2.1 图像采集与预处理&#xff1a; 2.2.2 网络构建&#xff1a; 2.2.3 区域结构-功能耦合&#xff08;SC-FC耦合&#xff09…...

SQL手工注入(DVWA)

手工SQL注入攻击的标准思路 Low等级 &#xff08;1&#xff09;判断是否存在注入 &#xff08;2&#xff09;猜解字段个数 &#xff08;3&#xff09;确定字段顺序 &#xff08;4&#xff09;获取当前数据库 &#xff08;5&#xff09;获取当前数据库中的表 &#xff08…...

【大模型系列篇】Qwen3开源全新一代大语言模型来了,深入思考,更快行动

Qwen3开源模型全览 Qwen3是全球最强开源模型&#xff08;MoEDense&#xff09; Qwen3 采用混合专家&#xff08;MoE&#xff09;架构&#xff0c;总参数量 235B&#xff0c;激活仅需 22B。 Qwen3 预训练数据量达 36T&#xff0c;并在后训练阶段多轮强化学习&#xff0c;将非思…...