当前位置: 首页 > article >正文

原子操作 CAS 与锁实现

原子操作 CAS 与锁实现文章目录原子操作 CAS 与锁实现1. CPU 缓存架构与缓存一致性1.1 为什么需要 CPU 缓存1.2 写回策略与缓存不一致问题1.3 缓存一致性协议MESI 与总线嗅探2. 原子操作不可分割的执行单元2.1 什么是原子操作2.2 为什么需要原子操作2.3 硬件如何支持原子操作3. Compare-And-SwapCAS原理与应用3.1 CAS 定义3.2 C 中的 CAS 接口3.3 CAS 的 ABA 问题及解决4. 内存序从指令重排到可见性4.1 为什么会有内存序问题4.2 内存序解决什么问题4.3 C 内存模型与六种内存序5. 锁的实现从自旋锁到互斥锁5.1 自旋锁Spinlock5.2 互斥锁Mutex5.3 锁的代价与无锁编程5.4 自旋锁和互斤锁的区别6. 案例手撕线程安全的 shared_ptr关键点解析7. 总结在多线程编程中数据竞争和同步问题是开发者必须面对的挑战。为了解决这些问题我们需要深入理解硬件层面的缓存架构、原子操作、内存序以及锁的实现原理。本文将从底层硬件开始逐步剖析原子操作 CASCompare-And-Swap的工作机制并通过实现一个线程安全的shared_ptr来展示原子操作的实际应用。1. CPU 缓存架构与缓存一致性1.1 为什么需要 CPU 缓存CPU 的运算速度远快于内存的访问速度内存访问延迟通常是几十纳秒而 CPU 周期仅零点几纳秒。为了弥合这一差距现代 CPU 引入了多级缓存L1/L2/L3。CPU 优先从缓存中读取数据只有当缓存缺失时才访问内存从而大幅提升性能。1.2 写回策略与缓存不一致问题当 CPU 修改缓存中的数据时并不会立即写回内存而是采用写回Write-back策略仅当缓存行被替换或显式刷新时才写回内存。这种策略提高了性能但也带来了缓存不一致问题——多个 CPU 核心各自持有同一内存地址的副本一个核心的修改可能对其他核心不可见。1.3 缓存一致性协议MESI 与总线嗅探为了解决缓存不一致硬件实现了缓存一致性协议最常见的是MESI 协议。每个缓存行被标记为四种状态之一Modified数据已被修改与内存不一致且仅存在于当前缓存中。Exclusive数据与内存一致且仅存在于当前缓存中。Shared数据与内存一致且可能存在于多个缓存中。Invalid数据无效不可使用。总线嗅探机制Bus Snooping是 MESI 的核心每个核心监听总线上的事务当检测到其他核心读取或写入某个缓存行时根据当前状态进行响应。例如当核心 A 修改了一个处于 Shared 状态的缓存行它会通过总线发出“读并独占”的信号其他核心的对应缓存行被标记为 Invalid从而保证数据一致性。这种机制实现了事务串行化并通过状态机降低了总线带宽的压力。2. 原子操作不可分割的执行单元2.1 什么是原子操作原子操作Atomic Operation是指一个或多个指令的执行过程不可中断要么全部完成要么全部不执行且中间状态对其他线程不可见。常见的原子操作包括读-改-写RMW操作例如、CAS等。2.2 为什么需要原子操作在多线程环境中多个线程同时访问同一变量可能导致数据竞争Data Race。例如两个线程同时对count执行count在汇编层面可能对应多条指令读取、加1、写回线程切换可能破坏操作的完整性导致最终结果错误。原子操作保证了这些指令作为一个整体执行避免了数据竞争。2.3 硬件如何支持原子操作CPU 提供了特定的指令来实现原子性例如 x86 的LOCK前缀可以锁定总线或缓存行确保多处理器环境中指令的原子执行。现代 CPU 还支持如cmpxchgCompare-And-Swap等原子指令。3. Compare-And-SwapCAS原理与应用3.1 CAS 定义CASCompare-And-Swap是一种经典的原子操作它接受三个参数内存地址p、期望值expected、新值desired。操作逻辑如下if(*pexpected){*pdesired;returntrue;}else{returnfalse;}整个过程是原子的不可被其他线程打断。3.2 C 中的 CAS 接口C11 的atomic库提供了compare_exchange_weak和compare_exchange_strong方法std::atomicintvalue(0);intexpected0;intdesired1;boolsuccessvalue.compare_exchange_strong(expected,desired);compare_exchange_strong保证在*p expected时成功更新否则返回false并将expected更新为当前值。compare_exchange_weak可能因虚假失败而返回false某些平台上性能更好通常用于循环中。3.3 CAS 的 ABA 问题及解决ABA 问题是指线程 1 读取变量值为 A随后线程 2 将 A 改为 B 又改回 A此时线程 1 执行 CAS 发现值仍为 A误认为变量未被修改从而导致逻辑错误。常见解决方案使用带版本的原子指针例如std::atomicstd::shared_ptrT或为数据附加一个标记tag每次修改递增标记通过双字 CAS 同时比较值和标记。避免复用地址在无锁数据结构中谨慎设计。4. 内存序从指令重排到可见性4.1 为什么会有内存序问题为了提高性能编译器和 CPU 可能对指令进行重排Reordering只要不改变单线程的语义。但在多线程环境中重排可能导致其他线程看到“奇怪”的执行顺序破坏同步逻辑。此外由于缓存的存在一个线程的修改何时对其他线程可见也是不确定的。4.2 内存序解决什么问题内存序约束了编译器和 CPU 的重排行为并规定了多线程间的可见性。它主要解决两个问题顺序性保证某些操作在另一个操作之前发生happens-before 关系。可见性保证一个线程对共享变量的修改能被其他线程及时看到。4.3 C 内存模型与六种内存序C11 定义了六种内存序std::memory_order从松到严memory_order_relaxed只保证原子性无顺序和可见性保证。用于计数器等不依赖同步的场景。memory_order_consume已弃用不建议使用针对数据依赖的优化。memory_order_acquire用于读操作保证之后的所有读写操作不会被重排到 acquire 之前且能看到之前 release 操作写入的数据。memory_order_release用于写操作保证之前的所有读写操作不会被重排到 release 之后且对 acquire 操作可见。memory_order_acq_rel同时具有 acquire 和 release 语义用于读-改-写操作。memory_order_seq_cst最强约束全局顺序一致所有线程看到相同的操作顺序但性能开销最大。典型的使用模式是Release-Acquire 屏障一个线程用 release 写入另一个线程用 acquire 读取从而建立 happens-before 关系保证数据同步。5. 锁的实现从自旋锁到互斥锁5.1 自旋锁Spinlock自旋锁是最简单的锁它通过忙等待循环检查实现。使用 CAS 可以轻松实现classSpinlock{std::atomicboolflag{false};public:voidlock(){while(flag.exchange(true,std::memory_order_acquire)){// 自旋等待}}voidunlock(){flag.store(false,std::memory_order_release);}};这里使用exchange原子地设置flag并返回旧值若旧值为true表示锁已被占用循环继续。解锁时用store释放锁配合 acquire/release 语义确保同步。5.2 互斥锁Mutex操作系统提供的互斥锁如std::mutex通常比自旋锁更复杂当锁被占用时线程会被挂起阻塞避免浪费 CPU。其底层实现依赖于系统调用如 Linux 的futex和原子操作。一个简化的futex互斥锁可描述为使用原子变量state表示锁状态0 未锁1 加锁2 有等待者。lock()尝试用 CAS 将 0 改为 1若成功则获得锁否则原子地增加等待者计数并调用futex_wait阻塞。unlock()将状态改回 0若有等待者则调用futex_wake唤醒。虽然实现细节复杂但其核心仍然是基于原子操作和 CAS。5.3 锁的代价与无锁编程锁会导致线程阻塞、上下文切换还可能引发死锁、优先级反转等问题。因此在高性能场景下人们倾向于使用无锁数据结构Lock-Free它们直接利用原子操作如 CAS来避免锁。但无锁编程难度更高需要仔细处理 ABA 问题和内存序。5.4 自旋锁和互斤锁的区别1.等待策略自旋锁用户态忙等待互斥锁内核态休眠2.上下文切换自选锁无上下文切换互斥锁有3.场景自旋锁适用于持锁时间短互斥锁适用于持锁时间长6. 案例手撕线程安全的shared_ptrstd::shared_ptr的核心是引用计数它必须保证多线程环境下计数的增减是安全的。通常引用计数用std::atomicsize_t实现并且需要注意内存序的选择。下面我们手写一个简化的Shared_ptr并分析其中原子操作的使用。#pragmaonce#includeatomictemplatetypenameTclassShared_ptr{public:Shared_ptr():ptr_(nullptr),ref_count_(nullptr){}explicitShared_ptr(T*ptr):ptr_(ptr),ref_count_(ptr?newstd::atomicsize_t(1):nullptr){}// 拷贝构造增加引用计数Shared_ptr(constShared_ptrTother):ptr_(other.ptr_),ref_count_(other.ref_count_){if(ref_count_){// 使用 relaxed 即可因为不需要同步其他内存ref_count_-fetch_add(1,std::memory_order_relaxed);}}// 拷贝赋值Shared_ptrToperator(constShared_ptrTother){if(this!other){release();// 释放旧资源ptr_other.ptr_;ref_count_other.ref_count_;if(ref_count_){ref_count_-fetch_add(1,std::memory_order_relaxed);}}return*this;}// 移动构造直接转移所有权Shared_ptr(Shared_ptrTother)noexcept:ptr_(other.ptr_),ref_count_(other.ref_count_){other.ptr_nullptr;other.ref_count_nullptr;}// 移动赋值Shared_ptrToperator(Shared_ptrTother)noexcept{if(this!other){release();ptr_other.ptr_;ref_count_other.ref_count_;other.ptr_nullptr;other.ref_count_nullptr;}return*this;}~Shared_ptr(){release();}Toperator*()const{return*ptr_;}T*operator-()const{returnptr_;}T*get()const{returnptr_;}size_tuse_count()const{returnref_count_?ref_count_-load(std::memory_order_acquire):0;}voidreset(T*ptrnullptr){if(ptr!ptr_){release();ptr_ptr;ref_count_ptr?newstd::atomicsize_t(1):nullptr;}}private:voidrelease(){if(ref_count_){// 减 1并检查是否变为 0if(ref_count_-fetch_sub(1,std::memory_order_acq_rel)1){deleteptr_;deleteref_count_;}}}T*ptr_;std::atomicsize_t*ref_count_;// 指向堆上的原子计数器};关键点解析拷贝构造函数使用memory_order_relaxed增加计数。因为只需要保证计数本身原子递增不涉及其他内存的同步。即使线程 A 在递增后立即释放原指针由于ref_count_是指向共享内存的指针其他线程看到的是同一计数器所以relaxed足够安全。release()函数使用fetch_sub(1, memory_order_acq_rel)。为什么需要acq_rel获取acquire语义保证在fetch_sub之前的所有操作如对ptr_的访问不会被重排到fetch_sub之后确保递减时对象仍然有效。释放release语义保证递减操作本身对其他线程可见并且如果当前线程是最后一个返回 1它将负责删除资源。acq_rel确保了在这之前对ptr_的读写对其他线程如果有是可见的同时后续删除操作不会被提前。如果使用relaxed可能出现一个线程刚刚把计数减到 0但另一个线程还没来得及看到新值就同时尝试减少导致重复释放。所以必须用更强的内存序保证正确性。use_count()使用memory_order_acquire因为读取计数需要看到其他线程对计数的修改即前面 release 写的结果。acquire确保读取到的是最新值。为什么析构函数不需要显式内存序因为release()内部已经处理了内存序。7. 总结原子操作和内存序是多线程编程的基石本文从 CPU 缓存架构出发解释了缓存一致性问题如何催生原子操作然后深入 CAS 的原理和 ABA 问题的解决接着讨论了内存序的必要性和 C 中的内存序选项最后通过自旋锁和shared_ptr的实现展示了原子操作的实际应用。https://github.com/0voice

相关文章:

原子操作 CAS 与锁实现

原子操作 CAS 与锁实现 文章目录原子操作 CAS 与锁实现1. CPU 缓存架构与缓存一致性1.1 为什么需要 CPU 缓存?1.2 写回策略与缓存不一致问题1.3 缓存一致性协议:MESI 与总线嗅探2. 原子操作:不可分割的执行单元2.1 什么是原子操作&#xff1f…...

商旅MICE平台怎么选?2026高性价比平台推荐|含核心功能测评

2026年中国十大商旅MICE平台综合推荐与深度解析 随着企业数字化转型的加速和全球业务拓展的需求增长,商旅MICE(会议、奖励旅游、会议展览)管理已成为企业战略的重要组成部分。到2026年,中国商旅管理市场预计将突破5000亿规模&…...

本地部署千问大模型

下载千问大模型大家可以从魔搭社区平台,下载各种版本的各种大模型,尽量能在自己的电脑上运行,所以这边下载1.5B的版本下载后的文件夹里的东西不要动即可环境准备在开始之前,先统一环境。本文基于transformersPyTorch,支…...

C# 基于OpenCv的视觉工作流-章34-投影向量

C# 基于OpenCv的视觉工作流-章34-投影向量 本章目标: 一、投影向量;一、 投影向量 投影向量分为行投影、列投影,原理是将各行/行像素值进行汇总统计。 本例中对汇总统计进行求取平均值,截取高出平均值的部分进行数量统计。 OpenCv…...

Using Vulkan -- Queues

应用程序通过 VkQueue 提交工作,通常以 VkCommandBuffer 对象或稀疏绑定的形式提交。 提交到同一个 VkQueue 的命令缓冲区按提交顺序开始执行,但开始后允许独立推进并乱序完成。 提交到不同队列的命令缓冲区彼此之间是无序的,除非使用 VkSe…...

无人机高空工程车辆识别 高清工程车辆识别 高清车辆识别 高清铲车压路机识别 无人机矿场行人识别 深度学习yolo第10558期

工程车辆识别计算机视觉数据集数据集概览 本数据集基于高空视角遥感影像构建,聚焦工程场景目标识别,为目标检测模型提供标准化标注样本,支撑工地监测与工程管理场景应用。项目内容类别数量4类类别名称汽车、人员、工程车1、工程车2图像数量50…...

MySQL的安装和卸载组件

目录安装组件:卸载MySQL的组件手动删除目录检查服务📝前言: 我们前面学习了如何安装MySQL,但如果有一些组件需要再安装或者是卸载,可以通过下面的方法执行这个是:MySQL安装和组件安装🔗 通过搜索…...

告别手动截图!Python+SCPI让示波器自动采集数据

在日常测试工作里,频繁手动操作示波器调节参数、截图、记录数据,不仅效率低下,还容易出现操作失误和数据遗漏。借助Python/Labview/C#SCPI指令实现远程自动化控制,就能让罗德示波器自动完成电压波形采集、界面截图与原始数据保存&…...

【力扣-42. 接雨水】Python笔记

题目回顾题目编号:42 题目名称:接雨水 题目难度:困难 输入示例:height [0,1,0,2,1,0,1,3,2,1] 输出示例:6给定 n 个非负整数表示每个宽度为 1 的柱子的高度图,计算按此排列的柱子,下雨之后能接…...

鸿蒙中 应用的权限:申请授权(三)

本文同步发表于我的微信公众号,微信搜索 程语新视界 即可关注,每个工作日都有文章更新 鸿蒙应用开发中,当应用需要访问用户的隐私信息或使用系统能力时(如获取位置、使用相机、访问日历等),必须向用户申请授…...

私有知识库问答合规失效真相:当Dify RAG遇上《金融消费者权益保护实施办法》,这2类元数据缺失=自动违规

第一章:私有知识库问答合规失效真相:当Dify RAG遇上《金融消费者权益保护实施办法》,这2类元数据缺失自动违规在金融行业部署基于 Dify 的 RAG(检索增强生成)系统时,仅保障答案准确性和响应速度远不足以满足…...

环境变量解密:从基础概念到云原生实践

1. 环境变量基础:从图书馆到代码世界 第一次听说环境变量时,我正坐在大学图书馆里啃着C语言教材。管理员突然广播:"考试周期间,每人限借3本书,借期缩短为15天。"看着同学们手忙脚乱地归还超额书籍&#xff0…...

遗传算法实战:从编码到优化的全流程解析

1. 初识遗传算法:从“适者生存”到代码实现 如果你玩过《文明》这类策略游戏,肯定对“迭代”和“进化”不陌生。你开局只有几个农民,通过不断探索、发展科技、调整策略,最终建立起强大的帝国。遗传算法的核心思想,和这…...

零基础玩转LobeChat:一键部署开源聊天机器人,支持语音和多模态

零基础玩转LobeChat:一键部署开源聊天机器人,支持语音和多模态 想不想拥有一个完全属于自己的智能聊天助手?它界面漂亮,反应迅速,不仅能像ChatGPT一样和你聊天,还能听懂你的语音,看懂你上传的图…...

文墨共鸣模型深度解析:卷积神经网络在文本特征提取中的角色

文墨共鸣模型深度解析:卷积神经网络在文本特征提取中的角色 最近在和一些朋友交流时,发现一个挺有意思的现象。大家一提到像文墨共鸣这类基于Transformer架构的大模型,注意力机制(Self-Attention)总是当之无愧的明星。…...

从勒索病毒到流量分析:一次完整的Solar应急响应实战复盘

1. 勒索病毒入侵的初始迹象 那天早上刚到公司,财务部同事就火急火燎地跑过来:"所有文件都打不开了!"我赶到现场一看,电脑卡得连任务管理器都要等十几秒才能弹出来。仔细检查发现CPU被一个陌生进程占满,所有文…...

智慧校园管理系统平台选型指南:如何评估未来 3-5 年扩展性

✅作者简介:合肥自友科技 📌核心产品:智慧校园平台(包括教工管理、学工管理、教务管理、考务管理、后勤管理、德育管理、资产管理、公寓管理、实习管理、就业管理、离校管理、科研平台、档案管理、学生平台等26个子平台) 。公司所有人员均有多…...

Message Pack 协议深度解析与实战指南

1. Message Pack协议的前世今生 第一次接触Message Pack是在2013年做游戏服务器开发时。当时我们的实时对战游戏遇到了严重的网络带宽瓶颈,JSON序列化后的玩家状态数据太大,导致同步延迟明显。尝试了各种优化方案后,同事推荐了这个来自日本的…...

Colab免费GPU+Unsloth:快速微调大模型,打造专属智能助手

Colab免费GPUUnsloth:快速微调大模型,打造专属智能助手 1. 引言 1.1 为什么选择Colab和Unsloth? 大型语言模型(LLM)如Llama、Mistral等在通用任务上表现出色,但要让它们适应特定领域(如医疗问答、法律咨询等),就需要…...

低代码≠低安全,Dify集成必须做的4项合规检查,错过将面临等保2.0一票否决!

第一章:低代码≠低安全:Dify集成中的认知误区与合规警醒在企业级AI应用快速落地的背景下,Dify作为主流低代码LLM应用开发平台,常被误读为“安全责任弱化”的代名词。事实上,低代码仅降低开发门槛,绝不稀释安…...

企业安全必看:如何检测和修复深信服NGAF防火墙文件读取漏洞

企业级防火墙安全实战:NGAF文件读取漏洞深度防御指南 在数字化转型浪潮中,防火墙作为企业网络安全的第一道防线,其安全性直接关系到核心业务系统的稳定运行。近期曝光的某主流防火墙文件读取漏洞,再次为企业安全团队敲响警钟——即…...

Granite-4.0-H-350M部署实战:Windows 11系统环境配置

Granite-4.0-H-350M部署实战:Windows 11系统环境配置 1. 为什么选择Granite-4.0-H-350M在Windows上运行 最近试用Granite-4.0-H-350M时,最直观的感受是它在普通Windows笔记本上跑得特别顺。不像一些大模型需要高端显卡和大量内存,这个350M参…...

解决OpenWRT在M93p上的Intel I217-LM网卡硬件挂起问题:驱动更新与offload关闭实战

1. 问题现象与初步诊断 最近在Lenovo M93p上部署OpenWRT时,遇到了一个让人头疼的问题——系统日志中频繁出现"Detected Hardware Unit Hang"的错误提示。这台设备使用的是Intel I217-LM网卡,在负载较高时会出现网络连接中断的情况。通过ethtoo…...

C++ 核心概念全景解析+实战思维导图

1. C知识体系全景图 第一次接触C时,我被它庞大的知识体系震撼到了。记得当时看着厚厚的《C Primer》,感觉像面对一座高不可攀的山峰。但后来我发现,只要掌握了核心脉络,C其实并没有想象中那么可怕。 C的知识体系可以形象地比作一座…...

【图文讲解】Excel如何筛选重复项?四种简单有效的筛选重复项方法

一、问题背景在用Excel整理数据时,碰到重复数据内容不仅让表格看着乱糟糟的,还容易搞乱数据统计、核算的结果,像学生成绩表里重复的分数、员工信息表里重复的姓名,都得筛选出来处理。其实筛选重复项一点都不难,掌握几个…...

Clawdbot汉化版快速部署:Docker Compose一键启停+多实例隔离(微信/WhatsApp分环境)

Clawdbot汉化版快速部署:Docker Compose一键启停多实例隔离(微信/WhatsApp分环境) 1. 项目概述 Clawdbot汉化版是一个可以在微信、WhatsApp、Telegram等社交平台中使用的智能对话助手。它让你能够在熟悉的聊天软件中直接与AI对话&#xff0…...

华为路由器实战:OSPF NSSA区域配置避坑指南(附完整拓扑实验)

华为路由器实战:OSPF NSSA区域配置避坑指南(附完整拓扑实验) 在大型企业或服务提供商网络的设计与运维中,OSPF作为核心的IGP协议,其区域化设计是控制路由信息泛洪、优化设备性能的关键。对于许多从理论走向实践的工程师…...

RK3588路由器实战:如何用netplan+hostapd搭建稳定无线AP(避坑指南)

RK3588路由器实战:从零构建高性能无线AP的完整指南 在智能家居和物联网设备爆发的时代,拥有一台可完全自定义的路由器变得越来越重要。RK3588作为一款高性能ARM处理器,凭借其出色的网络处理能力和低功耗特性,成为DIY路由器的理想选…...

RustFS性能调优实战:5个生产环境必改参数让你的存储集群起飞

RustFS性能调优实战:5个生产环境必改参数让你的存储集群起飞 当你的存储集群在业务高峰期出现响应延迟飙升、吞吐量骤降时,作为运维负责人的你是否经历过这样的噩梦?去年双十一大促前,某电商平台就遭遇了这样的危机——他们的Rust…...

从零到一:在云服务器上构建你的专属Audiobookshelf有声图书馆

1. 为什么你需要一个专属的有声图书馆? 不知道你有没有这样的困扰:手机里存了几十部有声书和播客,每次想听的时候都要翻半天;不同平台的会员换来换去,收藏列表散落在五六个APP里;最头疼的是有些小众资源&am…...