【多线程】七、POSIX信号量 环形队列的生产者消费者模型
文章目录
- Ⅰ. 信号量
- 一、POSIX 信号量的概念
- 二、POSIX 信号量的类型区别
- 三、POSIX 信号量与 SystemV 信号量的区别
- Ⅱ. 线程信号量基本原理
- 一、为什么要引入信号量❓
- 二、PV 操作
- 三、POSIX 信号量的实现原理
- 四、CAS操作介绍
- Ⅲ. POSIX未命名信号量接口
- 一、初始化无名信号量
- 二、销毁无名信号量
- 三、阻塞减少信号量(相当于P操作)
- 四、非阻塞减少信号量(相当于P操作)
- 五、增加信号量(相当于V操作)
- 六、读取当前信号量值
- 测试代码:利用信号量实现互斥锁功能
- Ⅳ. 基于环形队列的生产者消费者模型
- 一、环形队列的应用场景
- 二、基于环形队列的生产者消费者模型的实现
- ① 无保存者版本
- ② 有保存者版本
- Ⅳ. 效率高在哪里呢❓❓❓

Ⅰ. 信号量
一、POSIX 信号量的概念
POSIX
信号量是一种进程间通信机制,它允许进程在共享资源上进行同步和互斥访问。POSIX
信号量是一种计数信号量,它可以被多个进程共享,并且可以通过系统调用进行控制。POSIX
信号量是一种强大的进程间通信机制,它可以帮助程序员实现复杂的同步和互斥操作,确保多个进程之间共享资源的正确性和安全性。
信号量通常用来协调对资源的访问,其中信号计数会初始化为可用资源的数目。然后线程在资源增加时会增加计数,在删除资源时会减小计数,这些操作都以原子方式执行的!如果信号计数变为零,则表明已无可用资源。计数为零时,尝试减小信号的线程会被阻塞,直到计数大于零为止。
POSIX
信号量具有以下特点:
- 可以被多个进程共享,或者被同一进程中的线程共享。
- 可以被用来进行同步和互斥访问共享资源。
- 具有 原子性的计数功能,允许多个进程或者线程同时访问资源。
信号量就好比电影院的票数,而我们去买票的操作就是下面会讲的 P
操作,退票的操作就是 V
操作,这些操作的过程中是原子性的,并且对于电影票数,我们是可以提前得知的,也就意味着我们不需要提前加锁去判断,因为对电影票的操作是原子性的,所以不需要关心线程安全的问题!其实这都利用了一些技术比如 CAS
(Compare-And-Swap
) 等,这些下面会介绍到!
二、POSIX 信号量的类型区别
POSIX
信号量有两种类型:命名信号量和未命名信号量。它们有以下区别:
- 命名方式不同:命名信号量通过一个字符串名字来标识,可以被多个进程共享,而未命名信号量只能被同一进程内的线程共享,不需要名字。
- 创建方式不同:创建命名信号量时需要使用
sem_open()
函数,创建未命名信号量时需要使用sem_init()
函数。 - 销毁方式不同:销毁命名信号量时需要使用
sem_unlink()
函数,销毁未命名信号量时需要使用sem_destroy()
函数。 - 访问权限不同:命名信号量可以通过文件系统的权限机制来控制对其的访问权限,而对于未命名信号量,访问权限只能通过进程间的
UID
和GID
来控制。 - 在系统中的存储位置不同:命名信号量被存储在文件系统中的一个特殊目录中,而未命名信号量被存储在进程的地址空间中。
其中最重要的区别就是 命名信号量通过一个字符串名字来标识,可以被多个进程共享。未命名信号量只能被同一进程内的线程共享。而接下来我们主要学习的是未命名信号量,因为其可以帮助我们实现同一进程内的线程共享,达到多线程编程目的!
三、POSIX 信号量与 SystemV 信号量的区别
POSIX
信号量和 SystemV
信号量作用相同,都是用于同步操作,达到无冲突的访问共享资源目的,但POSIX可以用于线程间同步。除此之外,还有一些其它的区别,下面列举出来:
- 编程接口不同:
POSIX
信号量使用函数sem_open()
、sem_close()
、sem_wait()
、sem_post()
等来实现,而SystemV
信号量使用函数semget()
、semctl()
、semop()
等来实现。 - 信号量命名方式不同:
POSIX
信号量采用类似于文件路径的命名方式,而SystemV
信号量采用整数key
值的命名方式。 - 信号量数量不同:
POSIX
信号量可以创建多个信号量,而SystemV
信号量只有一组信号量。 - 处理进程终止的方式不同:
POSIX
信号量可以通过sem_close()
和sem_unlink()
函数来释放信号量资源,而SystemV
信号量需要使用semctl()
函数来进行释放。 - 信号量操作的方式不同:
POSIX
信号量的操作更加简洁明了,使用sem_wait()
和sem_post()
两个函数即可,而SystemV
信号量需要通过semop()
函数来实现信号量操作。
总之, POSIX
信号量和 SystemV
信号量在使用方式、命名方式、数量、释放方式和操作方式等方面存在一些不同,程序员在选择使用哪一种信号量时需要根据具体的情况来决定。
Ⅱ. 线程信号量基本原理
一、为什么要引入信号量❓
在引入一种新方法之前,肯定是因为我们之前使用的一些方法比如说条件变量与互斥量,存在一些短板,所以我们通过新方法可以解决这些存在的问题!
还记得我们之前学条件变量的时候,为了实现互斥和同步,我们需要这样子使用互斥量和条件变量:
// 伪代码:
pthread_mutex_lock(&mutex);
while(condition_is_false)
{pthread_cond_wait(&cond, &mutex);
}
// 操作临界资源
// 修改条件
pthread_mutex_unlock(&mutex);
上述代码中,我们每次要去操作临界资源的时候,必须先上锁,因为我们不知道条件变量是否满足,如果不提前上锁就去访问条件变量和临界资源的话,就有很大可能导致线程不安全的问题,而我们也无法在条件变量已有的资源情况下去解决这个问题。
所以对于条件变量的使用每次我们就得上锁,但是我们知道,上锁是有消耗的,每次我们要去判断条件是否成立之前,如果这个条件已经不成立了,但是我们还得先上锁才能得知不成立,这不是明显消耗了不必要的资源了吗。
所以我们就要学习信号量,信号量说简单一点也是一个共享资源,但是对它的操作,是原子性的,从而达到了不需要加锁就能实现判断是否需要满足信号量的要求从而对临界资源进行操作!
但我们要明白的是,其实互斥锁本质也是一种信号量,只不过它只有 0
和 1
两种状态,表示是否被锁定,所以我们是可以用信号量来代替互斥锁的!
二、PV 操作
PV
操作也称为 wait()
和 signal()
操作,是操作系统中用于操作信号量的基本操作,它们通常与信号量一起使用来进行进程或者线程间的同步和互斥访问。
PV
操作分为两种:
P
操作(proberen
荷兰语:尝试降低),即wait()
操作:它用于获取(获取或占用)一个资源或者等待某个事件的发生,其作用是 将信号量的值减一,如果 信号量的值为0
,则调用进程或者线程会阻塞,等待资源或事件的发生。V
操作(verhogen
荷兰语:增长),即signal()
操作:它用于释放一个资源或者发出某个事件,其作用是 将信号量的值加一,如果 有其他进程或者线程在等待该信号量,则唤醒其中一个进程,让它可以继续执行。
例如,当多个进程需要访问共享资源时,可以使用 PV
操作 来实现互斥访问,其中 P
操作 用于 占用资源,V
操作 用于 释放资源。又例如,当多个进程需要等待某个事件的发生时,可以使用 PV
操作 来实现等待和唤醒的操作,其中 P
操作 用于等待事件的发生,V
操作 用于发出事件的信号。
需要注意的是,在使用 PV
操作时,需要考虑信号量的初始值,以及多个进程同时访问时可能出现的竞争条件,从而保证操作的正确性和安全性。
三、POSIX 信号量的实现原理
POSIX
信号量的实现通常是通过原子操作来保证多个进程之间对信号量的操作是原子性的。
具体地说,POSIX
信号量的实现使用了一些底层硬件原语或操作系统提供的原子操作,比如 CAS
(Compare-and-Swap
) 等,以确保对信号量的操作是原子性的,从而避免了竞态条件和死锁等问题的出现。
原子操作是一种不可中断的操作,可以在多线程或多进程并发访问共享资源的情况下,保证对共享资源的访问是原子性的。因此,使用原子操作来实现信号量操作,可以有效地避免因多进程并发访问而导致的数据竞争和互斥访问等问题。
需要注意的是,原子操作在一些平台上的实现方式可能会有所不同,程序员在使用时需要根据具体的平台和操作系统来选择适当的原子操作实现。
四、CAS操作介绍
Compare-and-Swap
(CAS
)是一种常见的原子操作,也称为“比较-交换”操作,是一种比较后数据若无改变则交换数据的一种无锁操作(乐观锁)。用于实现多线程或多进程并发访问共享资源的原子性操作。
CAS
操作通常有三个参数:共享变量的内存地址、期望值和新值。CAS
操作首先比较共享变量的值是否等于期望值,如果相等,则将共享变量的值替换为新值;如果不相等,则不执行任何操作。在这个过程中,CAS
操作具有原子性,即其他线程或进程无法同时访问共享变量,从而避免了竞态条件和数据竞争等问题。
CAS
操作常见于并发控制算法中,如锁、信号量、读写锁等,它可以用来保证对共享资源的访问是原子性的,从而实现并发控制的正确性和安全性。
需要注意的是,CAS
操作虽然可以保证对共享变量的原子性操作,但是由于 CAS
操作涉及到对共享变量的读取和修改,因此仍然可能存在ABA问题,即在多线程或多进程并发访问共享变量的情况下,共享变量的值在某个时刻先变成了 A
,然后又变成了 B
,最后再变回了 A
,从而导致一些问题。
为了避免上述的问题,通常需要使用带有版本号等标识的 CAS
操作来解决。即在进行 CAS
操作时,不仅要比较共享变量的值是否等于期望值,还需要比较版本号是否匹配。这样可以确保即使共享变量的值在中间被修改过,但由于版本号不匹配,CAS
操作依然会失败,从而避免了上述问题的出现。
CAS
的伪代码如下:
template bool CAS(T* addr, T expected, T value)
{if(*addr == expected){*addr=value;return true;}return false;
}
int count=0;
void count_atomic_inc(int*addr)
{int oldval = 0;int newval = 0;do{oldval = *addr;newval = oldval + 1;}until CAS(addr, oldval, newval)
}// 简化之后,CAS比较与交换的伪代码可以表示为:
do{备份旧数据;基于旧数据构造新数据;}while(!CAS( 内存地址,备份的旧数据,新数据 ))
Ⅲ. POSIX未命名信号量接口
我们主要是为了完成线程间的通信,所以下面主要介绍的是未命名信号量的接口,至于命名信号量接口,可以自行上网查阅!
一、初始化无名信号量
#include <semaphore.h>
int sem_init(sem_t *sem, int pshared, unsigned int value);// 功能:初始化一个无名信号量
// 返回值:成功返回0,失败返回-1,并设置errno变量表示出错的原因
其中参数:
- sem:指向要初始化的信号量的指针。
- pshared:
0
表示线程间共享,此时为未命名信号量;非0
表示进程间共享,此时为命名信号量。 - value:信号量初始值,最大可以设置为
2147483647
(SEM_VALUE_MAX
)。
对于 sem_t
类型结构体的定义如下:
typedef struct
{struct _pthread_fastlock __sem_lock; // 用于保护信号量的互斥锁,是一个pthread_fastlock类型的对象。int __sem_value; // 表示信号量的当前值,即信号量中的可用资源数。_pthread_descr __sem_waiting; // 表示正在等待信号量的线程或进程的列表,是一个_pthread_descr类型的对象。
} sem_t;
二、销毁无名信号量
#include <semaphore.h>
int sem_destroy(sem_t *sem);// 功能:销毁一个无名信号量
// 返回值:成功返回0,失败返回-1,并设置errno变量表示出错的原因
// 参数:sem是指向要销毁的信号量的指针。
三、阻塞减少信号量(相当于P操作)
#include <semaphore.h>
int sem_wait(sem_t *sem);// 功能:阻塞减少信号量,直到 sem 所指示的信号量计数大于零为止,之后以原子方式减小计数。
// 返回值:成功返回0,失败返回-1,并设置errno变量表示出错的原因。
// 参数:sem是指向要阻塞减少的信号量的指针。
四、非阻塞减少信号量(相当于P操作)
#include <semaphore.h>
int sem_trywait(sem_t *sem);// 功能:在计数大于零时,尝试以原子方式减小sem所指示的信号量计数。
// 返回值:成功返回0,失败返回-1,并设置errno变量表示出错的原因。
// 参数:sem是指向要非阻塞减少的信号量的指针。
五、增加信号量(相当于V操作)
#include <semaphore.h>
int sem_post(sem_t *sem);// 功能:以原子方式增加sem所指示的信号量,或者说给信号量解锁。
// 返回值:成功返回0,失败返回-1,并设置errno变量表示出错的原因。
// 参数:sem是指向要增加的信号量的指针。
六、读取当前信号量值
#include <semaphore.h>
int sem_getvalue(sem_t *sem, int *sval);// 功能:读取当前信号量的值。
// 返回值:成功返回0,并将该信号量当前值存储在sval变量中;失败返回-1。
// 参数:
// sem:指向要增加的信号量的指针。
// sval:输出型参数,存放信号量值
测试代码:利用信号量实现互斥锁功能
#include <iostream>
#include <unistd.h>
#include <pthread.h>
#include <semaphore.h>int global_value = 20;
sem_t mutex; // 使用信号量来实现代替互斥锁void* thread_routine(void* args)
{char* namebuffer = static_cast<char*>(args);while(global_value){sem_wait(&mutex); // 将mutex减一,变成0,相当于加锁,其它线程会阻塞if(global_value > 0)std::cout << namebuffer << " the global_value is " << global_value-- << std::endl;sem_post(&mutex); // 将mutex加一,变成1,相当于解锁,其它线程就能竞争该信号量usleep(10000);}return nullptr;
}int main()
相关文章:

【多线程】七、POSIX信号量 环形队列的生产者消费者模型
文章目录 Ⅰ. 信号量一、POSIX 信号量的概念二、POSIX 信号量的类型区别三、POSIX 信号量与 SystemV 信号量的区别Ⅱ. 线程信号量基本原理一、为什么要引入信号量❓二、PV 操作三、POSIX 信号量的实现原理四、CAS操作介绍Ⅲ. POSIX未命名信号量接口一、初始化无名信号量二、销毁…...

JVM 一文详解
目录 JVM 简介 JVM 中的内存区域划分 1. 堆(一个进程只有一份 ------ 线程共享) 2. 栈(一个进程可以有 N 份 ------ 线程私有) Java 虚拟机栈: 本机方法栈: 3. 程序计数器(一个线程可以…...
OCR身份证识别(正反面)_个人证照OCR识别_开放API接口使用指南
一、接口简介 在数字化时代,快速准确地提取身份证信息变得尤为重要。**万维易源提供的“身份证OCR识别”API接口,能够快速提取二代居民身份证正反面的所有字段信息,包括姓名、性别、民族、出生日期、住址、身份证号、签发机关、有效期限等。…...
《淘宝 API 数据湖构建:实时商品详情入湖 + Apache Kafka 流式处理指南》
随着电商行业的蓬勃发展,淘宝作为头部电商平台,积累了海量的商品数据。构建淘宝 API 数据湖,将实时商品详情数据纳入其中,并借助 Apache Kafka 进行流式处理,能够为企业提供强大的数据支撑,助力精准营销、市…...
基于ArduinoIDE的任意型号单片机 + GPS北斗BDS卫星定位
提示:文章写完后,目录可以自动生成,如何生成可参考右边的帮助文档 文章目录 前言1.1 器件选择1.2 接线方案 二、驱动实现2.1 核心代码解析(arduino/ESP32-S3) 三、坐标解析代码四、典型问题排查总结 前言 北斗卫星导航…...

代码随想录算法训练营第60期第二十二天打卡
大家好!我们今天来到了一个全新的章节,回溯算法,那究竟什么是回溯算法,我们应该如何理解回溯算法,以及回溯算法可以解决的题目,我们今天就来一探究竟。 第一部分 回溯算法理论基础 其实我可以告诉大家的是…...

自主机器人模拟系统
一、系统概述 本代码实现了一个基于Pygame的2D自主机器人模拟系统,具备以下核心功能: 双模式控制:支持手动控制(WASD键)和自动导航模式(鼠标左键设定目标) 智能路径规划:采用改进型…...

基于QT的仿QQ音乐播放器
一、项目介绍 该项目是基于QT开发的⾳乐播放软件,界面友好,功能丰富,主要功能如下: 窗口hand部分: 点击最小化按钮,窗口最小化 点击最大化按钮,窗口最大化 点击关闭按钮,程序退出 …...

腾讯研究院:《工业大模型应用报告》(文末附下载方式)
腾讯研究院发布的《工业大模型应用报告》是一份系统探讨大模型技术在工业领域落地实践的研究成果。该报告基于腾讯在人工智能、云计算及产业互联网的实践经验,结合国内外典型案例,深入分析了工业大模型的行业价值、关键技术、应用场景及未来趋势。报告指…...
C语言-指针(一)
目录 指针 内存 概念 指针变量 取地址操作符(&) 操作符“ * ” 指针变量的大小 注意 指针类型的意义 作用 void * 指针 const修饰指针变量 const放在*前 const放在*后 双重const修饰 指针的运算 1.指针 - 整数 2.指针 - 指针 3.指…...

【DeepMLF】具有可学习标记的多模态语言模型,用于情感分析中的深度融合
这是一篇我完全看不懂的论文,写的好晦涩,适合唬人,所以在方法部分我以大白话为主 abstract 在多模态情感分析(MSA)中,多模态融合已经得到了广泛的研究,但融合深度和多模态容量分配的作用还没有得到充分的研究。在这项工作中,我们将融合深度、可扩展性和专用多模容量作…...

uniapp如何获取安卓原生的Intent对象
通过第三方app唤起,并且获取第三方app唤起时携带的参数 因为应用a唤起应用b时,应用b第一时间就要拿到参数token,所以需要将获取参数的方法写在APP.vue中的onLaunch钩子里,如果其他地方要用可以选择vuex或者采用本地缓存。 uniapp中plus.run…...
implement the “pixel-wise difference“
根据在处理图像数据的来源和格式的不同,在具体实现“两幅图像残差比较”的时候,分为两类方法。 类型一:PyTorch 的 Tensor 图像格式 imgs_pil_o [transforms.ToPILImage()(img_o) for img_o in imgs_o] imgs_pil_w [transforms.ToPILImag…...

tinycudann安装过程加ubuntu18.04gcc版本的升级(成功版!!!!)
使用的是 Linux,安装以下软件包 sudo apt-get install build-essential git安装 CUDA 并将 CUDA 安装添加到您的 PATH。 例如,如果您有 CUDA 12.6.3,请将以下内容添加到您的/usr/local/~/.bashrcexport PATH"/usr/local/cuda-12.6.3/bi…...

Android 实现一个隐私弹窗
效果图如下: 1. 设置同意、退出、点击用户协议、点击隐私协议的函数参数 2. 《用户协议》、《隐私政策》设置成可点击的,且颜色要区分出来 res/layout/dialog_privacy_policy.xml 文件 <?xml version"1.0" encoding"utf-8"?&…...
Oracle无法正常OPEN(三)
在Oracle数据库中,如果几个数据文件丢失,导致数据库无法启动,报错“ORA-01157: cannot identify/lock data file 2 - see DBWR trace file”,如果没有物理备份的情况下,位于丢失数据文件的数据是无法找回的,…...
本地服务验证-仙盟创梦IDE-智能编程,编程自动备份+编程审计
本地服务验证server using System; using System.Net;class Program {static void Main(){HttpListener listener new HttpListener();listener.Prefixes.Add("http://localhost:8080/");listener.Start();Console.WriteLine("服务器已启动,监听中…...

[学成在线]22-自动部署项目
自动部署 实战流程 下边使用jenkins实现CI/CD的流程。 1、将代码使用Git托管 2、在jenkins创建任务,从Git拉取代码。 3、拉取代码后进行自动构建:测试、打包、部署。 首先将代码打成镜像包上传到docker私服。 自动创建容器、启动容器。 4、当有代…...

Golang|使用函数作为参数和使用接口的联系
函数作为数据类型的一种,可以成为其他函数的参数。在 Go(Golang) 中,函数作为参数 和 接口(interface),本质上都和抽象、灵活调用有关 —— 都是让代码更灵活、更可扩展的手段。不过它们各有侧重…...

MATLAB技巧——norm和vecnorm两个函数讲解与辨析
在 MATLAB 中,norm 和 vecnorm 是两个用于计算向量或矩阵范数的函数,虽然它们的功能相似,但在使用场景和适用性上存在一些区别。本文将详细解释这两个函数的用途、功能以及如何选择合适的函数。 文章目录 norm函数用法范数类型vecnorm函数用法范数类型选择合适的函数示例对比…...

ubuntu的libc 库被我 sudo apt-get --reinstall install libc6搞没了
我系统的libc 没了 今天为了运行一个开源的yuv 播放器,在运行的时候提醒 Inconsistency detected by ld.so: dl-call-libc-early-init.c: 37: _dl_call_libc_early_init: Assertion sym ! NULL failed!然后听从AI 的建议 当我去执行ls 时,系统提示 就这…...

Ubuntu搭建Conda+Python开发环境
目录 一、环境说明 1、测试环境为ubuntu24.04.1 2、更新系统环境 3、安装wget工具 4、下载miniconda安装脚本 二、安装步骤 1、安装miniconda 2、source conda 3、验证版本 4、配置pip源 三、conda用法 1、常用指令 一、环境说明 1、测试环境为ubuntu24.04.1 2、更…...
智能工厂规划学习——深入解读数字化工厂规划与建设方案
项目总体思路聚焦于通过智能制造和数字化工厂建设,来优化企业战略并提升信息化水平。首先,企业需学习先进国家已经验证的先进经验,并紧跟其正在变革的方向,以确保自身发展的前瞻性和竞争力。 在企业战略层面,企业正从以产品为中心的业务模式,逐步转变为以服务中心…...
【学习笔记】深入理解Java虚拟机学习笔记——第2章 Java内存区域与内存溢出异常
第2章 Java内存区域与内存溢出异常 2.1 概述 略 2.2 运行时数据区域 2.2.1 程序计数器 线程私有,记录执行的字节码位置 2.2.2 Java 虚拟机栈 线程私有,存储一个一个的栈帧,通过栈帧的出入栈来控制方法执行。 -栈帧:对应一个…...

Python全流程开发实战:基于IMAP协议安全下载个人Gmail邮箱内所有PDF附件
在日常办公场景中,面对成百上千封携带PDF附件的邮件,手动逐一下载往往耗时耗力,成为效率瓶颈。如何通过代码实现“一键批量下载”?本文将以**“Gmail全量PDF附件下载工具”**开发为例,完整拆解从需求分析到落地交付的P…...
【验证技能】VIP项目大总结
VIP项目快做一段落了,历时一年半,也该要一个大汇总。 VIP简介 VIP开发流程 VIP难点 进程同步 打拍插入不同bit位宽数据问题。 动态升降lane VIP做的不好的地方和改进想法 各层之间交互 testsuite两端关键 所有层的实现架构不统一 VIP经验 ** 架构…...

Pytest-mark使用详解(跳过、标记、参数 化)
1.前言 在工作中我们经常使用pytest.mark.XXXX进行装饰器修饰,后面的XXX的不同,在pytest中有不同的作 用,其整体使用相对复杂,我们单独将其抽取出来做详细的讲解。 2.pytest.mark.skip()/skipif()跳过用例 import pytest #无条…...

【浅尝Java】Java简介第一个Java程序(含JDK、JRE与JVM关系、javcdoc的使用)
🍞自我激励:每天努力一点点,技术变化看得见 文章目录 Java语言概述Java是什么Java语言的重要性Java语言发展简史Java语言特性 第一个Java程序main方法示例运行Java程序JDK、JRE、JVM之间的关系注释基本规则注释规范 标识符关键字 Java语言概述…...
游戏打击感实现
视觉表现 1.帧冻结(卡肉) 原理:在攻击命中的瞬间暂停动画播放(通常0.1-0.3s),伯尼真实打击时的反作用力停滞感。实现:通过控制动画播放速度(如Unity的Animator.speed)结…...

项目三 - 任务2:创建笔记本电脑类(一爹多叔)
在本次实战中,我们通过Java的单根继承和多接口实现特性,设计了一个笔记本电脑类。首先创建了Computer抽象类,提供计算的抽象方法,模拟电脑的基本功能。接着定义了NetCard和USB两个接口,分别包含连接网络和USB设备的抽象…...