当前位置: 首页 > news >正文

PHP语言laravel框架中基于Redis的异步队列使用实践与原理

在 Laravel 中,基于 Redis 的异步队列是通过 Laravel 的队列系统与 Redis 服务结合来实现的。这种队列机制允许你将任务推送到队列中,并由后台工作进程异步处理这些任务。这样,你就可以将耗时的操作(如发送邮件、处理视频、数据同步等)推迟到后台处理,从而提高应用的响应速度。

### 1. **Redis 队列概述**

Laravel 队列是一种处理任务(如发送电子邮件、生成报告或其他后台工作)的机制。你可以将这些任务放入队列中,然后让后台的队列工作进程来异步处理它们,而不会影响主应用的响应时间。

Redis 是一个高效的内存数据结构存储,广泛用于缓存、消息队列、发布订阅等场景。在 Laravel 中,Redis 可以作为一个队列驱动,用来实现高效的异步任务处理。

### 2. **Redis 异步队列的工作原理**

#### 1. **队列推送任务(Job Push)**

当你希望将一个任务加入队列时,你会创建一个 **Job** 类(一个表示队列任务的类),并将任务推送到 Redis 队列中。Laravel 提供了 `dispatch()` 方法来将任务推送到队列。

例如,创建一个简单的 `SendEmail` 任务并将其推送到队列:

```php
// 在 Controller 或其他地方推送任务
use App\Jobs\SendEmail;

SendEmail::dispatch($user);
```

#### 2. **Redis 队列存储**

当任务被 `dispatch()` 推送到队列时,Laravel 会将任务数据存储到 Redis 中,具体来说,Redis 会将任务数据存储在一个叫做 `queues` 的列表(List)中。

在 Redis 中,队列任务是以“先进先出”(FIFO)的方式进行管理的。当任务被推送到队列时,它们会被放入 Redis 的列表中,队列的消费者(工作进程)会从该列表中拉取任务进行处理。

#### 3. **队列消费者(Worker)处理任务**

一旦任务进入队列,工作进程(worker)会从队列中拉取任务并执行。Laravel 提供了 `php artisan queue:work` 命令来启动队列工作进程,处理 Redis 队列中的任务。

例如,运行队列工作进程:

```bash
php artisan queue:work redis
```

此命令会使工作进程持续运行,持续监听 Redis 队列,直到所有任务都处理完为止。工作进程会从队列中拉取任务并执行相应的 Job 类的 `handle()` 方法。

#### 4. **任务执行与完成**

队列任务的处理过程如下:
1. `queue:work` 命令会不断轮询 Redis 队列中的任务。
2. 当发现任务时,它会将任务从队列中取出,并调用相应的 Job 类的 `handle()` 方法。
3. 任务执行完成后,Laravel 会自动从 Redis 队列中移除该任务。

如果任务执行成功,队列中的任务会被标记为完成。如果任务失败,Laravel 会根据配置重试该任务(通过设置 `failed` 和 `retry` 配置)。

#### 5. **任务失败处理**

Laravel 允许你为队列任务设置失败处理机制。你可以在任务类中定义 `failed()` 方法,或者使用 `queue:failed` 命令来监控和处理任务失败情况。

```php
public function failed()
{
    // 任务失败后的处理逻辑
}
```

### 3. **Redis 队列的配置**

要使用 Redis 作为队列驱动,你需要在 `config/queue.php` 文件中进行相应配置。首先,确保你已安装并配置好 Redis。

在 `config/queue.php` 文件中,配置 Redis 队列:

```php
'connections' => [
    'redis' => [
        'driver' => 'redis',
        'connection' => 'default', // 这里使用默认的 Redis 连接
        'queue' => 'default', // 队列名称
        'retry_after' => 90, // 任务超时后重新排队的时间
    ],
],
```

在 `.env` 文件中,配置 Redis 相关信息:

```env
QUEUE_CONNECTION=redis
REDIS_HOST=127.0.0.1
REDIS_PASSWORD=null
REDIS_PORT=6379
```

### 4. **队列驱动的优缺点**

**优点:**
- **异步处理**:将时间较长的任务移到后台处理,避免阻塞主进程,提升应用响应速度。
- **高效**:Redis 作为内存存储,具有很高的读写效率,非常适合用于处理高并发的任务队列。
- **可扩展性**:你可以根据业务需要扩展队列消费者(worker)的数量,轻松处理大量任务。

**缺点:**
- **任务处理失败**:如果队列任务处理失败,可能会导致任务丢失或系统负载过重。需要考虑任务重试、失败记录等机制。
- **资源消耗**:Redis 是内存数据库,队列任务会占用 Redis 的内存资源,对于大型应用,可能需要做好 Redis 的资源管理。

### 5. **高级功能**

Laravel 提供了许多队列相关的高级功能,结合 Redis 使用时非常有用:

- **延迟任务(Delayed Jobs)**:可以将任务设置为在某个时间点后才执行。
  ```php
  SendEmail::dispatch($user)->delay(now()->addMinutes(10));
  ```

- **任务优先级**:通过配置多个队列连接,你可以为不同的任务设置优先级。例如,一些高优先级任务可以放入一个独立的队列中,优先被处理。

- **队列的故障转移和失败处理**:Laravel 支持任务失败时的自动重试,并提供了自定义失败任务处理的功能。

- **队列队列与 Laravel Horizon**:Laravel Horizon 是 Laravel 官方提供的一个队列监控工具,可以帮助你实时监控 Redis 队列的状态、任务的执行情况、延迟等。

### 6. **总结**

- Laravel 使用 Redis 作为队列驱动,能够高效地异步处理大量的后台任务。
- 任务通过 `dispatch()` 推送到 Redis 队列中,由 `queue:work` 命令启动的工作进程处理。
- Laravel 提供了多种配置选项,可以根据需要调整队列的行为(如任务延迟、超时、重试等)。
- Redis 队列的优点包括高效、可扩展,但需要做好任务失败处理和资源管理。

这种基于 Redis 的异步队列机制使得 Laravel 能够高效地处理大量并发任务,适用于邮件发送、数据同步、图像处理等需要异步执行的场景。

相关文章:

PHP语言laravel框架中基于Redis的异步队列使用实践与原理

在 Laravel 中,基于 Redis 的异步队列是通过 Laravel 的队列系统与 Redis 服务结合来实现的。这种队列机制允许你将任务推送到队列中,并由后台工作进程异步处理这些任务。这样,你就可以将耗时的操作(如发送邮件、处理视频、数据同…...

全面Kafka监控方案:从配置到指标

文章目录 1.1.监控配置1.2.监控工具1.3.性能指标系统相关指标GC相关指标JVM相关指标Topic相关指标Broker相关指标 1.4.性能指标说明1.5.重要指标说明 1.1.监控配置 开启JMX服务端口:kafka基本分为broker、producer、consumer三个子项,每一项的启动都需要…...

kipotix4靶机实战

信息收集 1.判断靶机ip 原理:开靶机之前nmap扫一次网段,再开靶机之后扫一次,查看多出来的ip就是靶机ip ip192.168.98.1742.判断端口服务,系统版本 a.确定端口 b.-p指定端口进一步收集 c.信息筛选 1.端口:22,80,139,…...

我的秋招总结

我的秋招总结 个人背景 双非本,985硕,科班 准备情况 以求职为目的学习Java的时间大概一年。 八股,一开始主要是看B站黑马的八股文课程,背JavaGuide和小林coding还有面试鸭。 算法,250,刷了3遍左右 项目&…...

广义线性模型(GLM)全面解析

引言 广义线性模型(Generalized Linear Model, GLM)是统计学中一种重要的建模工具,它扩展了传统线性回归模型,能够处理响应变量的非正态分布和非线性关系。GLM 的灵活性和广泛的应用范围使其在金融、医学、社会科学等领域中成为数…...

C++ OCR 文字识别

一.引言 文字识别,也称为光学字符识别(Optical Character Recognition, OCR),是一种将不同形式的文档(如扫描的纸质文档、PDF文件或数字相机拍摄的图片)中的文字转换成可编辑和可搜索的数据的技术。随着技…...

PHP实现登录和注册(附源码)

前言 本博客主要讲述利用php环境实现一个简单的前后端结合的用户登录和注册功能。phpstudy是PHP调试环境的集成包,该程序包集成了 ApachePHPMySQLphpMyAdmin 等多个工具,是很好用的调试环境的程序集成包。 目录 前言 1. 准备工作 1.1 工具 1.2 php…...

AEO海关认证的注意事项

AEO海关认证的注意事项繁多且至关重要,企业需细致准备,确保万无一失。 首先,企业需深入研读相关政策文件,如《中华人民共和国海关注册登记和备案企业信用管理办法》及《海关高级认证企业标准》,以政策为指引&#xff0…...

ElasticSearch 分布式部署

一、引言 在当今大数据时代,数据呈爆炸式增长,如何高效地存储、检索数据成为了众多企业面临的关键挑战。ElasticSearch 作为一款强大的分布式搜索引擎,凭借其卓越的性能、灵活的扩展性以及强大的全文检索能力,在日志分析、数据分…...

Vue中动态样式绑定+CSS变量实现切换明暗主题功能——从入门到进阶

1.直接借助Vue的动态绑定样式绑定 Vue动态样式绑定 在Vue中,动态样式绑定是一种强大的功能,它允许开发者根据数据的变化动态地更新元素的样式。以下是对Vue动态样式绑定的详细知识梳理与详解: 一、基础知识 Vue的动态样式绑定主要通过v-b…...

vue3 video 播放rtmp视频?(360浏览器支持)

** 注意:目前只能在360浏览器播放rtmp视频** 谷歌浏览器不支持Flash Player的问题 试过上面这个方法,目前没能实现(没解决),如果有更好的解决方法,告诉我一下 需要下载版本较低的video.js版本库&#xff0…...

RK356x bsp 7 - PCF8563 RTC调试记录

文章目录 1、环境介绍2、目标3、PCF85634、dts配置5、内核配置6、测试验证 1、环境介绍 硬件:飞凌ok3568-c开发板 软件:原厂rk356x sdk 2、目标 开发板断电后仍正常计时。 3、PCF8563 PCF8563 是由 NXP Semiconductors 公司生产的低功耗 CMOS 实时…...

定义Shape:打造属于你的独特图形

自定义Shape:打造属于你的独特图形 在Android开发中,自定义图形绘制是一个非常重要的技能,尤其是在需要实现复杂UI或特定设计需求时。Android提供了android.graphics.drawable.shapes包,其中包含了一些基本的形状类,如RectShape、OvalShape等。然而,有时这些基本形状无法…...

JavaWeb(一) | 基本概念(web服务器、Tomcat、HTTP、Maven)、Servlet 简介

1. 基本概念 1.1、前言 web开发: web,网页的意思,www.baidu.com静态 web html,css提供给所有人看的数据始终不会发生变化! 动态 web 淘宝,几乎是所有的网站;提供给所有人看的数据始终会发生变化&#xf…...

python学opencv|读取图像(二十一)使用cv2.circle()绘制圆形进阶

【1】引言 前序已经掌握了使用cv2.circle()绘制圆形的基本操作,相关链接为: python学opencv|读取图像(二十)使用cv2.circle()绘制圆形-CSDN博客 由于圆形本身绘制起来比较简单,因此可以自由操作的空间也就大&#x…...

CLIP:连接文本与图像, 从自然语言监督中学习可迁移的视觉模型

CLIP:连接文本与图像, 从自然语言监督中学习可迁移的视觉模型 flyfish Learning Transferable Visual Models From Natural Language Supervision https://github.com/OpenAI/CLIP 摘要 CLIP Contrastive Language-Image Pre-Training Contrastive&…...

Linux 硬盘扩容 分区 挂载

Linux 硬盘扩容 分区 & 挂载 1. 添加分区 1.1. 查看新添加的硬盘 fdisk -l假设当前未挂载的盘符是/dev/sdb,后文中所有操作都按挂载/dev/sdb 操作 1.2. 分区管理 小硬盘 fdisk /dev/sdb大硬盘(2TB以上) gdisk /dev/sdb1.3. 编辑分…...

基于 Slf4j 和 AOP 的自动化方法执行时间日志记录方案

前言 其实这个需求很简单,但是这个需求又是项目中必不可少的,尤其对于性能调优这块,但是使用哪种方式更加方便呢,这就是本篇博文需要讨论的重点 系统时间 可以通过 System.currentTimeMillis() 或 System.nanoTime() 来实现。 …...

关于 K8s 的一些基础概念整理-补充【k8s系列之二】

〇、前言 本文继续整理下 K8s 的一些基础概念,作为前一篇概念汇总的补充。 前一篇博文链接:关于 K8s 的一些基础概念整理【k8s系列之一】_集群 master节点 控制节点 宿主机-CSDN博客 一、详情 1.1 Label Label 在 k8s 中是一个非常核心的概念&#xf…...

FPGA的DMA应用——pcileech

硬件通过pcie总线,访存本机的内存,并进行修改,可以进行很多操作。 学习视频:乱讲DMA及TLP 1-pcileech项目简介和自定义模块介绍_哔哩哔哩_bilibili vivado2024.1的下载文章链接和地址:AMD-Xilinx Vivado™ 2024.1 现…...

Docker 离线安装指南

参考文章 1、确认操作系统类型及内核版本 Docker依赖于Linux内核的一些特性,不同版本的Docker对内核版本有不同要求。例如,Docker 17.06及之后的版本通常需要Linux内核3.10及以上版本,Docker17.09及更高版本对应Linux内核4.9.x及更高版本。…...

【网络】每天掌握一个Linux命令 - iftop

在Linux系统中,iftop是网络管理的得力助手,能实时监控网络流量、连接情况等,帮助排查网络异常。接下来从多方面详细介绍它。 目录 【网络】每天掌握一个Linux命令 - iftop工具概述安装方式核心功能基础用法进阶操作实战案例面试题场景生产场景…...

基于FPGA的PID算法学习———实现PID比例控制算法

基于FPGA的PID算法学习 前言一、PID算法分析二、PID仿真分析1. PID代码2.PI代码3.P代码4.顶层5.测试文件6.仿真波形 总结 前言 学习内容:参考网站: PID算法控制 PID即:Proportional(比例)、Integral(积分&…...

遍历 Map 类型集合的方法汇总

1 方法一 先用方法 keySet() 获取集合中的所有键。再通过 gey(key) 方法用对应键获取值 import java.util.HashMap; import java.util.Set;public class Test {public static void main(String[] args) {HashMap hashMap new HashMap();hashMap.put("语文",99);has…...

3.3.1_1 检错编码(奇偶校验码)

从这节课开始,我们会探讨数据链路层的差错控制功能,差错控制功能的主要目标是要发现并且解决一个帧内部的位错误,我们需要使用特殊的编码技术去发现帧内部的位错误,当我们发现位错误之后,通常来说有两种解决方案。第一…...

【位运算】消失的两个数字(hard)

消失的两个数字(hard) 题⽬描述:解法(位运算):Java 算法代码:更简便代码 题⽬链接:⾯试题 17.19. 消失的两个数字 题⽬描述: 给定⼀个数组,包含从 1 到 N 所有…...

ElasticSearch搜索引擎之倒排索引及其底层算法

文章目录 一、搜索引擎1、什么是搜索引擎?2、搜索引擎的分类3、常用的搜索引擎4、搜索引擎的特点二、倒排索引1、简介2、为什么倒排索引不用B+树1.创建时间长,文件大。2.其次,树深,IO次数可怕。3.索引可能会失效。4.精准度差。三. 倒排索引四、算法1、Term Index的算法2、 …...

MySQL账号权限管理指南:安全创建账户与精细授权技巧

在MySQL数据库管理中,合理创建用户账号并分配精确权限是保障数据安全的核心环节。直接使用root账号进行所有操作不仅危险且难以审计操作行为。今天我们来全面解析MySQL账号创建与权限分配的专业方法。 一、为何需要创建独立账号? 最小权限原则&#xf…...

Unsafe Fileupload篇补充-木马的详细教程与木马分享(中国蚁剑方式)

在之前的皮卡丘靶场第九期Unsafe Fileupload篇中我们学习了木马的原理并且学了一个简单的木马文件 本期内容是为了更好的为大家解释木马(服务器方面的)的原理,连接,以及各种木马及连接工具的分享 文件木马:https://w…...

云原生玩法三问:构建自定义开发环境

云原生玩法三问:构建自定义开发环境 引言 临时运维一个古董项目,无文档,无环境,无交接人,俗称三无。 运行设备的环境老,本地环境版本高,ssh不过去。正好最近对 腾讯出品的云原生 cnb 感兴趣&…...