【python】Python中实现定时任务常见的几种方式原理分析与应用实战
✨✨ 欢迎大家来到景天科技苑✨✨
🎈🎈 养成好习惯,先赞后看哦~🎈🎈
🏆 作者简介:景天科技苑
🏆《头衔》:大厂架构师,华为云开发者社区专家博主,阿里云开发者社区专家博主,CSDN全栈领域优质创作者,掘金优秀博主,51CTO博客专家等。
🏆《博客》:Python全栈,PyQt5和Tkinter桌面开发,小程序开发,人工智能,js逆向,App逆向,网络系统安全,数据分析,Django,fastapi,flask等框架,云原生K8S,linux,shell脚本等实操经验,网站搭建,数据库等分享。所属的专栏:python综合应用,基础语法到高阶实战教学
景天的主页:景天科技苑
文章目录
- Python中常见的定时任务详细用法教程
- 1. 使用time.sleep()实现定时任务
- 原理
- 示例代码
- 优缺点
- 2. 使用threading.Timer实现定时任务
- 原理
- 示例代码
- 优缺点
- 3. 使用sched模块实现定时任务
- 原理
- 示例代码
- 优缺点
- 4. 使用schedule库实现定时任务
- 原理
- 示例代码(使用`schedule`库)
- 更复杂的示例
- 优缺点
- 5. 使用系统级别的定时任务
- Linux(cron)
- Windows(Task Scheduler)
- 优缺点
- 6. 使用APScheduler库实现定时任务
- 安装
- 示例代码
- 优缺点
- 7. 定时任务的最佳实践
- 1. 确保任务的原子性
- 2. 捕获异常
- 3. 定时任务的日志记录
- 4. 使用持久化存储
- 5. 考虑任务的重试机制
- 6. 监控和警报
- 7. 使用适当的调度器
- 8. 总结
Python中常见的定时任务详细用法教程
在Python中,实现定时任务是一个常见的需求,无论是在自动化脚本、数据处理、系统监控还是其他许多应用场景中。Python提供了多种方法来实现定时任务,包括使用标准库、第三方库以及系统级别的工具。本文将详细介绍几种常见的Python定时任务实现方式,并结合实际案例进行说明。
1. 使用time.sleep()实现定时任务
原理
time.sleep()
函数是Python中最简单直观的定时任务实现方式。它使当前线程暂停执行指定的时间(秒)。通过结合while True
循环,可以创建一个简单的定时任务执行器。
示例代码
import timedef task():print("Task executed at", time.ctime())def loop_monitor():while True:task()time.sleep(10) # 暂停10秒if __name__ == "__main__":loop_monitor()
优缺点
- 优点:实现简单,易于理解。
- 缺点:只能设定间隔,不能指定具体的时间(如每天上午8点执行)。同时,
sleep()
期间程序处于阻塞状态,无法处理其他任务。
2. 使用threading.Timer实现定时任务
原理
threading.Timer
是threading
模块中的一个类,它表示一个定时器,用于在指定时间后执行一个函数。与time.sleep()
相比,Timer
可以创建多个定时任务,且这些任务是异步执行的。
示例代码
import threadingdef task():print("Task executed at", time.ctime())# 如果需要重复执行,可以重新设置Timer# timer = threading.Timer(10, task)# timer.start()timer = threading.Timer(10, task)
timer.start()# 注意:上述代码只执行一次,若需重复执行,需要取消注释重新设置Timer的部分# 若想持续运行,可结合循环
def start_recurring_timer():def loop():while True:timer = threading.Timer(10, task)timer.start()timer.join() # 等待当前timer执行完成,否则可能产生大量线程t = threading.Thread(target=loop)t.start()# 启动重复执行的定时器
start_recurring_timer()
优缺点
- 优点:可以实现异步执行,支持多个定时任务。
- 缺点:每次需要重复执行时,都需要重新设置Timer,且
join()
方法会阻塞主线程,影响性能。
3. 使用sched模块实现定时任务
原理
sched
模块提供了一个通用的事件调度器,允许你安排在特定时间执行特定任务。它支持多线程应用,可以在每个任务执行后立刻调用延时函数,确保其他线程也能执行。
示例代码
import sched
import timedef task():print("Task executed at", time.ctime())def loop_monitor():s = sched.scheduler(time.time, time.sleep)s.enter(5, 1, task, ())s.run()if __name__ == "__main__":loop_monitor()# 注意:sched.scheduler的run()方法会阻塞直到没有更多任务
# 若要重复执行,需将任务添加和run()调用放在循环中def start_recurring_scheduler():s = sched.scheduler(time.time, time.sleep)while True:s.enter(5, 1, task, ())s.run()# 启动重复执行的调度器(通常不推荐这样使用,因为run()会阻塞)
# 一种更好的方法是结合threading.Thread
优缺点
- 优点:支持多线程,可以安排多个任务。
- 缺点:
run()
方法会阻塞,不适合需要频繁执行的任务。
4. 使用schedule库实现定时任务
原理
schedule
是一个轻量级的Python任务调度库,支持以人性化的语法按固定时间间隔执行任务。它提供了秒、分、小时、日期等多种时间单位,并且易于理解和使用。
示例代码(使用schedule
库)
首先,你需要安装schedule
库(如果你还没有安装的话)。可以通过pip安装:
pip install schedule
然后,你可以这样使用schedule
库来安排你的定时任务:
import schedule
import timedef task():print("Task executed at", time.ctime())# 安排任务:每隔10秒执行一次
schedule.every(10).seconds.do(task)if __name__ == "__main__":while True:# 运行所有可以运行的任务schedule.run_pending()# 暂停一秒(为了减少CPU使用率,不需要每次循环都检查)time.sleep(1)
更复杂的示例
schedule
库还支持更复杂的定时规则,比如每天、每周、每月等:
import schedule
import timedef job():print("I'm working...")# 每天的10:30执行
schedule.every().day.at("10:30").do(job)# 每周一的10:30执行
schedule.every().monday.at("10:30").do(job)# 每月的第三个星期一的10:30执行
schedule.every().monday.do(job).tag('monthly-task')
schedule.every().third.monday.do(job, 'It is the third Monday of the month!').tag('monthly-task', 'third-monday')# 取消带有特定标签的任务
# schedule.clear('monthly-task')if __name__ == "__main__":while True:schedule.run_pending()time.sleep(1)
优缺点
- 优点:
- 易于理解和使用,提供人性化的语法。
- 支持多种时间单位(秒、分、小时、日期等)。
- 支持标签功能,便于管理和取消任务。
- 缺点:
- 对于非常精确的时间控制(如毫秒级),可能不够精确。
- 如果主程序崩溃,定时任务也会停止。
5. 使用系统级别的定时任务
Linux(cron)
在Linux系统中,可以使用cron服务来安排定时任务。Python脚本可以通过cron来定时执行。
首先,编辑cron任务列表:
crontab -e
然后,添加一行来安排你的Python脚本(假设脚本名为my_script.py
):
*/10 * * * * /usr/bin/python3 /path/to/your/script/my_script.py
这表示每10分钟执行一次my_script.py
。
Windows(Task Scheduler)
在Windows系统中,可以使用任务计划程序(Task Scheduler)来安排定时任务。
- 打开“任务计划程序”。
- 点击“创建基本任务…”。
- 遵循向导,设置触发器(何时开始任务)、操作(启动程序)等。
- 在“操作”步骤中,选择“启动程序”,然后浏览到你的Python脚本文件。
优缺点
- 优点:
- 跨应用程序使用,不仅限于Python。
- 系统级别的任务管理,更加稳定和可靠。
- 缺点:
- 需要额外的配置,可能不如Python内置或第三方库方便。
- 对于非系统管理员用户,可能需要管理员权限来设置任务。
当然,我们可以继续深入讨论关于Python中定时任务的实现,特别是针对一些高级用例和最佳实践。
6. 使用APScheduler库实现定时任务
APScheduler
(Advanced Python Scheduler)是一个功能强大的Python任务调度库,它提供了基于时间的任务调度功能,并支持多种调度器(如后台线程调度器、进程调度器、基于事件驱动的调度器等)。APScheduler
可以很容易地集成到任何Python应用程序中,并且提供了丰富的接口来添加、修改和删除任务。
安装
首先,你需要安装APScheduler
库:
pip install APScheduler
示例代码
下面是一个使用APScheduler
的示例,它展示了如何设置一个简单的定时任务:
from apscheduler.schedulers.background import BackgroundScheduler
import timedef task():print("Task executed at", time.ctime())# 创建一个后台调度器
scheduler = BackgroundScheduler()# 添加任务
scheduler.add_job(task, 'interval', seconds=10)# 启动调度器
scheduler.start()# 示例:在一段时间后停止调度器(可选)
# try:
# # 这里是主程序的其他部分
# while True:
# time.sleep(2)
# except (KeyboardInterrupt, SystemExit):
# # 关闭调度器
# scheduler.shutdown()# 注意:由于这个示例在脚本的最后没有阻塞,所以调度器会立即开始执行并很快结束(如果没有其他代码阻止它)。
# 在实际应用中,你可能需要在某个循环中等待,或者让这个脚本作为守护进程运行。# 为了保持这个示例简单并演示调度器的运行,我们可以使用try-except块来模拟主程序的运行,并在收到中断时关闭调度器。
try:# 这里让主程序保持运行while True:time.sleep(2)
except (KeyboardInterrupt, SystemExit):scheduler.shutdown()
优缺点
- 优点:
- 功能强大,支持多种调度器(后台线程、进程、事件驱动)。
- 提供了丰富的接口来管理任务(添加、修改、删除、暂停、恢复)。
- 易于集成到任何Python应用程序中。
- 缺点:
- 相对于简单的
time.sleep()
或schedule
库,APScheduler
的学习曲线可能稍高一些。 - 对于非常简单的用例,可能显得过于复杂。
- 相对于简单的
7. 定时任务的最佳实践
1. 确保任务的原子性
确保你的定时任务在执行时是原子性的,即它们应该能够在没有外部干扰的情况下独立完成。这有助于避免任务之间的潜在冲突和数据不一致问题。
2. 捕获异常
在定时任务中,务必捕获并处理可能发生的所有异常。这可以防止因未捕获的异常而导致程序崩溃或停止执行其他任务。
3. 定时任务的日志记录
为你的定时任务添加详细的日志记录,以便在出现问题时能够快速定位和解决问题。日志还可以帮助你了解任务的执行情况和性能。
4. 使用持久化存储
如果你的定时任务需要处理大量数据或需要在多个任务之间共享数据,请考虑使用持久化存储(如数据库或文件系统)。这可以确保数据的可靠性和一致性。
5. 考虑任务的重试机制
对于可能因外部因素(如网络问题、服务不可用等)而失败的任务,考虑实现重试机制。这可以提高任务的可靠性和成功率。
6. 监控和警报
为你的定时任务设置监控和警报系统,以便在任务失败或执行异常时及时得到通知。这可以帮助你快速响应并解决问题。
7. 使用适当的调度器
根据你的具体需求(如任务的数量、执行频率、精度要求等),选择最适合你的调度器。例如,对于需要高精度控制的任务,你可能需要使用基于时间的调度器;而对于需要并行处理大量任务的情况,你可能需要考虑使用基于进程的调度器。
8. 总结
Python提供了多种实现定时任务的方法,从简单的time.sleep()
到功能强大的APScheduler
库。选择哪种方法取决于你的具体需求、任务的复杂性以及你对系统的控制程度。无论你选择哪种方法,都应该注意任务的原子性、异常处理、日志记录、持久化存储、重试机制、监控和警报以及适当的调度器选择等最佳实践。
相关文章:

【python】Python中实现定时任务常见的几种方式原理分析与应用实战
✨✨ 欢迎大家来到景天科技苑✨✨ 🎈🎈 养成好习惯,先赞后看哦~🎈🎈 🏆 作者简介:景天科技苑 🏆《头衔》:大厂架构师,华为云开发者社区专家博主,…...

老公请喝茶,2024年老婆必送老公的养生茶,暖暖的很贴心
在这个快节奏的时代,每个人都在为生活奔波,而家的温馨与关怀,成了我们最坚实的后盾。随着2024年的已经过半,作为妻子,你是否也在寻找一份特别的礼物,来表达对老公深深的爱意与关怀?在这个充满爱…...
3d打印相关资料
模型库 拓竹makerworld爱给...

MySQL1 DDL语言
安装与配置 官网: MySQL :: Download MySQL Installer 阿里云: MySQL8 https://www.alipan.com/s/auhN4pTqpRp 点击链接保存,或者复制本段内容,打开「阿里云盘」APP ,无需下载极速在线查看,视频原画倍速…...

el-tree懒加载状态下实现搜索筛选(纯前端)
1.效果图 (1)初始状态 (2)筛选后 2.代码 <template><div><el-inputplaceholder"输入关键字进行过滤"v-model"filterText"input"searchValue"></el-input><el-tree…...

NLP——Transfromer 架构详解
Transformer总体架构图 输入部分:源文本嵌入层及其位置编码器、目标文本嵌入层及其位置编码器 编码器部分 由N个编码器层堆叠而成 每个编码器层由两个子层连接结构组成 第一个子层连接结构包括一个多头自注意力子层和规范化层以及一个残差连接 第二个子层连接结构包…...

大模型算法面试题(二十)
本系列收纳各种大模型面试题及答案。 1、描述Encoder和Decoder中Attention机制的不同之处 Encoder和Decoder中的Attention机制在自然语言处理(NLP)和序列到序列(Seq2Seq)模型中扮演着重要角色,它们虽然都利用了Attent…...

2024最新最全面的Selenium 3.0 + Python自动化测试框架
文档说明 Selenium是一个用于Web应用程序自动化测试的工具。Selenium测试直接运行在浏览器中,就像真正的用户在操作一样。 Selenium测试的主要功能包括: 测试与浏览器的兼容性:测试应用程序是否能很好的工作在不同的浏览器和操作系统之上。…...

海运中的甩柜是怎么回事❓怎么才能避免❓
什么是甩柜? 甩柜又叫甩箱,是指集装箱船在起运离港时,船公司没有将此前计划装船的集装箱装运上船,导致部分货物滞留港口。多出现在海运旺季。 为什么会甩柜? 甩箱是集装箱物流中常见的事件,主要因为承运…...

Win11+docker+gpu+vscode+pytorch配置anomalib(2)
在上一篇文章中,我在Win11上通过Docker配置了pytorch,并顺利调用了GPU。在这篇文章中,我将继续完成anomalib的配置。 anomalib是一个非常完善的异常检测框架,我希望通过它来学习经典异常检测算法,并且测试这些算法在我自己的数据集上的效果。 步骤如下: 1. 从docker Hub上…...
AI在招聘市场趋势分析中的应用
一、引言 在数字化、智能化的时代背景下,人工智能(AI)技术正逐步渗透到各行各业,其中招聘市场也不例外。AI技术的运用不仅极大地提高了招聘的效率和精准度,还在招聘市场趋势分析方面展现出巨大的潜力。本文旨在探讨AI在…...

AMEYA360:太阳诱电应对 165℃的叠层金属类功率电感器实现商品化!
太阳诱电株式会社实现了可以满足车载被动部件认定的可靠性试验规格“AEC-Q200”的叠层金属类功率电感器 MCOIL™“LACNF2012KKTR24MAB”(2.0x1.25x1.0mm,高度为最大值)等 4 个产品的商品化。通过本公司独有的金属类材料和叠层工艺的提高,在叠层金属类功率…...

Nginx进阶-常见配置(三)
nginx 变量 Nginx的配置文件使用的语法的就是一门微型的编程语言。既然是编程语言,一般也就少不了“变量”这种东西。 Nginx配置文件使用的语法主要包括以下几个方面: (1)配置块 (Block Directives): Nginx配置文件由多个嵌套的…...
开源协作式书签管理器推荐
不知道有没有人和我一样,不怎么爱用app,反而喜欢保留用古老的浏览器浏览新闻和知识的习惯。那么归档网页和书签一定是你非常头疼的事情。 推荐一款开源软件:Linkwarden ,这是一款独立的开源协作式书签管理器。 Linkwarden 允许用户收集、组…...
【线性代数】【二】2.2极大线性无关组与向量空间的基
文章目录 前言一、极大线性无关组二、向量空间的基三、向量维数与向量空间维数总结 前言 上一篇中我们介绍了向量空间的概念,并且学习了对任意给出的一组向量,如果构造一个向量空间。本文将更加细致的去分析张成一个向量空间,具有哪些性质。…...

STM32常见的下载方式有三种
经过对比,推荐使用 SWD下载,只需要一个仿真器(如jLINK、ST LINK、 CMSIS DAP 等),比较方便。 不推荐使用串口下载(速度慢、无法仿真和调试)和 JTAG 下载(占用 IO 多)。...
RK3568-npu模型转换推理
1. rknn-toolkit2-1.4.0进行模型转换和模型推理 1.1 虚拟机转换和模拟器推理(要求ubuntu18+python3.6) sudo apt-get install python3 python3-dev python3-pip sudo apt-get install libxslt1-dev zlib1g-dev libglib2.0 libsm6 libgl1-mesa-glx libprotobuf-dev gcc cd ~…...

《C语言程序设计 第4版》笔记和代码 第十二章 数据体和数据结构基础
12.1从基本数据类型到抽象数据类型 1 所有的程序设计语言都不能将所有复杂数据对象作为其基本数据类型,因此需要允许用户自定义数据类型,在C语言中,就存在构造数据类型(复合数据类型)。 2 结构体是构造数据类型的一种…...

学习记录——day26 进程间的通信 无名管道 无名管道 信号通信 特殊的信号处理
目录 一、进程间通信引入 二、无名管道 1、无名管道相关概念 2、无名管道的API接口函数 pipe(int pipefd[2]); 3、管道通信的特点 4、管道的读写特点 三、有名管道 1、有名管道:有名字的管道文件,其他进程可以调用 2、可以用于亲缘进程间的通信&…...
WHAT - xmlhttprequest vs fetch vs wretch
目录 前言1. XMLHttpRequest (XHR)2. fetch3. wretch总结 fetch1. 简洁性和易用性2. 错误处理3. 默认行为和功能扩展4. 请求和响应的处理5. 跨域请求和 CORS6. 现代 Web 开发需求 fetch vs xhr 代码示例使用 XMLHttpRequest使用 fetch代码对比 前言 根据标题我们可以知道今天主…...
OpenLayers 可视化之热力图
注:当前使用的是 ol 5.3.0 版本,天地图使用的key请到天地图官网申请,并替换为自己的key 热力图(Heatmap)又叫热点图,是一种通过特殊高亮显示事物密度分布、变化趋势的数据可视化技术。采用颜色的深浅来显示…...

Prompt Tuning、P-Tuning、Prefix Tuning的区别
一、Prompt Tuning、P-Tuning、Prefix Tuning的区别 1. Prompt Tuning(提示调优) 核心思想:固定预训练模型参数,仅学习额外的连续提示向量(通常是嵌入层的一部分)。实现方式:在输入文本前添加可训练的连续向量(软提示),模型只更新这些提示参数。优势:参数量少(仅提…...

Spark 之 入门讲解详细版(1)
1、简介 1.1 Spark简介 Spark是加州大学伯克利分校AMP实验室(Algorithms, Machines, and People Lab)开发通用内存并行计算框架。Spark在2013年6月进入Apache成为孵化项目,8个月后成为Apache顶级项目,速度之快足见过人之处&…...

【Oracle APEX开发小技巧12】
有如下需求: 有一个问题反馈页面,要实现在apex页面展示能直观看到反馈时间超过7天未处理的数据,方便管理员及时处理反馈。 我的方法:直接将逻辑写在SQL中,这样可以直接在页面展示 完整代码: SELECTSF.FE…...

视频字幕质量评估的大规模细粒度基准
大家读完觉得有帮助记得关注和点赞!!! 摘要 视频字幕在文本到视频生成任务中起着至关重要的作用,因为它们的质量直接影响所生成视频的语义连贯性和视觉保真度。尽管大型视觉-语言模型(VLMs)在字幕生成方面…...
uniapp中使用aixos 报错
问题: 在uniapp中使用aixos,运行后报如下错误: AxiosError: There is no suitable adapter to dispatch the request since : - adapter xhr is not supported by the environment - adapter http is not available in the build 解决方案&…...

【论文阅读28】-CNN-BiLSTM-Attention-(2024)
本文把滑坡位移序列拆开、筛优质因子,再用 CNN-BiLSTM-Attention 来动态预测每个子序列,最后重构出总位移,预测效果超越传统模型。 文章目录 1 引言2 方法2.1 位移时间序列加性模型2.2 变分模态分解 (VMD) 具体步骤2.3.1 样本熵(S…...

云原生玩法三问:构建自定义开发环境
云原生玩法三问:构建自定义开发环境 引言 临时运维一个古董项目,无文档,无环境,无交接人,俗称三无。 运行设备的环境老,本地环境版本高,ssh不过去。正好最近对 腾讯出品的云原生 cnb 感兴趣&…...

android RelativeLayout布局
<?xml version"1.0" encoding"utf-8"?> <RelativeLayout xmlns:android"http://schemas.android.com/apk/res/android"android:layout_width"match_parent"android:layout_height"match_parent"android:gravity&…...

从物理机到云原生:全面解析计算虚拟化技术的演进与应用
前言:我的虚拟化技术探索之旅 我最早接触"虚拟机"的概念是从Java开始的——JVM(Java Virtual Machine)让"一次编写,到处运行"成为可能。这个软件层面的虚拟化让我着迷,但直到后来接触VMware和Doc…...