Python与Redis:提升性能,确保可靠性,掌握最佳实践
在 Python 中,有多个库可用于与 Redis 数据库进行交互,其中最受欢迎的是 redis-py
。这是一个 Python 客户端库,提供了与 Redis 数据库进行通信的丰富功能。
Python操作Redis操作步骤
安装 redis-py
使用 pip 安装 redis-py
:
pip install redis
连接到 Redis
import redis# 连接到本地 Redis 服务器
r = redis.Redis(host='localhost', port=6379, db=0)
基础操作
# 设置键值对
r.set('key', 'value')# 获取键的值
value = r.get('key')
print(value) # 输出:b'value'# 删除键
r.delete('key')
数据结构操作
redis-py
支持多种数据结构,如字符串、列表、集合、有序集合、哈希等。
# 列表操作
r.lpush('my_list', 'item1')
r.rpush('my_list', 'item2')
items = r.lrange('my_list', 0, -1)
print(items) # 输出:[b'item1', b'item2']
事务
# 创建一个事务对象
pipe = r.pipeline()# 将多个命令添加到事务中
pipe.set('key1', 'value1')
pipe.set('key2', 'value2')# 执行事务
pipe.execute()
Python 操作 Redis 数据库应用场景
1. 缓存
Redis 是一个高性能的键值存储系统,特别适合用作缓存层。由于其内存中的数据结构存储,Redis 能够提供快速的数据访问速度,这使其成为缓存解决方案的理想选择。
应用场景
- 缓存数据库查询结果,减少数据库访问次数,提高响应速度。
- 缓存计算密集型操作的结果,如数据聚合或计算。
示例
import redis# 连接 Redis
r = redis.Redis(host='localhost', port=6379, db=0)# 设置缓存
r.set('user:1', '{"id": 1, "name": "Alice"}')# 获取缓存
user_data = r.get('user:1')
print(user_data) # 输出:b'{"id": 1, "name": "Alice"}'
2. 会话存储
Redis 可用于存储用户会话数据,如用户登录状态、购物车内容等。由于 Redis 的高速度,它可以提供快速的会话数据访问,从而提高用户体验。
应用场景
- 存储用户登录状态和凭证。
- 管理用户的购物车和订单信息。
示例
# 用户登录成功后,存储会话数据
session_data = {"user_id": 1, "username": "Alice"}
r.hmset(f'session:{session_data["user_id"]}', session_data)# 获取用户会话数据
session = r.hgetall(f'session:{session_data["user_id"]}')
print(session) # 输出:{b'user_id': b'1', b'username': b'Alice'}
3. 实时分析
通过 Redis 的数据结构,如计数器和排序集,可以进行实时数据分析,如统计用户访问量、热门内容等。
应用场景
- 用户行为分析,如页面访问次数统计。
- 实时数据监控和仪表板展示。
示例
# 计数器示例:统计用户访问次数
user_id = 1
r.incr(f'user:{user_id}:visits')
visits = r.get(f'user:{user_id}:visits')
print(visits) # 输出:b'1'
4. 消息队列
利用 Redis 的发布/订阅功能,可以实现简单的消息队列,用于解耦和异步处理任务。
应用场景
- 异步任务处理,如邮件发送、数据处理等。
- 系统间的解耦,如服务间的消息通信。
示例
# 发布消息
r.publish('channel:tasks', 'process_data')# 订阅消息
pubsub = r.pubsub()
pubsub.subscribe('channel:tasks')
message = pubsub.get_message()
print(message['data']) # 输出:b'process_data'
5. 分布式锁
Redis 提供了原子操作,可以用于实现分布式锁,确保在多个节点上的互斥操作。
应用场景
- 分布式系统中的资源互斥访问,如限制对共享资源的同时访问。
- 防止并发写入和数据竞态条件。
示例
# 加锁
lock_key = 'resource_lock'
lock_value = 'unique_value'
is_locked = r.set(lock_key, lock_value, nx=True, ex=10) # 设置锁的有效期为 10 秒if is_locked:# 执行互斥操作print("Resource locked, performing operation...")# ...# 释放锁r.delete(lock_key)
else:print("Resource is locked by another process.")
Python 操作 Redis 数据库注意事项
1. 连接管理
与大多数数据库一样,频繁地创建和销毁 Redis 连接会产生不必要的性能开销。因此,尽量复用已有的 Redis 连接是一种优化手段,可以提高应用程序的性能。
注意事项
- 使用连接池:使用连接池管理多个 Redis 连接,以便在需要时从池中获取连接,而不是每次都创建新连接。
- 连接错误处理:在获取连接时,要捕获可能的连接错误,并进行相应的处理,如重试或返回错误。
示例
import redis# 创建 Redis 连接池
pool = redis.ConnectionPool(host='localhost', port=6379, db=0)
r = redis.Redis(connection_pool=pool)# 复用连接
value = r.get('key')
2. 异常处理
在进行 Redis 操作时,可能会遇到各种异常情况,如连接超时、操作失败等。适当的异常处理可以帮助应用程序更好地应对这些情况。
注意事项
- 捕获异常:在执行 Redis 操作时,使用 try-except 块捕获可能的异常。
- 错误日志记录:记录错误信息以便后续排查问题。
示例
try:r.set('key', 'value')
except redis.RedisError as e:print(f"Redis operation failed: {e}")
3. 数据结构选择
Redis 提供了多种数据结构,如字符串、哈希、列表、集合、有序集合等。选择合适的数据结构可以优化性能和内存使用。
注意事项
- 数据一致性:选择的数据结构应满足应用需求,保证数据的一致性和正确性。
- 性能考虑:了解各种数据结构的性能特性,选择最适合当前应用场景的结构。
示例
# 使用哈希存储用户信息
user_data = {"id": 1, "name": "Alice"}
r.hmset('user:1', user_data)# 使用有序集合存储排行榜
r.zadd('leaderboard', {'Alice': 100, 'Bob': 90})
4. 数据持久化
Redis 提供了多种数据持久化策略,如 RDB 快照和 AOF 日志。选择合适的持久化策略可以确保数据在系统故障后的安全性和恢复能力。
注意事项
- RDB 快照:适用于需要定期备份整个数据集的场景。
- AOF 日志:适用于需要持续记录每次写操作的场景,提供更好的数据恢复能力。
示例
# 配置 AOF 持久化
r.config_set('appendonly', 'yes')# 手动触发 RDB 快照
r.save()
总结
Python 通过 redis-py
库提供了强大而灵活的方式来操作 Redis 数据库。通过简单的 API,可以轻松地进行各种数据操作,包括设置键值对、使用数据结构、执行事务等。在实际应用中,合理地应用 Redis 可以大大提高应用程序的性能和可扩展性。但是,使用 Redis 时需要注意连接管理、异常处理、数据结构选择和数据持久化等方面的最佳实践,以确保系统的稳定性和可靠性。
相关文章:
Python与Redis:提升性能,确保可靠性,掌握最佳实践
在 Python 中,有多个库可用于与 Redis 数据库进行交互,其中最受欢迎的是 redis-py。这是一个 Python 客户端库,提供了与 Redis 数据库进行通信的丰富功能。 Python操作Redis操作步骤 安装 redis-py 使用 pip 安装 redis-py: p…...

GPT国内能用吗
2022年11月,Open AI发布ChatGPT,ChatGPT展现了大型语模型在自然语言处理方面的惊人进步,其生成文本的流畅度和连贯性令人印象深刻,为AI应用打开了新的可能性。 ChatGPT的出现推动了AI技术在各个领域的应用,例如&#x…...

中科亿海微-CL1656功能验证开发板
I. 引言 A. 研究背景与意义 CL1656是一款精度高、功耗低、成本低的5V单片低功耗运放,由核心互联公司研发制造,CL1656 是一个 16-bit、快速、低功耗逐次逼近型 ADC,吞吐速率高达 250 kSPS,并且内置低噪声、宽 带宽采样保持放大器。…...

学习STM32第十五天
SPI外设 一、简介 STM32F4XX内部集成硬件SPI收发电路,可以由硬件自动执行时钟生成、数据收发等功能,减轻CPU负担,可配置8位/16位数据帧,高位(最常用)/低位先行,三组SPI接口,支持DMA…...

【面试题】MySQL 事务的四大特性说一下?
事务是一个或多个 SQL 语句组成的一个执行单元,这些 SQL 语句要么全部执行成功,要么全部不执行,不会出现部分执行的情况。事务是数据库管理系统执行过程中的一个逻辑单位,由一个有限的数据库操作序列构成。 事务的主要作用是保证数…...

案例实践 | InterMat:基于长安链的材料数据发现与共享系统
案例名称:InterMat-基于区块链的材料数据发现与共享系统 ■ 建设单位 北京钢研新材科技有限公司 ■ 用户群体 材料数据上下游单位 ■ 应用成效 已建设10共识节点、50轻节点,1万注册用户 案例背景 材料是构成各种装备和工程的物质载体,…...

【数据挖掘】实验8:分类与预测建模
实验8:分类与预测建模 一:实验目的与要求 1:学习和掌握回归分析、决策树、人工神经网络、KNN算法、朴素贝叶斯分类等机器学习算法在R语言中的应用。 2:了解其他分类与预测算法函数。 3:学习和掌握分类与预测算法的评…...

go语言并发实战——日志收集系统(三) 利用sarama包连接KafKa实现消息的生产与消费
环境的搭建 Kafka以及相关组件的下载 我们要实现今天的内容,不可避免的要进行对开发环境的配置,Kafka环境的配置比较繁琐,需要配置JDK,Scala,ZoopKeeper和Kafka,这里我们不做赘述,如果大家不知道如何配置环境&#x…...

Go 单元测试之Mysql数据库集成测试
文章目录 一、 sqlmock介绍二、安装三、基本用法四、一个小案例五、Gorm 初始化注意点 一、 sqlmock介绍 sqlmock 是一个用于测试数据库交互的 Go 模拟库。它可以模拟 SQL 查询、插入、更新等操作,并且可以验证 SQL 语句的执行情况,非常适合用于单元测试…...

Prometheus + Grafana 搭建监控仪表盘
目标要求 1、需要展现的仪表盘: SpringBoot或JVM仪表盘 Centos物理机服务器(实际为物理分割的虚拟服务器)仪表盘 2、展现要求: 探索Prometheus Grafana搭建起来的展示效果,尽可能展示能展示的部分。 一、下载软件包 监控系统核心…...
机器人管理系统的增删查改(Python)
#交互模式 robot ["机器人1","机器人2","机器人3","机器人4"] name input("请输入您的姓名:") print("%s您好欢迎使用机器人管理系统"%(name))while True:print("您可以进行 1.查找 2.修改 3.增…...

【.Net动态Web API】背景与实现原理
🚀前言 本文是《.Net Core进阶编程课程》教程专栏的导航站(点击链接,跳转到专栏主页,欢迎订阅,持续更新…) 专栏介绍:通过源码实例来讲解Asp.Net Core进阶知识点,让大家完全掌握每一…...

JS-43-Node.js02-安装Node.js和npm
Node.js是一个基于Chrome V8引擎的JavaScript运行时环境,可以让JavaScript实现后端开发,所以,首先在本机安装Node.js环境。 一、安装Node.js 官网:下载 Node.js 默认两个版本的下载: 64位windows系统的LTS(Long Tim…...
设计模式(分类)
目录 设计模式(分类) 设计模式(六大原则) 设计模式是软件工程中一种经过验证的、用于解决特定设计问题的通用解决方案。它们是面向对象编程(Object-Oriented Programming, OOP)实践中提炼出的最佳实…...

请陪伴Kimi和GPT成长
经验的闪光汤圆 但是我想要写实的 你有吗? 岁数大了,希望如何学习新知识呢?又觉得自己哪些能力亟需补强呢? 看论文自然得用Kimi,主要是肝不动了,眼睛也顶不住了。 正好昨天跟专业人士学会了用工作流的办法跟…...

优思学院|ISO45001职业健康安全管理体系是什么?
ISO45001:2018是新公布的国际标准规范,全球备受期待的职业健康与安全国际标准(OH&S)于2018年公布,并将在全球范围内改变工作场所实践。ISO45001将取代OHSAS18001,成为全球工作场所健康与安全的参考。 ISO45001:201…...

抖去推短视频矩阵系统----源头开发
为什么一直说让企业去做短视频矩阵?而好处就是有更多的流量入口,不同平台或账号之间可以进行资源互换,最终目的就是获客留咨,提单转化。你去看一些做得大的账号,你会发现他们在许多大的平台上,都有自己的账…...
Golang函数重试机制实现
前言 在编写应用程序时,有时候会遇到一些短暂的错误,例如网络请求、服务链接终端失败等,这些错误可能导致函数执行失败。 但是如果稍后执行可能会成功,那么在一些业务场景下就需要重试了,重试的概念很简单,…...

工业电脑在ESOP工作站行业应用
ESOP工作站行业应用 项目背景 E-SOP是实现作业指导书电子化,并统一管理和集中控制的一套管理信息平台。信迈科技的ESOP终端是一款体积小巧功能齐全的高性价比工业电脑,上层通过网络与MES系统连接,下层连接显示器展示作业指导书。ESOP控制终…...

java项目实战之图书管理系统(1)
✅作者简介:大家好,我是再无B~U~G,一个想要与大家共同进步的男人😉😉 🍎个人主页:再无B~U~G-CSDN博客 1.背景 图书管理系统是一种用于管理图书…...
【根据当天日期输出明天的日期(需对闰年做判定)。】2022-5-15
缘由根据当天日期输出明天的日期(需对闰年做判定)。日期类型结构体如下: struct data{ int year; int month; int day;};-编程语言-CSDN问答 struct mdata{ int year; int month; int day; }mdata; int 天数(int year, int month) {switch (month){case 1: case 3:…...

【项目实战】通过多模态+LangGraph实现PPT生成助手
PPT自动生成系统 基于LangGraph的PPT自动生成系统,可以将Markdown文档自动转换为PPT演示文稿。 功能特点 Markdown解析:自动解析Markdown文档结构PPT模板分析:分析PPT模板的布局和风格智能布局决策:匹配内容与合适的PPT布局自动…...
postgresql|数据库|只读用户的创建和删除(备忘)
CREATE USER read_only WITH PASSWORD 密码 -- 连接到xxx数据库 \c xxx -- 授予对xxx数据库的只读权限 GRANT CONNECT ON DATABASE xxx TO read_only; GRANT USAGE ON SCHEMA public TO read_only; GRANT SELECT ON ALL TABLES IN SCHEMA public TO read_only; GRANT EXECUTE O…...

ESP32 I2S音频总线学习笔记(四): INMP441采集音频并实时播放
简介 前面两期文章我们介绍了I2S的读取和写入,一个是通过INMP441麦克风模块采集音频,一个是通过PCM5102A模块播放音频,那如果我们将两者结合起来,将麦克风采集到的音频通过PCM5102A播放,是不是就可以做一个扩音器了呢…...

QT: `long long` 类型转换为 `QString` 2025.6.5
在 Qt 中,将 long long 类型转换为 QString 可以通过以下两种常用方法实现: 方法 1:使用 QString::number() 直接调用 QString 的静态方法 number(),将数值转换为字符串: long long value 1234567890123456789LL; …...

用机器学习破解新能源领域的“弃风”难题
音乐发烧友深有体会,玩音乐的本质就是玩电网。火电声音偏暖,水电偏冷,风电偏空旷。至于太阳能发的电,则略显朦胧和单薄。 不知你是否有感觉,近两年家里的音响声音越来越冷,听起来越来越单薄? —…...

基于Java+MySQL实现(GUI)客户管理系统
客户资料管理系统的设计与实现 第一章 需求分析 1.1 需求总体介绍 本项目为了方便维护客户信息为了方便维护客户信息,对客户进行统一管理,可以把所有客户信息录入系统,进行维护和统计功能。可通过文件的方式保存相关录入数据,对…...

【Redis】笔记|第8节|大厂高并发缓存架构实战与优化
缓存架构 代码结构 代码详情 功能点: 多级缓存,先查本地缓存,再查Redis,最后才查数据库热点数据重建逻辑使用分布式锁,二次查询更新缓存采用读写锁提升性能采用Redis的发布订阅机制通知所有实例更新本地缓存适用读多…...

基于Springboot+Vue的办公管理系统
角色: 管理员、员工 技术: 后端: SpringBoot, Vue2, MySQL, Mybatis-Plus 前端: Vue2, Element-UI, Axios, Echarts, Vue-Router 核心功能: 该办公管理系统是一个综合性的企业内部管理平台,旨在提升企业运营效率和员工管理水…...

Unity UGUI Button事件流程
场景结构 测试代码 public class TestBtn : MonoBehaviour {void Start(){var btn GetComponent<Button>();btn.onClick.AddListener(OnClick);}private void OnClick(){Debug.Log("666");}}当添加事件时 // 实例化一个ButtonClickedEvent的事件 [Formerl…...