Redis热点知识速览(redis的数据结构、高性能、持久化、主从复制、集群、缓存淘汰策略、事务、Pub/Sub、锁机制、常见问题等)
Redis是一个开源的、使用内存作为存储的、支持数据结构丰富的NoSQL数据库。它的高性能、灵活性和简单易用使其在许多场景下成为首选的缓存解决方案。以下是Redis的常见和热点知识总结。
数据结构
Redis支持五种基本数据结构:
- String:字符串是Redis中最基本的数据类型,用于存储简单的键值对。
- List:列表是有序的字符串集合,支持从两端插入、删除和查找元素。
- Set:集合是无序的、不重复的字符串集合,支持快速添加、删除和查找元素。
- Hash:散列表是键值对的集合,类似于Java中的Map。
- Zset:有序集合与普通集合类似,但每个元素都有一个分数,支持按照分数排序。
Redis的高性能
Redis之所以快,是因为它使用了以下几种技术:
- 内存存储:所有数据都存储在内存中,读写速度非常快。
- 单线程模型:Redis使用单线程来处理所有客户端请求,避免了线程切换的开销。
- 非阻塞I/O:Redis使用epoll等机制来实现非阻塞I/O,能够在单线程下处理多个客户端连接。
- 数据持久化:Redis提供了两种数据持久化方式:RDB和AOF,确保数据不会因服务器重启而丢失。
Redis的持久化
RDB持久化
RDB持久化是将当前内存中的数据集快照,保存到磁盘文件中。可以设置定时保存策略,也可以手动触发保存操作。
AOF持久化
AOF持久化是将每个写操作都记录到日志文件中,类似于MySQL的binlog。当服务器重启时,会根据日志文件中的命令来重建数据集。
Redis的主从复制
主从复制是Redis的一种高可用性机制,可以将数据从一个主服务器同步到多个从服务器。这样即使主服务器宕机,仍然可以通过从服务器继续提供服务。
全量复制
全量复制是指在初次建立主从关系时,将主服务器的所有数据复制到从服务器上。
增量复制
增量复制是指在全量复制完成后,主服务器只会将新写入的数据同步到从服务器上。
Redis的集群
Redis Cluster是官方提供的去中心化的集群解决方案,支持水平扩展和高可用性。它将数据分散存储在多个节点上,每个节点都可以处理一部分键空间的读写请求。
哈希槽
Redis Cluster使用哈希槽来分配数据到不同的节点上。每个键都被分配到一个固定的哈希槽中。
故障转移
当集群中的某个节点出现故障时,集群会自动将该节点的哈希槽重新分配到其他节点上,保证服务不中断。
Redis的缓存淘汰策略
当Redis内存用完时,需要从现有的数据中选择一些数据进行淘汰。Redis提供了以下几种缓存淘汰策略:
- noeviction:不进行淘汰,直到内存不足时才报错。
- allkeys-lru:根据所有键的LRU算法淘汰最不经常使用的键。
- allkeys-random:随机选择一个键进行淘汰。
- volatile-lru:根据设置了过期时间的键的LRU算法淘汰最不经常使用的键。
- volatile-random:随机选择一个设置了过期时间的键进行淘汰。
- volatile-ttl:淘汰即将过期的键。
- allkeys-lfuo:LFU算法淘汰最不经常使用的键。
Redis的事务
Redis的事务(Transaction)是一系列命令的集合,它们要么全部执行,要么都不执行。Redis的事务保证了操作的原子性。
事务的特点
- 单独序列化:事务中的命令会被单独序列化,保证原子性。
- 不支持回滚:一旦事务执行失败,无法回滚到事务开始前的状态。
Redis的Pub/Sub
Redis的发布订阅(Pub/Sub)功能允许消息的发送者(发布者)和接收者(订阅者)之间进行异步通信。发布者可以向一个或多个频道发送消息,而订阅者可以订阅一个或多个频道来接收消息。
Pub/Sub的优点
- 实时性:消息可以实时地从发布者传递到订阅者。
- 解耦:发布者和订阅者之间没有直接的依赖关系。
Redis的锁机制
Redis提供了两种锁机制:SETNX和RedLock。
SETNX
SETNX命令可以用来实现分布式锁。它会在设置键的同时检查该键是否存在,如果不存在则设置成功并获取锁。
RedLock
RedLock是一种高可用的分布式锁机制,使用了多个Redis实例来避免单点故障。
Redis的管道和批处理
管道
管道(Pipeline)可以将多个命令打包成一个请求发送到服务器,减少了网络交互的次数,提高了执行效率。
批处理
批处理(Batch)与管道类似,但它不保证命令的原子性。批处理主要用于非原子性操作的性能优化。
Redis的配置和优化
内存管理
- maxmemory:设置Redis的最大内存使用量。
- maxmemory-policy:设置缓存淘汰策略。
网络优化
- tcp-keepalive:设置TCP连接的保活时间,避免长时间空闲的连接被关闭。
- timeout:设置客户端与服务器之间的超时时间。
数据压缩
- compression:开启数据压缩功能,减少内存和网络带宽的使用。
Redis的常见问题
Redis的并发问题
由于Redis是单线程模型,高并发场景下可能会出现性能瓶颈。解决方法包括使用管道、批处理和分片等。
Redis的内存问题
Redis的内存使用量可能会很大,需要注意内存的管理和优化。可以使用RDB或AOF持久化、设置合理的缓存淘汰策略等来避免内存问题。
Redis的key设计问题
Redis的key设计对性能和可维护性有很大影响。应该避免使用过长的key,使用合理的命名规则和前缀,尽量避免key冲突等。
总结
Redis是一款功能强大、性能卓越的NoSQL数据库,广泛应用于缓存、消息队列、会话管理等场景。了解它的数据结构、持久化、复制、集群、事务、锁机制等特性以及相应的优化方法,可以帮助我们更好地使用Redis,提高系统的性能和可靠性。同时,也需要注意一些常见问题,例如并发问题、内存问题和key设计问题,并采取相应的解决措施。
相关文章:
Redis热点知识速览(redis的数据结构、高性能、持久化、主从复制、集群、缓存淘汰策略、事务、Pub/Sub、锁机制、常见问题等)
Redis是一个开源的、使用内存作为存储的、支持数据结构丰富的NoSQL数据库。它的高性能、灵活性和简单易用使其在许多场景下成为首选的缓存解决方案。以下是Redis的常见和热点知识总结。 数据结构 Redis支持五种基本数据结构: String:字符串是Redis中最…...
【C++浅析】lambda表达式:基本结构 使用示例
基本结构 [捕获列表](参数列表) -> 返回类型 { // 函数体 } 捕获列表 ([ ]): 用于指定外部变量的捕获方式。可以: 通过值捕获:[x]通过引用捕获:[&x]捕获所有变量通过值:[]捕获所有变量通过引用:[&]自…...
利用Redis获取权限的多种方式
更多实战内容,可前往无问社区查看http://www.wwlib.cn/index.php/artread/artid/10333.html Redis是我们在实战中经常接触到的一款数据库,因其在前期打点中被利用后可直接影响服务器安全所以在攻防过程中也备受红队关注,在本文中会重点分享一…...
LeetCode - LCR 146- 螺旋遍历二维数组
LCR 146题 题目描述: 给定一个二维数组 array,请返回「螺旋遍历」该数组的结果。 螺旋遍历:从左上角开始,按照 向右、向下、向左、向上 的顺序 依次 提取元素,然后再进入内部一层重复相同的步骤,直到提取完…...
如何获取Bing站长工具API密钥
Bing站长工具近期悄然上线了网站URL推送功能,似乎有意跟随百度的步伐。这个新功能允许站长通过API向Bing提交链接数据,当然也可以通过Bing站长工具手动提交。 本文将详细介绍如何通过Bing站长工具生成用于网站链接推送的API密钥。 首先,访问…...
NC 调整数组顺序使奇数位于偶数前面(一)
系列文章目录 文章目录 系列文章目录前言 前言 前些天发现了一个巨牛的人工智能学习网站,通俗易懂,风趣幽默,忍不住分享一下给大家。点击跳转到网站,这篇文章男女通用,看懂了就去分享给你的码吧。 描述 输入一个长度…...
Unity异步把图片数据从显存下载到内存(GPU->CPU)
Unity异步把图片数据从显存下载到内存(GPU->CPU) 1.c#核心代码 using System.Collections; using System.Collections.Generic; using Unity.Collections; using UnityEditor.PackageManager.Requests; using UnityEngine; using UnityEngine.Rende…...
【MySQL】C/C++连接MySQL客户端,MySQL函数接口认知,图形化界面进行连接
【MySQL】C/C引入MySQL客户端 安装mysqlclient库mysql接口介绍初始化mysql_init链接数据库mysql_real_connect下发mysql命令mysql_query获取出错信息mysql_error获取执行结果mysql_store_result获取结果行数mysql_num_rows获取结果列数mysql_num_fields判断结果列数mysql_field…...
Wireshark分析工具
简单用例 首先打开软件,左上角点文件,选中要分析的文件列表。 导入用tcpdump抓的包后进行分析,这里要输入过滤条件,对网络包进行一定的过滤处理。(这里172网段是阿里云的地址,用自己写的python2脚本对阿里…...
linux网络配置脚本
通过脚本,设置静态ip以及主机名 因为企业9的网络配置文件和企业7的不一样所以,我们以rhel9和rhel7为例 rhel7/centos7/openeuler #!/bin/bash cat > /etc/sysconfig/network-scripts/ifcfg-$1 << EOF DEVICE$1 ONBOOTyes BOOTPROTOnone IPAD…...
IT管理:我与IT的故事4
首先,宣布一个“坏消息”。最近Herry童鞋的办公邮箱似乎有些“抽抽”了,所以邮件出现了延迟、拒收、被拒收、甚至是石沉大海的现象。为了能够更好的和大家进行沟通,大家如果发邮件到我办公邮箱的时候,若不嫌麻烦,可以抄…...
短链接系统设计方案
背景 需要设计一个短链接系统,主要功能主要有如下几点: ToB: 输入一个长链接,转换成短链接。这个短链接有时效性,可以设定指定过期时间。这个系统的每天会生成千万级别的短链接。数据具备可分析功能。 ToC…...
Cisco交换机SSH使用RSA公钥免密登录(IOS与Nexus,服务器以RHEL8为例)
目录 需求实验步骤0. 实验环境1. Linux2. CiscoIOS基础设置保存密钥登陆测试 3. CiscoNexus基础配置保存密钥登陆测试 需求 在实际工作中,常会遇到自动化的需求,那么在自动采集、配置等对网络设备的自动化需求中,不可避免的会遇到需要登录-&…...
QT判断操作系统类型和CPU架构
一、判断操作系统类型 1.在.pro文件中判断 macx { # mac only } unix:!macx{ # linux only } win32 { # windows only }2.在代码中判断 可以包含QGlobal头文件,判断预定义宏 #include <QtGlobal> ... #ifdef Q_OS_MAC // mac #endif#ifdef Q_OS_LINUX // …...
input[type=checkbox]勾选框自定义样式
效果图: <template> <input class"rule-checkbox" type"checkbox" checked v-model"isChecked" /> </template><script setup lang"ts"> import { ref } from vue; const isChecked ref(); </…...
鼠害监测系统:科技守护农业安全
在农业生产中,鼠害一直是威胁作物安全、影响产量的重要因素。然而,随着科技的飞速发展,鼠害监测系统正逐步成为现代农业防治鼠害的重要利器。 鼠害监测系统巧妙融合了现代光电、数控及物联网技术,实现了诱鼠、投喂鼠药、鼠情监测及…...
Ubuntu20.04如何安装配置JDK
资源准备 官方下载地址(根据自己的系统版本选择不同版本进行下载即可):Java Downloads | Oracle 如无特殊需要可直接移步至下方JDK1.8安装包 https://download.csdn.net/download/qq_43439214/89646731 安装步骤 创建Java目录 sudo mkdir …...
Python3网络爬虫开发实战(9)代理的使用 (需补充代理池的构建)
文章目录 一、代理的设置1.1 urllib 的代理设置1.2 requests 的代理设置1.3 httpx 的代理设置1.4 aiohttp 的代理设置1.4 Selenium 的代理设置1.6 Playwright 的代理设置 二、代理池的构建和维护2.1 代理池的模块构成2.2 代理池的实现 网站为了避免爬虫采集数据可能会采取一些反…...
人际关系中的价值交换原理,在人类社会的复杂网络中,人际关系犹如一根根交织的丝线,将我们彼此紧密相连
人际关系中的价值交换原理,在人类社会的复杂网络中,人际关系犹如一根根交织的丝线,将我们彼此紧密相连。无论是亲情、友情还是爱情,这些关系在表面的情感纽带之下,实则都涉及到价值交换的原理。这种价值交换并非仅仅局限于物质层面,而是涵盖了情感、心理等人类所需的一切…...
西安电子科技大学萌新智慧指南(校区篇)
本次是西安电子科技大学南校区【本部南校区】 刚刚进入校园 相信大家对校园环境还很陌生 接下来就用一张地图 带大家迅速了解一下南校区的构造 宿舍 学生宿舍主要分为三部分 竹园公寓 1-4 海棠公寓 5-10 丁香公寓 11-15 研究生们主要居住在 海棠续建5、丁香14、丁香1…...
设计模式和设计原则回顾
设计模式和设计原则回顾 23种设计模式是设计原则的完美体现,设计原则设计原则是设计模式的理论基石, 设计模式 在经典的设计模式分类中(如《设计模式:可复用面向对象软件的基础》一书中),总共有23种设计模式,分为三大类: 一、创建型模式(5种) 1. 单例模式(Sing…...
黑马Mybatis
Mybatis 表现层:页面展示 业务层:逻辑处理 持久层:持久数据化保存 在这里插入图片描述 Mybatis快速入门 
概述 在 Swift 开发语言中,各位秃头小码农们可以充分利用语法本身所带来的便利去劈荆斩棘。我们还可以恣意利用泛型、协议关联类型和协议扩展来进一步简化和优化我们复杂的代码需求。 不过,在涉及到多个子类派生于基类进行多态模拟的场景下,…...
【位运算】消失的两个数字(hard)
消失的两个数字(hard) 题⽬描述:解法(位运算):Java 算法代码:更简便代码 题⽬链接:⾯试题 17.19. 消失的两个数字 题⽬描述: 给定⼀个数组,包含从 1 到 N 所有…...
使用分级同态加密防御梯度泄漏
抽象 联邦学习 (FL) 支持跨分布式客户端进行协作模型训练,而无需共享原始数据,这使其成为在互联和自动驾驶汽车 (CAV) 等领域保护隐私的机器学习的一种很有前途的方法。然而,最近的研究表明&…...
最新SpringBoot+SpringCloud+Nacos微服务框架分享
文章目录 前言一、服务规划二、架构核心1.cloud的pom2.gateway的异常handler3.gateway的filter4、admin的pom5、admin的登录核心 三、code-helper分享总结 前言 最近有个活蛮赶的,根据Excel列的需求预估的工时直接打骨折,不要问我为什么,主要…...
Keil 中设置 STM32 Flash 和 RAM 地址详解
文章目录 Keil 中设置 STM32 Flash 和 RAM 地址详解一、Flash 和 RAM 配置界面(Target 选项卡)1. IROM1(用于配置 Flash)2. IRAM1(用于配置 RAM)二、链接器设置界面(Linker 选项卡)1. 勾选“Use Memory Layout from Target Dialog”2. 查看链接器参数(如果没有勾选上面…...
Neo4j 集群管理:原理、技术与最佳实践深度解析
Neo4j 的集群技术是其企业级高可用性、可扩展性和容错能力的核心。通过深入分析官方文档,本文将系统阐述其集群管理的核心原理、关键技术、实用技巧和行业最佳实践。 Neo4j 的 Causal Clustering 架构提供了一个强大而灵活的基石,用于构建高可用、可扩展且一致的图数据库服务…...
【SSH疑难排查】轻松解决新版OpenSSH连接旧服务器的“no matching...“系列算法协商失败问题
【SSH疑难排查】轻松解决新版OpenSSH连接旧服务器的"no matching..."系列算法协商失败问题 摘要: 近期,在使用较新版本的OpenSSH客户端连接老旧SSH服务器时,会遇到 "no matching key exchange method found", "n…...
Vite中定义@软链接
在webpack中可以直接通过符号表示src路径,但是vite中默认不可以。 如何实现: vite中提供了resolve.alias:通过别名在指向一个具体的路径 在vite.config.js中 import { join } from pathexport default defineConfig({plugins: [vue()],//…...
