当前位置: 首页 > news >正文

redis问题归纳

1.redis为什么这么快?

(1)基于内存操作:redis的所有数据都存在内存中,因此所有的运算都是内存级别的,所以性能比较高

(2)数据结构简单:redis的数据结构是专门设计的,而这些简单的数据结构的查找和操作时间大部分复杂度都是O(1),因此性能比较高

(3)多路复用和非阻塞I/O:redis使用I/O多路复用功能来监听多个socket连接客户端,这样可以使用一个线程连接来处理多个请求

(4)避免上下文切换:单线程模型避免了不必要的上下文切换和多线程竞争,省去了多线程切换带来的时间和性能消耗

2.redis主要的性能瓶颈是内存或者网络带宽而非CPU

3.redis多线程的使用

网络硬件的性能提升,redis的性能瓶颈出现在网络IO的处理上,单个主线程处理网络请求的速度跟不上底层网络硬件的速度,所以redis6/7采用多个IO线程来处理网络请求,提高网络请求的并行度。redis的多IO只是用来处理网络请求的,对于读写操作命令redis仍然使用单线程,这样就避免了开发多线程的互斥加锁机制

4.面试问题

(1)海量数据里查询某一固定前缀key

scan命令遍历

(2)生产上如何限制keys */flushdb/flushall等危险命令以防止误删误用

key* 这个指令有致命的弊端,这个指令没有offset、limit参数,是要一次性遍历所有满足条件的key,由于redis是单线程的,其所有操作都是原子的,而keys算法是遍历算法,复杂度是O(n),如果实例中有千万级别以上的key,这个指令就会导致redis服务卡顿,所有读写redis的其它指令都会被延后甚至会超时报错,可能会引起缓存雪崩甚至数据库宕机。

禁用方法,在配置文件中:

rename-command keys ""

rename-command flushdb ""

rename-command flushall ""

(3)memory usage 命令的使用

获取关键字的value所占内存的字节数

(4)bigkey多大算big?如何发现?如何删除?如何处理?

单个key的value小于10KB

对于集合类型的key,建议元素数量小于1000

想查询大于10kb的所有key,--bigkeys参数就无能为力了,需要用到memory usage来计算每个键值的字节数

redis-cli -h 192.168.1.5 -p 6379 -a root --bigkeys

这个命令会扫描(Scan) Redis 中的所有 key ,会对 Redis 的性能有一点影响。并且,这种方式只能找出每种数据结构 top 1 bigkey(占用内存最大的 string 数据类型,包含元素最多的复合数据类型)

(5)bigkey做过调优吗?惰性释放lazyfree了解过吗?

使用lazyfree开启unlink命令和将del删除命令变为异步删除key,防止删除的时候卡顿

(6)生产上redis数据库有1000w记录,如何遍历?key * 可以吗?

不可以

scan遍历

SCAN "0" match k7* count 10

zscan 遍历 zset 集合元素

hscan 遍历 hash 字典的元素

sscan 遍历 set 集合的元素。

5.生成100万redis数据

for((i=1;i<=100*10000;i++)); do echo "set k$i v$i" >> ./redisTest.txt ;done;

cat ./redisTest.txt | redis-cli -h 192.168.1.5 -p 6379 -a root --pipe

相关文章:

redis问题归纳

1.redis为什么这么快&#xff1f; &#xff08;1&#xff09;基于内存操作&#xff1a;redis的所有数据都存在内存中&#xff0c;因此所有的运算都是内存级别的&#xff0c;所以性能比较高 &#xff08;2&#xff09;数据结构简单&#xff1a;redis的数据结构是专门设计的&…...

改进YOLOv8:结合ConvNeXt V2骨干网络!使用MAE共同设计和扩展ConvNet

🗝️YOLOv8实战宝典--星级指南:从入门到精通,您不可错过的技巧   -- 聚焦于YOLO的 最新版本, 对颈部网络改进、添加局部注意力、增加检测头部,实测涨点 💡 深入浅出YOLOv8:我的专业笔记与技术总结   -- YOLOv8轻松上手, 适用技术小白,文章代码齐全,仅需 …...

基于SpringBoot+Vue的新能源汽车充电桩管理系统

基于SpringBootVue的新能源汽车充电桩管理系统的设计与实现~ 开发语言&#xff1a;Java数据库&#xff1a;MySQL技术&#xff1a;SpringBootMyBatisVue工具&#xff1a;IDEA/Ecilpse、Navicat、Maven 系统展示 主页 充电桩详情 管理员界面 摘要 本项目是基于Spring Boot 和 …...

Linux进程通信——消息队列

概念 消息队列&#xff0c;是消息的链接表&#xff0c;存放在内核中。一个消息队列由一个标识符(即队列ID)来标识。 特点 1.消息队列是面向记录的&#xff0c;其中的消息具有特定的格式以及特定的优先级。&#xff08;消息队列是结构体&#xff09; 2.消息队列独立于发送与接…...

ArcGIS教程——ArcGIS工具-按线分割面

功能说明 在ArcGIS数据处理过程中&#xff0c;有时需要沿线把面要素分割开&#xff0c;可以使用高级编辑中的分割面&#xff08;Cut Polygon&#xff09;工具。那么&#xff0c;如果要用线图层分割面图层该怎么办呢&#xff1f;地理遥感生态网平台开发了一个自定义模型工具。它…...

C语言进阶之冒泡排序

✨ 猪巴戒&#xff1a;个人主页✨ 所属专栏&#xff1a;《C语言进阶》 &#x1f388;跟着猪巴戒&#xff0c;一起学习C语言&#x1f388; 目录 前情回顾 1、回调函数 2、冒泡排序 3、库函数qsort cmp&#xff08;sqort中的比较函数&#xff0c;需要我们自定义&#xff09; …...

零代码编程:用ChatGPT将SRT字幕文件批量转为Word文本文档

一个文件夹中有多个srt视频字幕文件&#xff0c;srt文件里面有很多时间轴&#xff1a; 现在想将其批量转为word文档&#xff0c;去掉里面与字符无关的时间轴&#xff0c;在ChatGPT中输入提示词&#xff1a; 你是一个Python编程专家&#xff0c;要完成一个批量将SRT字幕文件转为…...

力扣刷题第二十六天--二叉树

前言 昨天看总决赛&#xff0c;差距太大&#xff0c;看的没意思&#xff0c;真的是一点变通没有啊。难受&#xff0c;没有写题的状态了。大概率是最后一次看比赛了&#xff0c;青春已复过&#xff0c;白日忽相催。召唤师要和生活对线了。英雄们的语音&#xff0c;台词&#xf…...

电脑显示msvcp140_1.dll丢失的5个常用解决方法,亲测可修复

常见于计算机操作中的"msvcp140_1.dll丢失"错误警示&#xff0c;往往令部分应用程序无法正常启动。为了解决这个问题&#xff0c;我们需要采取一些措施来修复丢失的文件。本文将介绍6个解决msvcp140_1.dll丢失的方法&#xff0c;帮助大家快速恢复计算机的正常运行。 …...

hive sql 行列转换 开窗函数 炸裂函数

hive sql 行列转换 开窗函数 炸裂函数 准备原始数据集 学生表 student.csv 讲师表 teacher.csv 课程表 course.csv 分数表 score.csv 员工表 emp.csv 雇员表 employee.csv 电影表 movie.txt 学生表 student.csv 001,彭于晏,1995-05-16,男 002,胡歌,1994-03-20,男 003,周杰伦,…...

Continuity” of stochastic integral wrt Brownian motion

See https://imathworks.com/math/math-continuity-of-stochastic-integral-wrt-brownian-motion/...

设置 wsl 桥接模式

一、环境要求 Win10/Win11 专业版&#xff0c;并已安装 Hyper-V 二、具体步骤 打开 Hyper-V 管理器 创建虚拟交换机 WSL Bridge 修改wsl配置文件 .wslconfig .wslconfig 文件所在路径如下&#xff1a; C:\Users\<UserName>\.wslconfig若 .wslconfig 文件不存在&am…...

[uni-app] uni.showToast 一闪而过问题/设定时间无效/1秒即逝

toast一闪就消失 1.猜测频繁点击导致 – 排除 2.猜测再定时器内导致-- 排除 3.和封装的接口调用一起导致 - 是改原因 深挖发现: axios封装中, 对loading/hindloading进行了配置, 看来是 showToast 与 loading等冲突导致的 wx.hideLoading(Object object) 解决办法 再封装的…...

7、信息打点——资产泄露CMS识别Git监控SVNDS_Store备份

知识点&#xff1a; CMS指纹识别、源码获取方式习惯&配置&特征等获取方式托管资产平台资源搜索监控 如何获取源码 直接识别CMS&#xff0c;根据CMS获取网站源码。CMS直接识别工具&#xff1a;云悉指纹识别平台。识别不了CMS&#xff0c;则通过以下方式获取源码&…...

【运维篇】5.6 Redis server 主从复制配置

文章目录 0. 前言1. 配置方式步骤1: 准备硬件和网络步骤2: 安装Redis步骤3: 配置主服务器的Redis步骤4: 配置从服务器的Redis步骤5: 测试复制功能步骤6: 监控复制状态 2. 参考文档 0. 前言 在Redis运维篇的第5.6章节中&#xff0c;将讨论Redis服务器的主从复制配置。在开始之前…...

Hive语法,函数--学习笔记

1&#xff0c;排序处理 1.1cluster by排序 &#xff0c;在Hive中使用order by排序时是全表扫描&#xff0c;且仅使用一个Reduce完成。 在海量数据待排序查询处理时&#xff0c;可以采用【先分桶再排序】的策略提升效率。此时&#xff0c; 就可以使用cluster by语法。 cluster…...

LeetCode热题100——动态规划

动态规划 1. 爬楼梯2. 杨辉三角3. 打家劫舍 1. 爬楼梯 假设你正在爬楼梯。需要 n 阶你才能到达楼顶。 每次你可以爬 1 或 2 个台阶。你有多少种不同的方法可以爬到楼顶呢&#xff1f; // 题解&#xff1a;每次都有两种选择&#xff0c;1或者2 int climbStairs(int n) {if (n …...

初识树(c语言)

树 定义&#xff1a;树是一种非线性的数据结构&#xff0c;它是由n&#xff08;n>0&#xff09;个有限结点组成一个具有层次关系的集合。 有一个特殊的结点&#xff0c;称为根结点&#xff0c;根节点没有前驱结点 除根节点外&#xff0c;其余结点被分成M(M>0)个互不相交…...

听GPT 讲Rust源代码--src/librustdoc(2)

题图来自 Chromium项目将支持Rust编程语言[1] File: rust/src/librustdoc/html/render/search_index.rs 在Rust源代码中&#xff0c;rust/src/librustdoc/html/render/search_index.rs文件的作用是生成搜索索引&#xff0c;用于在Rust文档页面上进行关键字搜索。该文件实现了一…...

多目标应用:基于非支配排序的蜣螂优化算法NSDBO求解微电网多目标优化调度(MATLAB)

一、微网系统运行优化模型 微电网优化模型介绍&#xff1a; 微电网多目标优化调度模型简介_IT猿手的博客-CSDN博客 二、基于非支配排序的蜣螂优化算法NSDBO 基于非支配排序的蜣螂优化算法NSDBO简介&#xff1a; https://blog.csdn.net/weixin46204734/article/details/128…...

具身智能实践:从AI智能体到机械爪的软硬件协同开发指南

1. 项目概述&#xff1a;从“智能体”到“机械爪”的具身智能实践最近在开源社区里&#xff0c;一个名为“AgentR1/Claw-R1”的项目引起了我的注意。乍一看这个名字&#xff0c;你可能会有点困惑——这到底是关于软件智能体&#xff08;Agent&#xff09;的&#xff0c;还是关于…...

低轨卫星网络中的Web服务韧性优化与辐射感知路由技术

1. 低轨卫星网络中的Web服务韧性挑战近地轨道&#xff08;LEO&#xff09;卫星网络正在重塑全球互联网基础设施格局。SpaceX的Starlink和亚马逊的Project Kuiper等大型星座计划&#xff0c;通过数千颗低轨卫星与地面云计算设施的深度整合&#xff0c;将网络覆盖扩展至偏远地区、…...

Blobity:用Canvas与物理弹簧算法打造液态光标交互体验

1. 项目概述&#xff1a;Blobity&#xff0c;一个为Web注入生命力的光标库在Web设计领域&#xff0c;交互反馈的细腻程度往往决定了一个产品给用户的“质感”。我们见过太多千篇一律的方块阴影、颜色变化&#xff0c;用户的手指&#xff08;或光标&#xff09;与界面元素的每一…...

金融研究AI智能体:文献综述技能部署与高效使用指南

1. 项目概述&#xff1a;为金融研究量身定制的AI智能体文献综述技能如果你是一名金融学、会计学或相关领域的研究生、博士生&#xff0c;甚至是刚开始独立研究的学者&#xff0c;你一定对“文献综述”这四个字又爱又恨。爱的是&#xff0c;一篇好的综述能帮你快速厘清领域脉络&…...

别把 `temperature`、`top-k`、`top-p`、`beam search` 当成四个并列旋钮:很多生成问题,先调错的是“分布”还是“搜索”

别把 temperature、top-k、top-p、beam search 当成四个并列旋钮:很多生成问题,先调错的是“分布”还是“搜索” 很多人一看到模型输出太飘、太保守,第一反应就是一起改 temperature、top-k、top-p,最后再顺手试 beam search。但这四个名字根本不在同一层:前三个改的是下…...

ARM TechCon演讲提案撰写指南:从技术实践到成功分享

1. 从“投稿通知”到“技术分享”&#xff1a;如何打造一份能征服ARM TechCon的演讲提案看到ARM TechCon又在征集演讲提案了&#xff0c;这让我想起了几年前自己第一次尝试投稿时的情景。当时&#xff0c;我像很多工程师一样&#xff0c;手里有个自认为挺酷的项目&#xff0c;觉…...

全新安装 SQL Server 并直接设置数据目录到 E 盘 完整步骤

我给你整理了一份零踩坑、一次性成功的安装流程&#xff0c;跟着做就能彻底解决问题。 一、安装前准备 下载安装包官网下载地址&#xff08;推荐 Developer 免费版&#xff09;&#xff1a;https://www.microsoft.com/zh-cn/sql-server/sql-server-downloads备份数据&#xff…...

ChatGPT-API-Scanner:从密钥泄露扫描工具看代码安全与自动化检测

1. 项目概述与核心思路拆解 最近在安全研究领域&#xff0c;一个名为 ChatGPT-API-Scanner 的工具引起了我的注意。简单来说&#xff0c;这是一个专门用于在 GitHub 上扫描泄露的 OpenAI API 密钥的自动化脚本。它的存在&#xff0c;与其说是一个“攻击工具”&#xff0c;不如…...

1500对工业图像:DeepPCB如何重塑电路板缺陷检测的技术范式

1500对工业图像&#xff1a;DeepPCB如何重塑电路板缺陷检测的技术范式 【免费下载链接】DeepPCB A PCB defect dataset. 项目地址: https://gitcode.com/gh_mirrors/de/DeepPCB 在电子产品制造领域&#xff0c;PCB质量检测一直是制约生产效率和产品可靠性的关键瓶颈。传…...

Geodesic:容器化DevOps工具箱,彻底解决环境不一致难题

1. 项目概述 如果你在团队里搞过基础设施即代码&#xff0c;肯定遇到过这种场景&#xff1a;新来的同事花了两天时间配环境&#xff0c;结果因为本地装的 Terraform 版本和 CI/CD 流水线里的差了 0.1.0&#xff0c;一个 plan 跑出来的结果天差地别&#xff1b;或者你本地的 …...