Redis Hash Tag 知识详解
一、Redis Hash Tag概述
Redis Hash Tag是Redis集群环境里用于控制数据分片的关键机制。在Redis集群中,数据依据键的哈希值来确定分片存储位置。Hash Tag能让用户指定键的特定部分作为哈希计算核心部分,进而使相关键存储于同一节点,这对处理特定场景的数据操作极为有利。
二、Hash Tag语法
Hash Tag在键(key)中借助花括号{}
来界定。Redis计算哈希值时,提取花括号内内容当作主要哈希计算依据。例如,对于键{user:1}:profile
与{user:1}:orders
,Redis着重提取user:1
进行哈希计算。只要花括号内内容相同,相关键大概率会被存储在同一节点。
三、应用场景
- 数据关联操作
- 在社交网络应用场景下,如存在
{user:1}:friends
和{user:1}:messages
这样的键。当需要获取用户 1 的好友列表并同时获取其消息时,Hash Tag可确保这两个操作在同一节点执行,有效减少网络开销,规避数据一致性问题。
- 在社交网络应用场景下,如存在
- 批量操作
- 若要删除某个用户的所有相关数据,像
{user:1}:profile
、{user:1}:orders
、{user:1}:addresses
等。借助Hash Tag使这些键存储于同一节点后,能在该节点高效执行批量删除操作,无需在多节点间复杂协调。
- 若要删除某个用户的所有相关数据,像
四、注意事项
- Hash冲突风险
- 过度或不合理使用Hash Tag可能引发哈希冲突。若大量不同键被强制存于同一节点,会致使节点数据分布失衡,对Redis集群的性能与扩展性产生负面影响。
- 键的设计
- 设计键时需谨慎运用Hash Tag,充分考量数据增长与访问模式。伴随数据量持续增长且需多节点负载均衡时,Hash Tag使用需精细规划,以防特定节点负载过重情况出现。
- 优点
- 数据局部性优化
- 在Redis集群中,通过使用Hash Tag,可以将逻辑上相关的数据存储在同一个节点上。例如,对于一个电商系统,有
{product:123}:details
(产品详情)和{product:123}:reviews
(产品评论)这样的键。将它们存储在同一个节点上,当需要同时获取产品详情和评论时,就可以减少跨节点的数据访问。这大大提高了数据访问的效率,因为在同一个节点内的数据访问速度通常比跨节点访问要快得多,避免了网络延迟和节点间通信的开销。
- 在Redis集群中,通过使用Hash Tag,可以将逻辑上相关的数据存储在同一个节点上。例如,对于一个电商系统,有
- 事务操作便利性
- 对于需要在一组相关数据上执行事务操作的场景,Hash Tag是非常有用的。以一个在线游戏为例,玩家的游戏角色数据可能包括
{player:456}:inventory
(玩家物品栏)和{player:456}:stats
(玩家属性)。如果要更新玩家的物品栏和属性,并且要求这些操作是原子性的(要么全部成功,要么全部失败),将这些键存储在同一个节点上可以方便地在该节点上执行事务操作,确保数据的一致性。
- 对于需要在一组相关数据上执行事务操作的场景,Hash Tag是非常有用的。以一个在线游戏为例,玩家的游戏角色数据可能包括
- 批量操作高效性
- 当需要对一组相关的数据进行批量操作时,Hash Tag可以显著提高操作效率。比如,在一个内容管理系统中,要删除某个用户创建的所有文档,文档的键可能是
{user:789}:document1
、{user:789}:document2
等。如果这些键通过Hash Tag存储在同一个节点上,就可以在这个节点上高效地执行批量删除操作,而不是在多个节点之间进行复杂的协调和多次操作。
- 当需要对一组相关的数据进行批量操作时,Hash Tag可以显著提高操作效率。比如,在一个内容管理系统中,要删除某个用户创建的所有文档,文档的键可能是
- 数据局部性优化
- 缺点
- 哈希冲突问题
- 过度使用Hash Tag可能会导致哈希冲突。如果设计不当,大量不同的键可能会因为Hash Tag的使用而被哈希到同一个节点上。例如,如果所有的键都使用相同的Hash Tag格式,如
{commonTag}:key1
、{commonTag}:key2
等,就会导致数据在集群中的分布极不均匀。这可能会使某些节点承受过多的数据负载,而其他节点则闲置,严重影响Redis集群的性能和扩展性。
- 过度使用Hash Tag可能会导致哈希冲突。如果设计不当,大量不同的键可能会因为Hash Tag的使用而被哈希到同一个节点上。例如,如果所有的键都使用相同的Hash Tag格式,如
- 数据迁移复杂性
- 当需要对Redis集群进行数据迁移或者重新分片时,使用了Hash Tag的键可能会增加操作的复杂性。因为这些键的存储位置是根据Hash Tag来确定的,在迁移过程中需要特别注意保持Hash Tag相关键的完整性和一致性。如果在迁移过程中没有正确处理Hash Tag,可能会导致数据丢失或者数据不一致的情况发生。
- 键设计的局限性
- 使用Hash Tag要求在设计键的时候就考虑到数据的关联性和未来的操作模式。这可能会对键的设计造成一定的限制。如果在系统开发后期才考虑引入Hash Tag,可能需要对现有的键结构进行大规模的调整,这会带来额外的开发成本和风险。而且,如果对数据关联性的判断不准确,可能会导致Hash Tag的使用无法达到预期的效果,甚至会对系统性能产生负面影响。
- 哈希冲突问题
相关文章:

Redis Hash Tag 知识详解
一、Redis Hash Tag概述 Redis Hash Tag是Redis集群环境里用于控制数据分片的关键机制。在Redis集群中,数据依据键的哈希值来确定分片存储位置。Hash Tag能让用户指定键的特定部分作为哈希计算核心部分,进而使相关键存储于同一节点,这对处理…...

在 Ubuntu 上安装 Muduo 网络库的详细指南
在 Ubuntu 上安装 Muduo 网络库的详细指南 首先一份好的安装教程是非常重要的 C muduo网络库知识分享01 - Linux平台下muduo网络库源码编译安装-CSDN博客 像这篇文章就和shit一样,安装到2%一定会卡住,如果你不幸用了这个那真是遭老罪了 环境…...

Golang Gin Redis+Mysql 同步查询更新删除操作(我的小GO笔记)
我的需求是在处理几百上千万数据时避免缓存穿透以及缓存击穿情况出现,并且确保数据库和redis同步,为了方便我查询数据操作加了一些条件精准查询和模糊查询以及全字段模糊查询、分页、排序一些小玩意,redis存储是hash表key值也就是数据ID&…...

nodejs搭配express网站开发后端接口设计需要注意事项
nodejs搭配express网站开发后端接口设计需要注意事项!为了回避一些常见的误区,今天和大家汇总一下,最近我遇到的一些错误信息,虽然都是小问题,但是还是需要分享一下,以免大家再次犯错。 1:第一个…...

mysql 基于chunk机制是如何支持运行期间,动态调整buffer pool大小的
mysql 基于chunk机制是如何支持运行期间,动态调整buffer pool大小的 MySQL 的 InnoDB 存储引擎确实支持在运行期间动态调整缓冲池(buffer pool)的大小,但其机制与自定义缓存系统有所不同。InnoDB 通过内部优化和配置参数来实现这…...

智能客户服务:AI与大数据的革新力量
在当今信息技术日新月异的时代,大数据和人工智能(AI)正逐步成为推动各行各业变革的重要力量。尤其是在客户服务领域,大数据与AI的深度融合正引领着客服系统的全面革新。 一、大数据与AI在智能客服系统中的应用 智能客服系统是一种…...

Python日常使用的自动化脚本
Python日常使用的自动化脚本 LinkDescriptionsort_files根据文件扩展名将目录中的文件组织到子目录中remove_empty_folders删除所有空的文件夹rename_files批量重命名目录中的文件scrape_data从网站上抓取数据download_images从网站批量下载图片count_words统计指定文件中的单…...

代理模式(JDK,CGLIB动态代理,AOP切面编程)
代理模式是一种结构型设计模式,它通过一个代理对象作为中间层来控制对目标对象的访问,从而增强或扩展目标对象的功能,同时保持客户端对目标对象的使用方式一致。 代理模式在Java中的应用,例如 1.统一异常处理 2.Mybatis使用代理 3.Spring…...

【Leetcode 热题 100】236. 二叉树的最近公共祖先
问题背景 给定一个二叉树, 找到该树中两个指定节点的最近公共祖先。 最近公共祖先的定义为:对于有根树 T T T 的两个节点 p p p、 q q q,最近公共祖先表示为一个节点 x x x,满足 x x x 是 p p p、 q q q 的祖先且 x x x 的深度尽可能大…...

Go框架比较:goframe、beego、iris和gin
由于工作需要,这些年来也接触了不少的开发框架,Golang的开发框架比较多,不过基本都是Web"框架"为主。这里稍微打了个引号,因为大部分"框架"从设计和功能定位上来讲,充其量都只能算是一个组件&…...

Kafka Streams 在监控场景的应用与实践
作者:来自 vivo 互联网服务器团队- Pang Haiyun 介绍 Kafka Streams 的原理架构,常见配置以及在监控场景的应用。 一、背景 在当今大数据时代,实时数据处理变得越来越重要,而监控数据的实时性和可靠性是监控能力建设最重要的一环…...

数据结构 -- 二叉树
目录 1、二叉树概念及结构 1.1、概念 1.2、特殊的二叉树 1.3、二叉树的性质 1.4、二叉树的存储结构 1.4.1、顺序存储 -- 看截图:二叉树的顺序存储 1.4.2、链式存储 -- 非完全二叉树用这种方式存储 2、二叉树的遍历 2.1、前序、中序以及后序遍历2.2、层序遍…...

redis数据转移
可能有时候因为硬件的原因我们我们需要更换服务器,如果更换服务器的话,那我们redis的数据该怎样转移呢,按照一下步骤即可完成redis数据的转移 1.进入redis客户端 2.使用 bgsave命令进行数据的备份,此命令完成后会在你的redis安装目…...

Ubuntu Netlink 套接字使用介绍
Netlink 套接字 是 Linux 特有的一种 IPC(进程间通信)机制,用于用户态进程和内核模块之间的通信。它可以用来完成路由管理、设备通知、网络状态更新等任务。 1. Netlink 的基本工作原理 Netlink 是一种双向通信机制。Netlink 消息分为请求和…...

spring boot密码加密方式
1. BCrypt 原理 BCrypt是一种专为密码哈希设计的算法,它被广泛认为是安全的选择之一。它不仅是一个单向函数(即只能加密不能解密),而且还内置了盐(salt)生成机制来防止彩虹表攻击。BCrypt的一个重要特点是…...

springboot根据租户id动态指定数据源
代码地址 码云地址springboot根据租户id动态指定数据源: springboot根据租户id指定动态数据源,结合mybatismysql多数源下的事务管理 创建3个数据库和对应的表 sql脚本在下图位置 代码的执行顺序 先设置主数据库的数据源配置目标数据源和默认数据源有了主库的数据源ÿ…...

使用C语言编写UDP循环接收并打印消息的程序
使用C语言编写UDP循环接收并打印消息的程序 前提条件程序概述伪代码C语言实现编译和运行C改进之自由设定端口注意事项在本文中,我们将展示如何使用C语言编写一个简单的UDP服务器程序,该程序将循环接收来自指定端口的UDP消息,并将接收到的消息打印到控制台。我们将使用POSIX套…...

【AI】✈️问答页面搭建-内网穿透公网可访问!
目录 👋前言 👀一、后端改动 🌱二、内网穿透 💞️三、前端改动 🍹四、测试 📫五、章末 👋前言 小伙伴们大家好,上次本地搭建了一个简单的 ai 页面,实现流式输出问答…...

计算机毕业设计原创定制(免费送源码):NodeJS+MVVM+MySQL 樱花在线视频网站
目 录 摘要 1 1 绪论 1 1.1研究背景 1 1.2系统设计思想 1 1.3B/S体系工作原理 1 1.4node.js主要功能 2 1.5论文结构与章节安排 3 2 樱花在线视频网站分析 4 2.1 可行性分析 4 2.2 系统流程分析 4 2.2.1数据增加流程 5 2.3.2数据修改流程 5 2.3.3数据删除流程 5 …...

ECharts热力图-笛卡尔坐标系上的热力图,附视频讲解与代码下载
引言: 热力图(Heatmap)是一种数据可视化技术,它通过颜色的深浅变化来表示数据在不同区域的分布密集程度。在二维平面上,热力图将数据值映射为颜色,通常颜色越深表示数据值越大,颜色越浅表示数…...

【Lua热更新】下篇
上篇链接:【Lua热更新】上篇 文章目录 三、xLua热更新📖1.概述📚︎2.导入xLua框架🔖3. C#调用Lua3.1Lua解析器3.2Lua文件夹的重定向3.3Lua解析器管理器3.4全局变量获取3.5全局函数获取3.6映射到List和Dictionary3.7映射到类3.8映…...

Facebook 与数字社交的未来走向
随着数字技术的飞速发展,社交平台的角色和形式也在不断演变。作为全球最大社交平台之一,Facebook(现Meta)在推动数字社交的进程中扮演了至关重要的角色。然而,随着互联网的去中心化趋势和新技术的崛起,Face…...

微信小程序实现二维码海报保存分享功能
首先在写这个二维码分享海报的时候试过很多方法,比如:canvas中的这个createCanvasContext创建上下文的方法,去网上一搜就是一大堆,但其实这个方法已经被废弃了。Canvas 实例,可通过 SelectorQuery 获取。这是绘制背景图…...

Android 搭建AIDL Client和Server端,双向通信
一、背景 使用AIDL,搭建Client和Server端,实现跨进程通讯,即两个应用之间可以相互通讯。这里列举AIDL实现的方式和需注意的细节,并附上源码。 二、实现方式 2.1 定义AIDL需要的接口,名字为xxx.aidl,Client和Server端 AIDL接口的包名和aidl文件必须一致,…...

深度学习从入门到精通——图像分割实战DeeplabV3
DeeplabV3算法 参数配置关于数据集的配置训练集参数 数据预处理模块DataSet构建模块测试一下数据集去正则化模型加载模块DeepLABV3 参数配置 关于数据集的配置 parser argparse.ArgumentParser()# Datset Optionsparser.add_argument("--data_root", typestr, defa…...

STM32-笔记5-按键点灯(中断方法)
1、复制03-流水灯项目,重命名06-按键点灯(中断法) 在\Drivers\BSP目录下创建一个文件夹exti,在该文件夹下,创建两个文件exti.c和exti.h文件,并且把这两个文件加载到项目中,打开项目工程文件 加载…...

C++ 只出现一次的数字 - 力扣(LeetCode)
点击链接即可查看题目:136. 只出现一次的数字 - 力扣(LeetCode) 一、题目 给你一个 非空 整数数组 nums ,除了某个元素只出现一次以外,其余每个元素均出现两次。找出那个只出现了一次的元素。 你必须设计并实现线性时间…...

C++设计模式:享元模式 (附文字处理系统中的字符对象案例)
什么是享元模式? 享元模式是一个非常实用的结构型设计模式,它的主要目的是节省内存,尤其在需要创建大量相似对象时。 通俗解释: 想象我们在写一本书,每个字母都需要表示出来。如果每个字母都单独用对象表示ÿ…...

android EditText密码自动填充适配
android上的密码(其实不仅仅是密码,可以是用户名也可以是邮箱)自动填充,是需要考虑适配的。 官方文档:https://developer.android.com/identity/autofill/autofill-optimize?hlzh-cn 什么是自动填充 手机厂商一般会…...

LeetCode 刷题笔记
LeetCode 刷题笔记 1. 20241218 (1)2447 std::gcd是C17引入的一个函数,用于计算两个整数的最大公因数。位于<numeric>头文件中。 #include <iostream> #include <numeric> // std::gcdint main() {int a 36;int b 60…...