当前位置： 首页 > news >正文

分库分表原则

news 2026/5/14 13:57:24

分库分表原则

在这里插入图片描述

单表数据到达千万级别或者20存储空间

优化已经解决不了问题一

IO瓶颈导致性能问题

拆分策略

在这里插入图片描述

垂直分库

以表为依据，根据业务将不同的表拆分到不同库中，有点像微服务

在这里插入图片描述

垂直分表

以字段为依据，根据字段属性将不同字段拆分到不同表中

拆分规则：把不常用的字段单独放一张表，把大字段text，blob等拆分出来放在附表中
在这里插入图片描述

水平分库

将一个库的数据拆分到多个库中
在这里插入图片描述

分的库合起来的数据才是所有的数据

可以根据id节点取模或者范围路由查找数据

水平分表

将一个表的数据拆分到多个表中，可以在同一个库中，表名要不一样

优化单一表数据量过大产生的性能问题

在这里插入图片描述

分库分表产生的问题

1.分布式事务一致性的问题

一个事务操作数据库提交事务失败了，其它的操作还是成功

2.跨节点关联查询

分完表查询的只是一个表但是数据不完全

3.跨界点分页、排序

还是分表后单表数据不完全的问题

4.主键避重

主键自增，操作多个表存在主键重复问题

在这里插入图片描述

分库分表中间件

使用中间件可以解决这些问题

sharding-sphere

mycat

总结

在这里插入图片描述

相关文章：

分库分表原则

分库分表原则 单表数据到达千万级别或者20存储空间 优化已经解决不了问题一 IO瓶颈导致性能问题 拆分策略 垂直分库 以表为依据，根据业务将不同的表拆分到不同库中，有点像微服务 垂直分表 以字段为依据，根据字段属性将不同字段拆分到不同…...

编程日记 2024/2/2 23:03:56

VUE PC端可拖动悬浮按钮

一、实现效果&#xff1a; 二、FloatButton.vue <template><div><div class"sssss"><div class"callback float" mousedown"down" touchstart"down" mousemove"move" touchmove"move" mous…...

编程日记 2024/2/2 23:01:54

opencv0014 索贝尔（sobel）算子

前面学习的滤波器主要是用来模糊图像&#xff0c;今天一起来了解关于边缘识别的滤波吧&#xff01;嘿嘿 边缘 边缘是像素值发生跃迁的位置&#xff0c;是图像的显著特征之一&#xff0c;在图像特征提取&#xff0c;对象检测&#xff0c;模式识别等方面都有重要的作用。 人眼如…...

编程日记 2024/2/2 23:00:52

Redis简介和数据类型

简介 Redis是完全开源&#xff08;BSD许可&#xff09;的内存数据结构存储&#xff0c;是一个高性能的 key-value 数据库&#xff0c;用作数据库、缓存、消息代理和流式处理引擎。 Redis 提供数据结构&#xff0c;例如字符串、哈希、列表、集、带有范围查询的排序集、位图、超…...

编程日记 2024/2/2 22:55:46

Day06-Linux下目录命令讲解及重要文件讲解

Day06-Linux下目录命令讲解及重要文件讲解 1. Linux目录文件1.1 Linux系统目录结构介绍1.1.1 Linux与Windows目录结构对比 1.2 重要的Linux配置文件介绍1.2.1 /etc系统初始化及设置相关重要文件1.2.2 /usr目录的重要知识介绍------应用程序目录1.2.3 /var目录下的路径知识-----…...

编程日记 2024/2/2 22:54:45

睿尔曼超轻量仿人机械臂—外置按钮盒使用说明

睿尔曼RM系列机械臂的控制方式有很多种&#xff0c;包括&#xff1a;示教器、JSON、API等。在此为大家介绍外置按钮盒的使用方法。 按钮盒接线安装 按钮盒外观如下图所示&#xff0c;有&#xff1a;急停、暂停、开始、继续。四个功能按钮。用户可通过这四个按钮来实现对机械臂运…...

编程日记 2024/2/2 22:53:44

PYTHON蓝桥杯——每日一练（简单题）

题目 求123...n的值。 输入格式 输入包括一个整数n。 输出格式 输出一行&#xff0c;包括一个整数&#xff0c;表示123...n的值。 提示 说明&#xff1a;请注意这里的数据规模。 本题直接的想法是直接使用一个循环来累加&#xff0c;然而&#xff0c;当数据规模很大时&…...

编程日记 2024/2/2 22:51:42

【数据结构 01】栈

一、原理 栈通常从数据结构和内存空间两个角度解释&#xff0c;从数据结构的角度&#xff0c;栈是一种线性结构表&#xff0c;只允许在固定的一端进行插入和删除元素&#xff0c;从内存空间角度&#xff0c;操作系统为函数和变量分配的内存空间通常在栈区&#xff0c;但是无论…...

编程日记 2024/2/2 22:50:41

⑩电子产品拆解分析-家用无线遥控开关433Mhz

⑩电子产品拆解分析-家用无线遥控开关433Mhz 一、功能介绍二、电路分析以及器件作用1、433发射控制端2、433接收应答端三、Get到的点一、功能介绍 ①免布线随意贴，装上就能使用解决单线开关烦恼；②遥控配对简单，无线通讯距离长，信号可穿墙；二、电路分析以及器件作用 1、43…...

编程日记 2024/2/2 22:49:40

java之手动创建spring-boot-3项目

手动创建 基于springboot3 正确配置maven的前提下&#xff0c;创建一个空的项目 复制下面的pom文件&#xff0c;使用maven下载依赖即可 前提是maven配置的没问题 pom.xml文件 <?xml version"1.0" encoding"UTF-8"?> <project xmlns"htt…...

编程日记 2024/2/2 22:48:38

Linux--redhat9创建软件仓库

1.插入光盘&#xff0c;挂载镜像 模拟插入光盘: 点击:虚拟机-可移动设备-CD/DVD 设备状态全选&#xff0c;使用ISO影响文件选择当前版本镜像&#xff0c;点击确认。 2.输入: df -h 可以显示&#xff0c;默认/dev/sr0文件为光盘文件&#xff0c;挂载点为/run/media/root/镜像…...

编程日记 2024/2/2 22:46:37

[力扣 Hot100]Day20 旋转图像

题目描述 给定一个 n n 的二维矩阵 matrix 表示一个图像。请你将图像顺时针旋转 90 度。 你必须在原地旋转图像&#xff0c;这意味着你需要直接修改输入的二维矩阵。请不要 使用另一个矩阵来旋转图像。 出处 思路 旋转时每四个位置为一组进行swap操作&#xff0c;找好对…...

编程日记 2024/2/2 22:43:34

golang网络编程day5

golang网络编程day5 golang cookie实现记住我功能golang cookie实现购物车功能golang cookie CSRF防御应用golang sessiongolang session 用户身份验证应用golang session应用程序中的状态管理golang实现在线人数统计golang session购物车应用golang session用户个性化设置应用…...

编程日记 2024/2/2 22:37:28

Swagger学习使用

swagger升级导致访问ui页面地址不一样 方式一 依赖 <parent><groupId>org.springframework.boot</groupId><artifactId>spring-boot-starter-parent</artifactId><version>1.5.3.RELEASE</version> </parent> <dependen…...

编程日记 2024/2/2 22:33:24

SpringBoot使用poi将word转换为PDF并且展示

1.前言 由于最近做了一个需求&#xff0c;界面上有一个按钮&#xff0c;点击按钮后将一个文件夹中的word文档显示在页面中&#xff0c;并且有一个下拉框可以选择不同的文档&#xff0c;选择文档可以显示该文档。这里我选择使用fr.opensagres.poi.xwpf.converter.pdf-gae依赖包…...

编程日记 2024/2/2 22:30:21

Java多线程--线程间的通信

文章目录 一、线程间的通信&#xff08;1&#xff09;为什么要处理线程间的通信&#xff08;2&#xff09;等待唤醒机制 二、案例&#xff08;1&#xff09;案例1、创建线程2、解决线程安全问题3、等待4、唤醒5、同步监视器 &#xff08;2&#xff09;调用wait和notify需注意的…...

编程日记 2024/2/2 22:28:20

vue + element 页面滚动计算百分比 + 节流函数

html&#xff1a; <el-progress :percentage"scrollValue"></el-progress> js&#xff1a; data() {return {scrollValue: 0,} }, mounted() {window.addEventListener(scroll, this.handleScroll) // 监听页面滚动 }, beforeDestroy() {window.remov…...

编程日记 2024/2/2 22:27:19

【笔记】React Native实战练习(仿网易云游戏网页移动端)

/** * 如果系统看一遍RN相关官方文档&#xff0c;可能很快就忘记了。一味看文档也很枯燥无味&#xff0c; * 于是大概看了关键文档后&#xff0c;想着直接开发一个Demo出来&#xff0c;边学边写&#xff0c;对往后工作 * 开发衔接上能够更顺。这期间肯定会遇到各种各样的问题&a…...

编程日记 2024/2/2 22:23:14

Android SystemUI 介绍

目录 一、什么是SystemUI 二、SystemUI应用源码 三、学习 SystemUI 的核心组件 四、修改状态与导航栏测试 本篇文章&#xff0c;主要科普的是Android SystemUI &#xff0c; 下一篇文章我们将介绍如何把Android SystemUI 应用转成Android Studio 工程项目。 一、什么是Syst…...

编程日记 2024/2/2 22:22:13

2024美赛数学建模A题思路分析 - 资源可用性和性别比例

1 赛题 问题A&#xff1a;资源可用性和性别比例 虽然一些动物物种存在于通常的雄性或雌性性别之外&#xff0c;但大多数物种实质上是雄性或雌性。虽然许多物种在出生时的性别比例为1&#xff1a;1&#xff0c;但其他物种的性别比例并不均匀。这被称为适应性性别比例的变化。例…...

编程日记 2024/2/2 22:21:13

翻转电饼铛生产厂家：高性价比背后的运营策略深度解析

翻转电饼铛生产厂家&#xff1a;高性价比背后的运营策略深度解析“高性价比不是低价竞争&#xff0c;而是让设备价值与企业需求精准匹配”——这是优质翻转电饼铛生产厂家的核心运营逻辑。很多食品企业在选购翻转电饼铛时&#xff0c;既担心高价设备增加成本&#xff0c;又怕低…...

编程新知 2026/5/14 13:06:16

树莓派物联网实战：避开TCP连接OneNet的3个常见坑（鉴权、脚本、心跳）

树莓派物联网实战&#xff1a;避开TCP连接OneNet的3个常见坑&#xff08;鉴权、脚本、心跳&#xff09; 在物联网项目开发中&#xff0c;树莓派作为边缘计算设备与云平台对接是常见需求。OneNet作为国内主流物联网平台&#xff0c;其TCP透传协议因其简单高效备受开发者青睐。然…...

编程新知 2026/5/14 12:16:00

【实战篇 / ZTNA】(7.0) ❀ 从零到一：FortiClient 7.0 企业级部署与策略配置全解析 ❀ FortiGate 防火墙

1. FortiClient 7.0 企业级部署前的关键规划 企业级部署FortiClient 7.0绝非简单的软件安装&#xff0c;而是涉及终端安全架构的整体升级。我在多个金融和制造业客户的实际部署中发现&#xff0c;前期规划不充分往往导致后期策略调整困难。首先需要明确的是&#xff0c;FortiCl…...

编程新知 2026/5/14 12:07:42

智慧图书书脊识别分割数据集labelme格式2100张1类别

数据集格式&#xff1a;labelme格式(不包含mask文件&#xff0c;仅仅包含jpg图片和对应的json文件)图片数量(jpg文件个数)&#xff1a;2100标注数量(json文件个数)&#xff1a;2100标注类别数&#xff1a;1标注类别名称:["book"]每个类别标注的框数&#xff1a;book …...

编程新知 2026/5/14 10:16:09

GPT-5级能力提前落地，ChatGPT 2026新增9大生产级功能，含RAG++动态知识图谱、零样本工作流编排、联邦学习微调接口——错过本轮升级将落后至少18个月

更多请点击&#xff1a; https://intelliparadigm.com 第一章&#xff1a;GPT-5级能力提前落地的技术本质与产业影响 当前&#xff0c;所谓“GPT-5级能力”并非依赖单一巨型模型发布&#xff0c;而是通过模型蒸馏、多专家协同推理&#xff08;MoE&#xff09;、实时知识注入与…...

编程新知 2026/5/14 8:39:34

HDD与SSD存储技术演进：从产业变迁看成本容量比与分层存储实践

1. 硬盘驱动器产业的十字路口&#xff1a;一场迟来的告别十多年前&#xff0c;当我在实验室里第一次把玩一块2.5英寸的机械硬盘&#xff0c;惊叹于它能在方寸之间存储数十GB的数据时&#xff0c;绝不会想到&#xff0c;这个看似坚不可摧的存储基石&#xff0c;其背后的商业帝国…...

编程新知 2026/5/14 7:41:51

Python统一调用多AI模型：python-tgpt库实战指南

1. 项目概述&#xff1a;一个让Python与AI对话更简单的工具 如果你最近在尝试用Python调用各种大语言模型&#xff08;LLM&#xff09;的API&#xff0c;比如OpenAI的GPT、Google的Gemini&#xff0c;或者开源的Llama、Mistral&#xff0c;那你大概率经历过这样的场景&#xf…...

编程新知 2026/5/14 7:21:06

豆包输入法Mac版正式上线，所有人都该试试AI语音输入了。

豆包输入法的Mac版&#xff0c;终于正式上线了。我自己已经内测使用了快1个月了&#xff0c;但是我等这一天&#xff0c;也真的等了好久好久。因为这篇文章我想写很久了&#xff0c;但是一直没写就是因为&#xff0c;对于大众用户来说&#xff0c;之前还一直没有一个比较好的产…...

编程新知 2026/5/14 6:29:00

电动汽车充电站控制系统的Intel处理器实践与优化

1. 电动汽车充电站的技术架构解析电动汽车充电站作为新型能源基础设施的核心节点&#xff0c;其技术实现远比传统加油站复杂。一个完整的充电站系统通常包含三个层级&#xff1a;电力转换模块&#xff08;AC/DC&#xff09;、控制管理系统&#xff08;CMS&#xff09;和云端服务…...

编程新知 2026/5/14 6:16:48

解决ROS的‘Done checking log file disk usage’卡顿：你的~/.bashrc里ROS_IP设对了吗？

解决ROS日志检查卡顿&#xff1a;环境变量配置的深层解析与实战指南 当你在终端启动roscore时&#xff0c;是否遇到过长时间卡在"Done checking log file disk usage"提示的尴尬&#xff1f;这个问题看似简单&#xff0c;背后却隐藏着ROS环境配置的关键细节。本文将带…...

编程新知 2026/5/14 5:18:09