MySQL索引与性能优化入门:让查询提速的秘密武器【MySQL系列】
本文将深入讲解 MySQL 索引的底层原理、常见类型、使用技巧,并结合 EXPLAIN
工具分析查询执行计划,配合慢查询日志识别瓶颈,逐步建立起系统的 MySQL 查询优化知识体系。适合有一定基础、希望在数据量增长或面试中脱颖而出的开发者阅读。
一、MySQL索引是什么?
1.1 索引的本质
索引是一种数据结构,其目的是提升数据库查询效率。它将表中的某些列值抽取出来,构建一个高效的查找结构(通常是 B+ 树),通过该结构定位数据的存储位置。
换句话说,索引是表数据的“加速器”。没有索引时,MySQL 只能做全表扫描;有索引时,可快速缩小查找范围。
1.2 索引的类比
- 无索引:就像找一本书中某个词,必须逐页翻阅。
- 有索引:像是查字典,有字母目录直接定位页码。
二、MySQL常见索引类型
2.1 主键索引(PRIMARY KEY)
每张表只能有一个主键索引,默认是聚簇索引。
2.2 唯一索引(UNIQUE)
保证字段值唯一,适合如邮箱、身份证号等字段。
2.3 普通索引(INDEX)
最基础的索引,无任何约束,只提升查询性能。
2.4 组合索引(Composite Index)
在多个列上创建的索引,遵循“最左前缀”原则。
2.5 全文索引(FULLTEXT)
用于全文搜索,支持自然语言分析。
2.6 空间索引(SPATIAL)
主要用于 GIS 地理信息类型字段。
三、索引底层原理:B+树结构详解
MySQL 的 InnoDB 存储引擎默认使用 B+ 树作为索引结构。
3.1 B+树特性
- 所有数据都存储在叶子节点。
- 非叶子节点只存储键值(索引项),不存储数据。
- 所有叶子节点通过链表相连,方便区间查询。
3.2 聚簇索引 vs 非聚簇索引
- 聚簇索引:主键索引,数据和索引存储在一起。
- 二级索引(辅助索引):索引结构中存储的是主键的值,需要二次回表查询原始数据。
四、创建索引的最佳实践
4.1 如何选择索引列?
- 用于 WHERE 子句过滤的字段
- 用于 JOIN、ORDER BY、GROUP BY 的字段
- 高基数(distinct 值多)的字段优先考虑
4.2 创建索引示例
-- 普通索引
CREATE INDEX idx_email ON users(email);-- 唯一索引
CREATE UNIQUE INDEX idx_mobile ON users(mobile);-- 组合索引
CREATE INDEX idx_multi ON orders(user_id, status);
4.3 删除索引
DROP INDEX idx_email ON users;
4.4 查看索引
SHOW INDEX FROM users;
五、查询优化利器:EXPLAIN 执行计划
5.1 基本使用
EXPLAIN SELECT * FROM users WHERE email = 'test@example.com';
5.2 关键字段解析
字段 | 含义 |
---|---|
id | 查询序列编号 |
select_type | 查询类型(SIMPLE、PRIMARY、SUBQUERY 等) |
table | 当前访问的表 |
type | 连接类型(ALL、index、range、ref、const、eq_ref、NULL) |
key | 使用的索引 |
rows | 预计扫描的行数 |
Extra | 额外信息,如"Using where"、“Using index” |
5.3 type 字段详解
ALL
:全表扫描(最差)index
:全索引扫描range
:范围扫描,如 BETWEEN、>、<ref
:使用非唯一索引查找const
:唯一索引等值查找,最多一行
5.4 案例:组合索引未命中
CREATE INDEX idx_user_status ON orders(user_id, status);-- 命中索引
SELECT * FROM orders WHERE user_id = 123 AND status = 'paid';-- 未命中组合索引
SELECT * FROM orders WHERE status = 'paid';
六、慢查询日志:发现性能瓶颈
6.1 开启慢查询日志
[mysqld]
slow_query_log = 1
slow_query_log_file = /var/log/mysql/mysql-slow.log
long_query_time = 1
6.2 查询慢日志内容
mysqldumpslow -s r -t 10 /var/log/mysql/mysql-slow.log
6.3 使用 pt-query-digest 分析慢查询
pt-query-digest /var/log/mysql/mysql-slow.log > slow_report.txt
七、常见查询优化技巧
7.1 避免 SELECT *
明确列字段,避免读取不必要数据。
7.2 使用覆盖索引
查询所用字段全部在索引中,避免回表。
-- 创建覆盖索引
CREATE INDEX idx_name_age ON users(name, age);-- 查询使用覆盖索引
SELECT name, age FROM users WHERE name = 'Tom';
7.3 避免在 WHERE 中对索引字段做函数操作
-- 不走索引
SELECT * FROM users WHERE DATE(create_time) = '2024-01-01';-- 优化后
SELECT * FROM users WHERE create_time >= '2024-01-01' AND create_time < '2024-01-02';
7.4 利用 LIMIT + 索引分页优化
-- 分页慢
SELECT * FROM users ORDER BY id LIMIT 10000, 10;-- 延迟关联优化
SELECT * FROM users WHERE id > (SELECT id FROM users ORDER BY id LIMIT 10000, 1) LIMIT 10;
7.5 拆分大查询
将一次性操作百万数据的语句,拆分为批量处理:
DELETE FROM logs WHERE created_at < '2023-01-01' LIMIT 1000;
八、避免这些索引误区
- 所有字段都建索引:浪费空间 + 写入变慢
- 忽视组合索引顺序:需遵循最左前缀原则
- 数据量小也加索引:小表加索引反而可能变慢
- 高频更新字段建索引:更新频繁的字段不建议建索引
九、实践案例:优化百万级用户查询
9.1 初始场景
SELECT * FROM users WHERE email = 'abc@example.com';
- 数据量:用户表 500 万条
- 无索引:执行时间 > 3 秒
9.2 添加索引
CREATE INDEX idx_email ON users(email);
9.3 使用 EXPLAIN 检查
EXPLAIN SELECT * FROM users WHERE email = 'abc@example.com';
-- type: ref, key: idx_email, rows: 1
- 查询时间降低至 < 10ms
本项目适用于后台管理系统、电商用户中心、SaaS 用户模块等场景,特别适合开发者进行实战演练与面试准备。
一、项目背景与需求概述
我们将构建一个基础版的用户管理系统,具备以下业务功能:
- 用户注册与登录
- 用户角色与权限分配
- 日志记录与用户状态追踪
- 多条件用户查询与分页
涉及的核心业务对象包括:用户、角色、权限、日志等。
二、数据库建模与表结构设计
2.1 实体关系图(ER图)简要说明
- 一位用户可以拥有多个角色(多对多)
- 一个角色可以拥有多个权限(多对多)
- 用户与登录日志是一对多关系
2.2 用户表(users
)
CREATE TABLE users (id INT PRIMARY KEY AUTO_INCREMENT,username VARCHAR(50) NOT NULL UNIQUE,password VARCHAR(100) NOT NULL,email VARCHAR(100),status TINYINT DEFAULT 1 COMMENT '0:禁用, 1:启用',created_at DATETIME DEFAULT CURRENT_TIMESTAMP
);
2.3 角色表(roles
)
CREATE TABLE roles (id INT PRIMARY KEY AUTO_INCREMENT,name VARCHAR(50) NOT NULL UNIQUE,description VARCHAR(255)
);
2.4 权限表(permissions
)
CREATE TABLE permissions (id INT PRIMARY KEY AUTO_INCREMENT,name VARCHAR(50) NOT NULL UNIQUE,code VARCHAR(50) NOT NULL UNIQUE COMMENT '用于权限标识,如 user:view'
);
2.5 用户-角色关联表(user_role
)
CREATE TABLE user_role (user_id INT,role_id INT,PRIMARY KEY (user_id, role_id),FOREIGN KEY (user_id) REFERENCES users(id),FOREIGN KEY (role_id) REFERENCES roles(id)
);
2.6 角色-权限关联表(role_permission
)
CREATE TABLE role_permission (role_id INT,permission_id INT,PRIMARY KEY (role_id, permission_id),FOREIGN KEY (role_id) REFERENCES roles(id),FOREIGN KEY (permission_id) REFERENCES permissions(id)
);
2.7 登录日志表(login_logs
)
CREATE TABLE login_logs (id INT PRIMARY KEY AUTO_INCREMENT,user_id INT,ip_address VARCHAR(45),login_time DATETIME DEFAULT CURRENT_TIMESTAMP,FOREIGN KEY (user_id) REFERENCES users(id)
);
三、数据初始化脚本
3.1 插入初始角色与权限
INSERT INTO roles(name, description) VALUES ('admin', '系统管理员'), ('user', '普通用户');INSERT INTO permissions(name, code) VALUES
('查看用户', 'user:view'),
('新增用户', 'user:create'),
('删除用户', 'user:delete');-- 分配权限给角色
INSERT INTO role_permission(role_id, permission_id) VALUES
(1, 1), (1, 2), (1, 3), -- admin 拥有全部权限
(2, 1); -- user 仅能查看用户
3.2 插入测试用户
INSERT INTO users(username, password, email) VALUES
('alice', 'hashed_pwd1', 'alice@example.com'),
('bob', 'hashed_pwd2', 'bob@example.com');-- 分配角色
INSERT INTO user_role(user_id, role_id) VALUES
(1, 1), -- alice 为管理员
(2, 2); -- bob 为普通用户
四、典型查询场景实现
4.1 查询所有启用用户及其角色
SELECT u.id, u.username, r.name AS role
FROM users u
JOIN user_role ur ON u.id = ur.user_id
JOIN roles r ON ur.role_id = r.id
WHERE u.status = 1;
4.2 查询某用户拥有的所有权限
SELECT p.name, p.code
FROM users u
JOIN user_role ur ON u.id = ur.user_id
JOIN role_permission rp ON ur.role_id = rp.role_id
JOIN permissions p ON rp.permission_id = p.id
WHERE u.username = 'alice';
4.3 查询最近7天登录日志
SELECT u.username, l.ip_address, l.login_time
FROM login_logs l
JOIN users u ON l.user_id = u.id
WHERE l.login_time >= NOW() - INTERVAL 7 DAY
ORDER BY l.login_time DESC;
4.4 用户分页查询(带关键字搜索)
SELECT *
FROM users
WHERE username LIKE '%bob%'
ORDER BY created_at DESC
LIMIT 0, 10;
五、事务控制与一致性保障
在角色授权或用户注册等业务流程中,可以使用事务来确保数据完整性。
5.1 注册用户 + 分配默认角色(事务)
START TRANSACTION;INSERT INTO users(username, password, email) VALUES('charlie', 'hashed_pwd3', 'charlie@example.com');
SET @uid = LAST_INSERT_ID();
INSERT INTO user_role(user_id, role_id) VALUES(@uid, 2); -- 默认赋普通角色COMMIT;
5.2 授权失败时回滚
START TRANSACTION;-- 假设某权限不存在导致失败
INSERT INTO role_permission(role_id, permission_id) VALUES(1, 999);-- 失败时回滚
ROLLBACK;
六、索引优化与执行分析
6.1 建议加索引字段
users.username
:用于登录验证、搜索login_logs.user_id
:日志查询user_role.user_id
/role_permission.role_id
:JOIN 优化
CREATE INDEX idx_username ON users(username);
CREATE INDEX idx_user_log ON login_logs(user_id);
6.2 执行计划分析
EXPLAIN SELECT u.username, r.name FROM users u JOIN user_role ur ON u.id = ur.user_id JOIN roles r ON ur.role_id = r.id;
可查看索引是否使用、JOIN 类型、Rows 扫描数量等。
更多推荐【MySQL完整系列】:MySQL数据库从0到拿捏系列
-
MySQL数据库零基础入门教程:从安装配置到数据查询全掌握
关键词:安装、登录、客户端、库表基础、简单查询 -
MySQL数据表操作全指南:建表、修改、删除一步到位
关键词:DDL语句、字段类型、主键/外键、约束、规范设计
聚焦表结构的创建和维护,配合真实业务建表案例(如用户表、订单表)。 -
MySQL增删改查基础教程:熟练掌握DML语句操作
关键词:INSERT、UPDATE、DELETE、SELECT、WHERE、ORDER BY
实战演练日常的数据库操作命令,重点讲解查询语句的条件与排序。 -
MySQL高级查询技巧:分组、聚合、子查询与分页
关键词:GROUP BY、HAVING、聚合函数、LIMIT、子查询
向中级进阶,涵盖常见报表需求与分页列表的查询实现。 -
MySQL多表查询详解:内连接、外连接、自连接通通搞懂
关键词:JOIN、INNER JOIN、LEFT JOIN、UNION、自连接
深度讲解表与表之间如何通过字段建立关联并进行数据整合。 -
MySQL索引与性能优化入门:让查询提速的秘密武器
关键词:索引原理、EXPLAIN、慢查询、查询优化
开启性能优化之路,适合准备应对数据量增长或面试的人。 -
MySQL事务与锁机制详解:确保数据一致性的关键
关键词:事务四大特性、锁类型、死锁案例、隔离级别
涉及电商、支付系统等对数据一致性要求高的业务场景。 -
MySQL项目实战演练:搭建用户管理系统的完整数据库结构
关键词:业务建模、表关系设计、数据初始化、查询场景
以实战带动知识回顾,模拟真实业务项目,整合前面所学内容。
相关文章:
MySQL索引与性能优化入门:让查询提速的秘密武器【MySQL系列】
本文将深入讲解 MySQL 索引的底层原理、常见类型、使用技巧,并结合 EXPLAIN 工具分析查询执行计划,配合慢查询日志识别瓶颈,逐步建立起系统的 MySQL 查询优化知识体系。适合有一定基础、希望在数据量增长或面试中脱颖而出的开发者阅读。 一、…...

进程间通信IV System V 系列(linux)
目录 消息队列 原理 操作 补充概念 信号量 (原子性计数器) 原理 操作 (和共享内存相似) 总结 小知识 消息队列 原理 在内核中建立一个队列,进程可以相互进行通信,通过队列进行IPC,就是进程之间发送带类型的数据块。 操作 接口和共享…...

设计模式——建造者设计模式(创建型)
摘要 本文详细介绍了建造者设计模式,这是一种创建型设计模式,旨在将复杂对象的构建过程与其表示分离,便于创建不同表示。文中阐述了其设计意图,如隐藏创建细节、提升代码可读性和可维护性,并通过构建电脑的示例加以说…...
AWS WebRTC:获取ICE服务地址(part 3):STUN服务和TURN服务的作用
STUN服务和TURN服务的作用: 服务全称作用是否中继流量适用场景STUNSession Traversal Utilities for NAT 协助设备发现自己的公网地址(srflx candidate) ❌ 不中继,仅辅助NAT 穿透成功时使用TURNTraversal Using Relays around N…...

使用Yolov8 训练交通标志数据集:TT100K数据集划分
使用Yolov8 训练交通标志数据集:TT100K数据集划分(一) 一、数据集下载二、划分数据集三、目录放置 一、数据集下载 官方网址:TT100K 数据集对比 源码如下: def classes(filedir):with open(filedir) as f:classes …...

NLP学习路线图(十三):正则表达式
在自然语言处理(NLP)的浩瀚宇宙中,原始文本数据如同未经雕琢的璞玉。而文本预处理,尤其是其中至关重要的正则表达式技术,正是将这块璞玉转化为精美玉器的核心工具集。本文将深入探讨正则表达式在NLP文本预处理中的原理…...
[VMM]现代 CPU 中用于加速多级页表查找的Page‐Table Entry原理
现代 CPU 中用于加速多级页表查找的Page‐Table Entry原理 摘要:以下从背景、结构、查找流程、一致性与性能影响等方面,详细介绍现代 CPU 中用于加速多级页表查找的 Page-Walk Cache(也称 Walker Cache 或 Page‐Table Entry Cache࿰…...

javaweb-maven以及http协议
1.maven坐标: 坐标是资源的唯一标识,通过该坐标可以唯一定位资源位置; 2.坐标的组成: groupId:定义当前项目隶书的组织名称; artifactId:定义当前maven项目名称 version:定义项目版本 3.依…...

华为OD机试真题—— 最少数量线段覆盖/多线段数据压缩(2025A卷:100分)Java/python/JavaScript/C++/C语言/GO六种最佳实现
2025 A卷 100分 题型 本文涵盖详细的问题分析、解题思路、代码实现、代码详解、测试用例以及综合分析; 并提供Java、python、JavaScript、C++、C语言、GO六种语言的最佳实现方式! 2025华为OD真题目录+全流程解析/备考攻略/经验分享 华为OD机试真题《最少数量线段覆盖/多线段数…...

C语言创意编程:用趣味实例玩转基础语法(2)
文章目录 0. 前言1. 📊 动态条形图1.1 程序效果展示1.2 完整代码解析1.3 关键技术详解1.3.1 Unicode字符应用1.3.2 函数封装思想1.3.3 输入处理1.3.4 跨平台考虑 2. 🔤 字母金字塔2.1 程序效果展示2.2 完整代码解析2.3 关键技术详解2.3.1 嵌套循环结构2.…...
关于近期中国移动民用家庭网络,新增的UDP网络限制。
在近期中国移动在全国一定范围普及新的打击 “PCDN、P2P、HY/HY2” 等流氓网络应用的技术方案,并接入在 “省/州” 的边界网关路由上。 根据遥测数据的具体研究分析,且本人曾非常生气的详细质询过,移动城域网管理人员,可以确认该技…...

OpenCV CUDA模块图像处理------颜色空间处理之GPU 上对两张带有 Alpha 通道的图像进行合成操作函数alphaComp()
操作系统:ubuntu22.04 OpenCV版本:OpenCV4.9 IDE:Visual Studio Code 编程语言:C11 算法描述 该函数用于在 GPU 上对两张带有 Alpha 通道的图像进行合成操作。支持多种常见的 Alpha 合成模式(Porter-Duff 合成规则)&…...

OpenWebUI(1)源码学习构建
1. 前言 通过docker镜像拉取安装就不介绍了,官方的命令很多。本节主要撸一撸源码,所以,本地构建 2. 技术框架和启动环境 后端python,前端svelte 环境要求:python > 3.11 ,Node.js > 20.10 3. 源…...

npm error Cannot find module ‘negotiator‘ 的处理
本想运行npm create vuelatest,但提示: npm error code MODULE_NOT_FOUND npm error Cannot find module negotiator npm error Require stack: npm error - C:\Users\Administrator\AppData\Roaming\nvm\v18.16.1\node_modules\npm\node_modules\tuf-j…...

爬虫入门指南-某专利网站的专利数据查询并存储
免责声明 本教程仅用于教育目的,演示如何合法获取公开专利数据。在实际操作前,请务必: 1. 仔细阅读目标网站的robots.txt文件和服务条款 2. 控制请求频率,避免对服务器造成负担 3. 仅获取和使用公开数据 4. 不用于商业用途或…...

SQL(Database Modifications)
目录 Insertion Specifying Attributes in INSERT Adding Default Values(缺省值) Inserting Many Tuples Creating a Table Using the SELECT INTO Statement Deletion Example: Deletion Semantics of Deletion Updates Example: Update Sev…...

【android bluetooth 案例分析 04】【Carplay 详解 2】【Carplay 连接之手机主动连车机】
1. 背景 在【android bluetooth 案例分析 04】【Carplay 详解 1】【CarPlay 在车机侧的蓝牙通信原理与角色划分详解】中我们从整理上介绍了车机中 carplay 相关基础概念。 本节 将详细分析 iphone手机主动 连接 车机carplay 这一过程。 先回顾一下 上一节, carpla…...
maven离线将jar包导入到本地仓库中
想将本地的 jnetpcap.jar 包安装到 Maven 的本地仓库中,以便在项目中通过如下依赖方式引用。 <dependency><groupId>org.jnetpcap</groupId><artifactId>jnetpcap...

【仿muduo库实现并发服务器】实现时间轮定时器
实现时间轮定时器 1.时间轮定时器原理2.项目中实现目的3.实现功能3.1构造定时任务类3.2构造时间轮定时器每秒钟往后移动添加定时任务刷新定时任务取消定时任务 4.完整代码 1.时间轮定时器原理 时间轮定时器的原理类似于时钟,比如现在12点,定一个3点的闹…...
Conda更换镜像源教程:加速Python包下载
Conda更换镜像源教程:加速Python包下载 为什么要更换conda镜像源? Conda作为Python的包管理和环境管理工具,默认使用的是国外镜像源,在国内下载速度往往较慢。通过更换为国内镜像源,可以显著提高包下载速度ÿ…...
蓝桥杯 盗墓分赃2
原题目链接 问题描述 在一个探险者的团队中,小明和小红是合作的盗墓贼。 他们成功盗取了一座古墓中的宝藏,包括 n 件不同重量的珍贵文物和黄金,第 i 件宝藏的重量为 ai。 现在,他们希望公平地分配这些宝藏,使得小明…...
深度解读 Qwen3 大语言模型的关键技术
一、模型架构设计 Qwen3 延续了当前主流大型语言模型的 Transformer 架构,并在此基础上进行了多项增强设计,包含特殊的 Transformer 变体、位置编码机制改进、混合专家 (MoE) 技术引入,以及支持多模态和双重思考模式的新特性。 1. Transformer 基础架构与增强 基础架构:…...
使用 mysqldump 获取 MySQL 表的完整创建 DDL
要获取 MySQL 中某个表的完整创建 DDL(仅结构,不含数据),可以使用 mysqldump 工具的以下命令: 基本命令格式 bash mysqldump -h [主机名] -u [用户名] -p --no-data --single-transaction --routines --triggers --…...

day15 leetcode-hot100-28(链表7)
2. 两数相加 - 力扣(LeetCode) 1.模拟 思路 最核心的一点就是将两个链表模拟为等长,不足的假设为0; (1)设置一个新链表newl来代表相加结果。 (2)链表1与链表2相加,具…...
阿里云云效对接SDK获取流水线制品
参考文档: API旧版 企业令牌 https://help.aliyun.com/zh/yunxiao/developer-reference/api-reference API新版 个人令牌 https://help.aliyun.com/zh/yunxiao/developer-reference/api-reference-standard-proprietary API 个人令牌 https://www.alibabacloud.com…...
Qt 相关 编译流程及交叉编译 部署所遇到的问题总结-持续更新
准备环境和工具 1、主机环境 ubuntu20 2、交叉编译器 gcc-linaro-6.3.1…arm-linux-gnuebihf 3、QT5源码包qt-5.11.3_sources 下载qt-5.11.3的包,自己想办法下载 网盘啥的 都ok,再访问下载目录就可以显示了。 Index of /archive/qt 4、依赖库安装 sudo …...
前端面经 DNSxieyi1
域名解析协议 域名转为目标IP地址 两种方式 1 递归查询 A请求B B一定会告诉IP 2迭代查询 A请求B 如果B无能 ,B会告诉A如何获得改内容,但是B自己不会发出请求1 步骤 1.检查浏览器DNS 2.没有命中继续查询操作系统的DNS缓存 3.查询本地域名服务器&…...
如何通过ES实现SQL风格的查询?
一、Spring项目集成方案 添加依赖(pom.xml): <dependency><groupId>co.elastic.clients</groupId><artifactId>elasticsearch-java</artifactId><version>8.12.0</version> </dependency> <dependency><…...

知识图谱:重构认知的智能革命
在数字经济的浪潮中,知识图谱正悄然掀起一场认知革命。它不仅是技术的迭代,更是人类从“数据依赖”迈向“知识驱动”的里程碑。当谷歌用知识图谱优化搜索引擎、银行用它穿透复杂的金融欺诈网络、医院用它辅助癌症诊疗时,这项技术已悄然渗透到…...
【计算机网络】4网络层①
这篇笔记讲IPv4和IPv6。 为了解决“IP地址耗尽”问题,有三种措施: ①CIDR(延长IPv4使用寿命) ②NAT(延长IPv4使用寿命) ③IPv6(从根本上解决IP地址耗尽问题) IPv6 在考研中考查频率较低,但需掌握基础概念以防冷门考点,重点结合数据报格式和与 IPv4 的对比记忆。…...