一条SQL查询在MySQL里到底是怎么跑完的?这问题看起来基础,但90%的人说到执行器、存储引擎就停了,再往里问优化器怎么选索引、连接池为啥能拖垮数据库、深分页为什么慢,能接上话的没几个。这篇文章我从头到尾拆一遍查询流程,把连接层、解析层、优化层、执行层每一站做了什么、卡点在哪、面试爱问什么,一次讲透。
这不是给你背八股,是沿着一条查询语句的生命周期走一遍,在每个环节停下来看看底层逻辑、常见瓶颈、以及上线后真会踩的坑。适合刚把SQL写熟、想往深处走的后端开发,也适合准备MySQL面试、或者已经在排查慢查询但只会在EXPLAIN里看type和rows的人。
1. 查询流程全景:一条SQL从客户端到磁盘的完整路径
按我惯用的讲法,一条查询语句从发出到拿到结果,要过五站:客户端连接、查询缓存、解析器、优化器、执行器,最后一站才是存储引擎去磁盘捞数据。每一站都有各自的事,也各有各的坑。
code复制客户端
↓ ① 连接管理(连接池、鉴权、线程处理)
↓ ② 查询缓存(8.0已移除,但要知道为什么移除)
↓ ③ 解析器(词法分析 + 语法分析 → 生成语法树)
↓ ④ 优化器(逻辑优化 + 成本优化 → 生成执行计划)
↓ ⑤ 执行器(调用存储引擎接口,逐行获取/返回结果)
存储引擎(InnoDB)—— 缓冲池、索引、磁盘IO
整个流程里,优化器决定怎么查,执行器负责真的查,存储引擎管数据怎么存怎么取。理解这三层各自的边界,你在排查慢查询时思路会清晰很多——慢在哪一站,你就去哪一站找原因。
很多人一上来就钻进索引、B+树、MVCC这些细节,反而忽略了全局。我建议反过来,先把主干走一遍,再在各个节点深挖。这样你在看任何一条慢SQL时,心里有张地图,知道它大概卡在哪个环节。
1.1 连接管理:客户端和MySQL的第一次握手
客户端要发起查询,第一步永远是跟MySQL Server建立连接。这个连接不是直接砸到执行器头上的,而是先经过连接管理模块。
这里有几个关键点:
-
TCP握手 + 鉴权:客户端通过MySQL协议跟服务端建立TCP连接,然后服务端校验用户名、密码、客户端IP、TLS证书(如果开了)。这一步慢,最常见的原因是鉴权插件不匹配,历史版本里 caching_sha2_password 和 mysql_native_password 混用,就会导致类似 "Firedac phys mysql client does not support authentication protocol requested" 这种报错——不是网不通,是客户端不认服务端的认证协议。
-
线程处理:每个连接进来,MySQL会分配一个线程来处理它的请求。线程不是无限创建的,所以有 thread_cache_size 和 max_connections 这两个参数。并发连接太高,线程反复创建销毁,开销巨大;线程缓存设置合理,能显著降低连接延迟。
-
连接池:为什么所有生产环境都在强调要用连接池?因为建连是重操作——TCP握手、鉴权、TLS协商(如果启用),一次可能要几十毫秒。如果每条SQL都现建连接、用完再断,数据库性能会直线下降。连接池做的事情就是复用连接,把建立连接的开销摊薄到多次查询上。
实操里我见过太多因为连接池配置不当拖垮数据库的案例:连接池上限设得比数据库 max_connections 还大,一压测后端先挂;或者连接空闲超时设得比数据库 wait_timeout 长,DBA那边把空闲连接断了,连接池还傻乎乎拿着失效连接去查询,报 "MySQL server has gone away"。所以说连接管理虽然不复杂,但它是整个查询链路里最容易出线上故障的第一站。
1.2 查询缓存为什么被移除
在MySQL 5.7及更早版本里,连接建立后,Server层会先查一下查询缓存——如果这条SQL的文本(精确匹配)之前执行过,而且涉及的表数据没变过,就直接把缓存结果返回,不再走解析、优化、执行。
听起来很美好,但实操中人人都恨它:
- 缓存失效粒度太粗:只要表上任意一行数据发生变更(INSERT/UPDATE/DELETE),这个表的所有查询缓存全部失效。写入频繁的表,缓存命中率几乎为零,反而白白增加维护缓存的开销。
- 缓存比较代价高:查询缓存的key是SQL文本,所以两条SQL差一个空格都不算命中。实际业务里SQL文本千奇百怪,缓存命中率低得可怜。
- 全局竞争:查询缓存有全局锁,每次写入、失效都要抢锁,高并发下反而成为瓶颈。
所以MySQL 8.0干脆把它整个移除了。这个设计决策是MySQL发展史上的一个重要节点——它承认了通用查询缓存在绝大多数OLTP场景下是负优化,及时止损是对的。
面试里经常问“为什么MySQL 8.0移除查询缓存”,不要只答“因为鸡肋”,要答到点子上:锁竞争、粒度、命中率,三者叠加,它在高并发下不仅不加速,反而拖后腿。
需要模型API调用? 免费领10W Token,多模型网关一键接入 Claude、DeepSeek 等主流模型。
2. 解析与预处理:从SQL文本到内部数据结构
连接这关过了,接下来这条SQL就进入了Parser(解析器)。这里是真正意义上的“理解SQL”的环节。
2.1 词法分析和语法分析干了什么
解析器分成两步走:
- 词法分析:把SQL字符串拆成一个个token,比如 SELECT、FROM、table_name、WHERE、id、=、100。
- 语法分析:根据MySQL的语法规则,把这些token组织成一棵抽象语法树(AST)。
这棵语法树就是这条SQL的“结构化表示”。之后优化器处理的,都是这棵树,而不是原始文本。
举例来说,这条SQL:
sql复制SELECT name, age FROM users WHERE id = 100;
经过解析后,大致会变成这样一棵树:
- 查询目标(SELECT):name, age 两个列
- 数据来源(FROM):users 表
- 过滤条件(WHERE):id = 100
语法分析是核心难点。MySQL的语法分析器用的是bison(YACC的GNU版本)来生成C代码。如果SQL语法错误,就在这里报 ERROR 1064 (42000): You have an error in your SQL syntax,这是MySQL里最常见的报错之一。
2.2 解析器和预处理的区别
很多人忽略了解析之后还有一个“预处理”环节(Preprocessor)。这一步做的是语义检查,它会干这几件事:
- 检查表是否存在
- 检查列是否存在
- 检查列名是否有歧义(比如多表JOIN时两个表都有id列,必须用表名或别名限定)
举个实际例子,我在一次SQL Review里看到有人写:
sql复制SELECT order_id, customer_name, total_amount
FROM orders
WHERE order_date >= '2024-01-01'
AND status = 'PAID'
ORDER BY created_at
预处理阶段就会检查 created_at 列在 orders 表里是否存在,如果不存在,直接报 Unknown column 'created_at' in 'order clause',根本不会走到后面。
面试有个经典题问“SQL执行顺序”——很多人背的是 FROM → WHERE → GROUP BY → HAVING → SELECT → ORDER BY → LIMIT。注意:这是逻辑执行顺序,是优化器在生成执行计划时遵循的语义顺序,不是解析器的顺序。解析器只负责把文本变成树,真正排序、过滤的先后来自于优化器的计划。
2.3 解析阶段为什么可能成为瓶颈
日常开发中,解析器很少成为瓶颈,但要注意两种异常情况:
-
超长SQL、动态拼SQL:我曾经接手过一个项目,代码里用循环拼WHERE条件,拼出30KB的SQL。这种SQL每次都要重新解析,解析时间本身就可以达到几十毫秒。用预处理语句(Prepared Statement)可以规避这个问题,因为预处理语句只解析一次,后面只传参数。
-
解析器CPU开销:在高并发短查询场景下,解析器的CPU开销其实占比不低。所以很多团队会把简单的查询下沉到缓存层(比如Redis),本质就是避免每次都走这条完整的解析-优化-执行链路。
再说个实用技巧:MySQL的 general_log 里能看到每一条实际执行的SQL,如果你怀疑解析层有问题,可以用它来看真实的SQL文本,分析是否存在超大SQL、动态SQL导致的解析开销。
3. 查询优化器:决定SQL怎么执行的“大脑”
解析器把SQL变成语法树之后,接下来就是整个查询流程里最核心、最复杂的部分——查询优化器(Optimizer)。它决定这条SQL用哪个索引、以什么顺序JOIN表、是不是需要排序、怎么排序。
3.1 优化器的核心逻辑:基于成本
MySQL的优化器是“基于成本”的优化器(Cost-Based Optimizer,CBO)。它会对每个可能的执行方案估算一个“成本”,然后选成本最低的那个。
成本由两方面因素决定:
- IO成本:从磁盘读取数据页的代价
- CPU成本:在内存里比较、排序、计算等操作的代价
MySQL内部给每个操作定义了成本常数,比如:
- 读取一个数据页的成本:默认约 1.0
- 逐行比较的成本:默认约 0.2
优化器不是真实执行,而是基于统计信息来估算。统计信息来自哪里?来自存储引擎的统计信息,最核心的是表的行数、索引的区分度(cardinality)、数据页数量。
关键点来了:既然是估算,就有可能估错。最常见的就是索引失效问题——统计信息不准,或者优化器认为走全表扫描比走索引更快,结果选了全表扫描。
3.2 优化器怎么决定用哪个索引
看一条SQL怎么走索引,是每个MySQL开发者的基本功。举一个最经典的例子:
sql复制SELECT * FROM orders WHERE user_id = 100 AND status = 'PAID';
假设 orders 表上有两个索引:
- idx_user_id (user_id)
- idx_status (status)
优化器会分别估算两个索引的扫描成本。它会用 user_id 的区分度(不同用户ID的数量占行数的比例)和 status 的区分度来估算各自要扫描多少行。如果 status='PAID' 占表中80%的数据,而 user_id=100 只占0.1%,那优化器显然会选择 idx_user_id,在索引里快速定位到 user_id=100 的所有行,再逐行回表过滤 status。
这里有个面试高频坑:如果两个字段的区分度都不高,优化器可能干脆选择全表扫描。因为回表成本太高——索引定位后每行都要回表读一次完整行,还不如直接扫全表,顺序读更快。
实操中我经常遇到的场景是:同样的SQL,在小数据量的测试库上优化器走了索引,上了生产环境大数据量后却走了全表扫描。原因就是统计信息没更新——做一次 ANALYZE TABLE orders; 往往就能让优化器回到正确轨道上。
3.3 如何看到优化器的真实决策
想知道优化器到底怎么选执行计划,最常用的两个手段:
sql复制EXPLAIN SELECT * FROM orders WHERE user_id = 100 AND status = 'PAID';
sql复制EXPLAIN FORMAT=JSON SELECT * FROM orders WHERE user_id = 100 AND status = 'PAID';
JSON格式能看到更详细的信息,包括成本估算值、是否用了覆盖索引、是否回表等。还有一个调优神器——OPTIMIZER_TRACE,可以完整记录优化器的决策过程:
sql复制SET optimizer_trace = "enabled=on";
SELECT * FROM orders WHERE user_id = 100 AND status = 'PAID';
SELECT * FROM information_schema.OPTIMIZER_TRACE;
SET optimizer_trace = "enabled=off";
查出来的结果里会有 rows_estimation、considered_execution_plans 这些字段,能清楚看到优化器比较了哪些方案、为什么最终选了它。
我强烈建议每个做后端开发的人都学会看OPTIMIZER_TRACE,它比EXPLAIN更进一步,能告诉你优化器“为什么这么选”。排查“明明有索引但没走”的问题时,这招最管用。
3.4 优化器解决不了的问题:你自己要想清楚
优化器很聪明,但有些优化是它做不到的。举几个我实际踩过的坑:
-
深分页问题:LIMIT 100000, 20,优化器只能老老实实扫过前100000行再丢弃,它不会“聪明”到帮你跳过。这类问题要靠优化SQL解决,比如改造成基于上次最大id的游标分页。
-
隐式类型转换:WHERE phone = 13800138000,phone是varchar,等号右边是整数,MySQL会对两边做类型转换,导致索引失效。这不是优化器不聪明,而是类型转换导致无法直接比较。
-
or条件去重问题:热搜词里有“MySQL的or能去重吗”,这个问题问得挺好。or条件在优化器层面往往会被改写成多个条件扫描后合并,如果不加正确处理,确实可能出现重复行。比如 WHERE name='a' OR name='b',如果name上有索引,优化器可能走index_merge,把两个条件的结果合并,但合并时如果没有去重,就会产生重复。实际MySQL会做去重,但代价是要额外排序去重,可能导致原本走索引的查询反而变慢。所以,能拆成 UNION 的尽量拆,或者直接改成 IN。
-
排序优化:ORDER BY 有两种实现:Using index(利用索引有序性,不需要额外排序)和 Using filesort(要额外排序)。filesort不一定真的写磁盘文件——数据量小的时候在内存排序就完事,但本质上它比利用索引顺序扫描要慢。优化器如果发现排序字段和索引匹配,就会用索引来避免排序。
这些问题的共性是什么?就是你要理解优化器的工作方式,主动帮它做决策。不是所有的性能问题都能靠加索引解决,SQL写法本身往往更关键。
4. 执行器与存储引擎的协作:真正的“读数据”环节
优化器生成执行计划后,交给执行器。执行器是一个“翻译官”——它把执行计划翻译成对存储引擎的具体调用,然后通过存储引擎API逐行获取数据,做最后的处理(过滤、排序、聚合等),最终返回给客户端。
4.1 Server层和存储引擎层是怎么分工的
MySQL是两层架构:Server层和存储引擎层。
- Server层负责:连接管理、解析、优化、缓存(如果有)、内置函数、排序、聚合、权限校验。
- 存储引擎层负责:数据的存储、索引管理、事务(ACID)、锁、MVCC、崩溃恢复。
执行器拿到执行计划后,会根据计划调用存储引擎的接口。比如一个最简单的全表扫描计划:
- 执行器调用 InnoDB 的接口,取第一行数据。
- InnoDB 从磁盘/缓冲池读取第一个数据页(如果不在缓冲池里),解析出第一行,返回给执行器。
- 执行器判断这行是否满足 WHERE 条件,满足就放入结果集,不满足就跳过。
- 执行器再调用 InnoDB,取下一行。
- 循环直到 InnoDB 返回“没有更多行了”。
这个过程,执行器是主动方,存储引擎是被动方。两个层之间通过 handler API 交互。这个设计的好处是可插拔存储引擎——你换一个存储引擎,Server层的代码不用动,只要新引擎实现了同样的handler接口就行。
4.2 InnoDB在底层做了什么
存储引擎是真正跟磁盘打交道的地方。对InnoDB来说,有这几个关键机制你得懂:
-
缓冲池(Buffer Pool):InnoDB读数据不是直接读磁盘,而是先看数据页在不在内存(Buffer Pool)里。在就直接返回,不在才去磁盘读,读完把页缓存在Buffer Pool里。这个机制决定了“命中缓存”的查询特别快。
-
索引组织表:InnoDB的表是“索引组织表”,也就是数据本身按照主键索引的顺序存储。叶子节点就是整行数据。二级索引的叶子节点存的是主键值,这就是为什么二级索引查询要“回表”——先用二级索引找到主键,再回主键索引取整行。
-
覆盖索引优化:如果查询的列都在二级索引里,那就不用回表,这种就叫“覆盖索引”。这是SQL优化里性价比最高的一种手段,比如:
sql复制SELECT user_id, order_id FROM orders WHERE status = 'PAID';
如果有个 (status, user_id, order_id) 的联合索引,这条SQL就不需要回表。EXPLAIN结果里 Extra 列会显示 Using index,那就是用上了覆盖索引。
- MVCC和一致性快照:在MVCC机制下,普通SELECT不会加锁,读的是一个快照,所以select不会被阻塞。这也是InnoDB并发读性能好的原因。执行器在读取时,InnoDB会根据当前事务的可见性版本,决定哪一行对当前事务可见。
4.3 执行阶段最容易忽略的细节:排序、分组、limit
很多开发者以为排序是存储引擎干的,其实不然。ORDER BY 里如果被优化器判为 Using filesort,那排序是Server层做的——执行器要把所有符合条件的行取过来,然后排序,再返回前N条。
这里有两个常见性能杀手:
- filesort在数据量大的时候会用到临时文件(磁盘),速度急剧下降。解决思路很直接:让排序字段有索引。
- GROUP BY 如果无法利用索引,也会在Server层做临时表聚合,同样在数据量大时特别慢。
再比如SQL里的 LIMIT 也和你想的不一样。MySQL的 LIMIT 是取到足够多行后就停止吗?如果是走索引等值查询,没问题。但如果是排序后取前N条,它得先排完序才能截断,所以不能指望“查到了N条就立刻返回”。
另外说一下 DISTINCT 和 UNION。UNION 默认会做去重,需要排序或者使用临时表,比较慢。如果你明确知道两个结果集没有重复,用 UNION ALL。
4.4 锁机制在查询流程中的位置
锁不是查询流程里必经的一环,但它会在执行阶段被触发。普通SELECT在InnoDB下是快照读,不加锁。但以下情况会加锁:
- SELECT ... FOR UPDATE:加排他锁,阻止其他事务修改这些行。
- SELECT ... LOCK IN SHARE MODE(8.0.22后推荐用 FOR SHARE):加共享锁。
- 更新和删除操作:天然要加锁。
锁的种类上要区分两种:
- 记录锁(Record Lock):锁住具体某一行。
- 间隙锁(Gap Lock) / Next-Key Lock:锁住一个范围,防止幻读。InnoDB默认隔离级别是可重复读(REPEATABLE READ),用Next-Key Lock解决幻读问题。
有个高频面试题:一条 SELECT ... WHERE id > 100 FOR UPDATE,在可重复读隔离级别下锁的范围是什么?答案是:不仅锁住id>100存在的行,还会锁住它们之间的间隙,防止其他事务插入新的满足条件的行。这就是“当前读”和“快照读”的区别——快照读不锁,当前读要考虑锁范围。
执行器在执行这类语句时,会把这些行级锁直接记录在存储引擎里。这里也是死锁高发的地方。排查死锁,最简单的方法:
sql复制SHOW ENGINE INNODB STATUS;
看 LATEST DETECTED DEADLOCK 部分,里面会给出两个事务持有和等待的锁,以及导致死锁的SQL语句。
5. 从流程反推:连接池、慢查询、索引失效的定位套路
理解了完整流程后,再来反推线上实际问题,你会发现思路完全不一样。
5.1 连接慢:先定位是网络、认证还是线程问题
如果客户端连接MySQL感觉很慢,按流程拆解:
- 如果是TCP握手慢:查网络延迟,ping目标主机。
- 如果是鉴权慢:重点看MySQL认证插件是否匹配。热搜词里的 "Firedac phys mysql client does not support authentication protocol requested" 就是典型——老客户端连8.0默认的caching_sha2_password认证插件会报错。解法:把用户改成mysql_native_password插件,或者升级客户端。
- 如果是线程等待慢:看 Threads_connected 是否接近 max_connections,以及 Threads_running 是否长期偏高。
用一个SQL就能看当前连接状态:
sql复制SHOW STATUS LIKE 'Threads%';
5.2 慢查询排查:沿着流程找瓶颈
一条SQL慢,先看它慢在哪一站。我用一个三层定位法:
第一层,看EXPLAIN:确认用没走对索引。type字段从好到差是 const > eq_ref > ref > range > index > ALL。如果看到 ALL,基本可以断定全表扫描,优先考虑索引问题。
第二层,看执行计划关键列:key是不是预期的索引?rows估算扫了多少行?Extra里有没有Using filesort / Using temporary?这两个出现,通常意味着排序或去重/分组没用上索引,是优化SQL的明确方向。
第三层,如果EXPLAIN没有明显问题但还是很慢,用PROFILING看耗时分布:
sql复制SET profiling = 1;
-- 执行你的SQL
SHOW PROFILES;
SHOW PROFILE FOR QUERY 1;
这个命令会显示整个执行过程中各个阶段耗时,包括 Sending data、Sorting result、Statistics 等,可以快速定位瓶颈在解析、优化、执行哪个环节。
5.3 索引失效的是是非非
热搜词里有个很有意思的:“mysql自动忽略大小写”。这涉及MySQL的排序规则(collation)。在大多数utf8mb4的默认排序规则(utf8mb4_0900_ai_ci)下,比较是大小写不敏感的,所以 WHERE name = 'mysql' 和 WHERE name = 'MySQL' 是等价的。但这跟索引失效没关系,索引照样能走,只是比较逻辑不同。
真正的索引失效通常是这几种:
- 对索引列做了函数操作:WHERE DATE(create_time) = '2024-01-01',create_time上的索引用不上。正确写法是 WHERE create_time >= '2024-01-01 00:00:00' AND create_time < '2024-01-02 00:00:00'。
- 隐式类型转换:前面提过的 varchar 列和数字比较。
- 前导模糊匹配:LIKE '%abc' 用不上索引,LIKE 'abc%' 可以。
- 联合索引不满足最左前缀:联合索引 (a, b, c),但 WHERE b = 1 只有b条件,那么最左边的a没有约束,索引用不上。
还有一个经常被忽略的是 ORDER BY 与索引的匹配。ORDER BY b 在联合索引 (a, b, c) 下,如果WHERE里没有a条件,排序也没法用索引。
5.4 数据同步工具和跨库查询的思考
热搜词里出现的数据同步(datax、kettle、sqoop)和MySQL主从,本质上是MySQL之外的链路,但也和查询流程相关——因为它们会占用连接、产生大查询、干的事情也是要走一遍完整执行流程。
比如用 DataX 或 Sqoop 同步MySQL数据时,如果配置不当,会发起一个全表扫描的大查询,直接拖垮线上的慢查询缓冲池。这类工具的调优,核心是控制查询并发度和分批读取。DataX 的 channel 数、where 条件切分,Sqoop 的 --num-mappers 和 --split-by 字段选择,都直接影响对源库的压力。
主从复制里同样存在类似问题——从库执行和主库一样的更新逻辑,查询流程一样要走,但如果有大事务在主库执行,从库的 SQL 线程可能会卡住。排查“主从延迟”时,一句 SHOW SLAVE STATUS\G 里 Seconds_Behind_Master 只是参考,更关键的是看 SQL_Thread 卡在哪条SQL上。
6. 面试高频考点:从查询流程延伸出来的必问题
结合热搜词里大量面试相关词,我把这条流程上最容易被追问的问题梳理一遍,每个都尽量讲清楚“为什么”,而不是只给结论。
6.1 为什么说 count(*) 在InnoDB里慢,在MyISAM里快
MyISAM把表的总行数单独存了,count() 直接返回,快得离谱。但InnoDB没有存全表行数,因为支持事务和MVCC,不同事务看到的行数不同,所以每次 count() 都要实际扫一遍(走代价最小的索引)来统计。
优化手段是:单独维护计数器表,或者在业务上冗余一个总数字段,通过事务保证一致性。
6.2 varchar 和 int 比较为什么走不上索引
MySQL有一条隐式转换规则:当比较的双方类型不一致时,MySQL会把字符串转换成数字再比较。所以 WHERE varchar_col = 123,实际执行的是 WHERE CAST(varchar_col AS SIGNED) = 123,列上套了函数,索引失效。反过来 WHERE int_col = '123' 是没问题的,MySQL会把字符串转数字,列上没套函数,索引照走。
6.3 mysql中int+5是什么意思
热搜词里的“mysql中int+5”应该是想问这种写法:
sql复制UPDATE products SET stock = stock + 5 WHERE id = 1;
在MySQL里,这个操作是原子的,不需要显式加锁。因为InnoDB的行锁会在更新时自动加上,直到事务提交。如果你先 SELECT 出来,在应用层加5,再 UPDATE 回去,可能遇到并发覆盖问题。所以这种“读改写”场景,直接用一条 UPDATE 语句最安全。
6.4 一条UPDATE语句的查询流程有什么不同
UPDATE和SELECT的流程大体相同,但它有几个额外步骤:
- 定位要更新的行:走索引定位(和SELECT一样要解析、优化、执行)。
- 加锁:对命中的行加排他锁(X锁),如果存在间隙锁,还会锁范围。
- 更新版本链:InnoDB会在这行上记录旧版本信息(用于MVCC和回滚)。
- 写redo log和binlog:保证崩溃恢复和数据复制。
这也是为什么 UPDATE 比 SELECT 慢很多的原因——不仅仅是要写数据,还要写日志、维护版本链。
6.5 存储过程和触发器在流程里的位置
热搜词里多次提到存储过程和触发器。它们在查询流程中的位置是:存储过程是服务端的一组预编译SQL,调用时相当于把多个查询流程串起来。触发器则是在INSERT/UPDATE/DELETE执行时,由数据库自动触发额外的SQL。
这两个东西现在被很多团队禁用,原因不是功能不好,而是:
- 难以调试和排查,线上问题定位成本高。
- 容易造成隐式的性能开销——一条UPDATE可能背后触发多个存储过程逻辑,DBA排查慢查询时根本看不到触发器的存在。
- 不利于代码版本管理和团队协作。
我的建议:存储过程能用应用代码代替就尽量不用;触发器尽量不用,除非是历史系统没法动。
7. 实操经验总结:我自己调优时的一些习惯
这一部分没有严谨的分章结构,就是几个日常工作中沉淀下来的习惯和技巧,分享给你参考。
第一,排查慢SQL时,永远先看EXPLAIN,再看表数据量和索引区分度,别上来就加索引。很多慢SQL是业务逻辑导致的——比如多表JOIN时驱动表选错,优化器估算不准确;比如大范围IN查询导致索引失效。先理解执行计划,再动手,不然加再多索引也是做无用功。
第二,一定要掌握 EXPLAIN ANALYZE 这个工具。MySQL 8.0.18及以后版本支持 EXPLAIN ANALYZE,它不只是估算,而是真实执行SQL,并返回每步的实际行数和实际耗时。这比传统EXPLAIN的估算值可靠太多。我调试一个复杂JOIN慢查询时,用 EXPLAIN ANALYZE 一眼就看出是哪个表在驱动阶段多扫了10倍行数,省了至少一下午查资料的时间。
第三,连接池大小不是越大越好。从整个查询流程来看,连接池太大意味着大量连接都在抢CPU和磁盘IO,线程切换开销巨大。PostgreSQL圈子里有个经典公式:连接数 = 核数 × 2 + 有效磁盘数,MySQL虽然不完全一样,但思路是对的。核心数8的机器,连接池搞200个连接,性能大概率不如20个。
第四,排序场景要学会看 filesort 和临时表。ORDER BY、GROUP BY、DISTINCT 用上了临时表,说明在Server层有额外的内存/磁盘开销。能用索引排序的,尽量让排序字段和索引匹配。一次线上慢查询,就是 GROUP BY 一个没有索引的字段,导致每秒钟要创建几万个临时表,直接把实例CPU打满。后来加了联合索引,临时表消失,查询从7秒降到50毫秒。
第五,也是我最想强调的:SQL优化的大方向是减少回表、避免filesort、控制扫描行数。这三点看懂了,90%的查询性能问题都能自己定位。剩下的10%是硬骨头——大事务、锁竞争、磁盘IO瓶颈、网络延迟——这些都要回到整个链路里去定位,没法靠单个技巧解决。
最后说一句掏心窝的话:MySQL查询流程这东西,看一遍懂个大概不难,但真正要能凭它去解决线上问题,必须反复实操。你拿到一条慢SQL,沿着“连接→缓存→解析→优化→执行→存储”这条路走一遍,每一站都问问自己“这里可能出什么问题”,坚持几个月,你对数据库的理解会比背一百道面试题都扎实。
