你是否每天都在写 SQL却从未想过它在 MySQL 内部是如何一步步执行的今天我们就通过这张经典的 MySQL 执行流程图带你拆解一条 SQL 从客户端发送到结果返回的完整过程搞懂这个过程你就能轻松理解 SQL 优化、事务原理、锁机制等核心知识点。一、先搞懂 MySQL 的整体架构MySQL 的架构可以清晰地分为两层Server 层和存储引擎层这也是 MySQL 最核心的设计思想 ——插件式存储引擎。Server 层包含连接器、查询缓存、分析器、优化器、执行器等核心组件负责处理所有跨引擎的通用逻辑比如 SQL 解析、优化、权限检查、结果缓存等。存储引擎层负责数据的存储和读取提供读写接口。常见的存储引擎有 InnoDBMySQL 5.5 默认、MyISAM、Memory 等不同的存储引擎有不同的特性比如 InnoDB 支持事务和行锁MyISAM 不支持。简单来说Server 层负责 “怎么干”存储引擎层负责 “真正干”。二、一条 SQL 的完整执行流程我们以最常见的查询语句为例SELECT user_name, user_salary FROM t_user WHERE user_id 100;看看它在 MySQL 内部经历了怎样的旅程。第一步建立连接 —— 连接器当你在客户端点击 “连接” 按钮时第一个打交道的就是连接器。连接器的核心工作有三件建立 TCP 连接客户端与 MySQL 服务器通过 3 次握手建立网络连接。身份验证验证你输入的用户名和密码是否正确。如果错误会返回经典的Access denied for user错误连接直接终止。权限管理验证通过后连接器会从权限表中查询该用户拥有的所有权限。注意连接建立后即使管理员修改了该用户的权限也不会影响当前连接必须等下次重新连接才会生效。长连接 vs 短连接图中特别提到了长连接和短连接的区别这也是生产环境中非常重要的知识点长连接客户端有需求时一直使用同一个连接。优点只需要建立一次连接减少连接建立的开销。缺点长时间连接会占用大量内存因为 MySQL 在执行过程中使用的临时内存会保存在连接对象中直到连接断开才会释放。短连接每次执行完很少的几次查询就断开连接下次查询再重新建立。优点不会长时间占用内存。缺点频繁建立连接会增加服务器开销。最佳实践使用长连接但定期断开空闲时间过长的连接MySQL 5.7 及以上版本可以使用mysql_reset_connection命令重置连接释放内存而不需要断开重连。第二步查询缓存MySQL 8.0 已彻底移除连接建立后MySQL 拿到 SQL 语句首先会去查询缓存中查找是否有对应的结果。缓存的 key 是完整的 SQL 语句value 是查询结果集。如果在缓存中找到了完全匹配的 SQL就会直接将结果返回给客户端跳过后面所有步骤速度非常快。如果缓存中没有找到就会继续执行后面的流程执行完成后会将结果存入查询缓存。为什么 MySQL 8.0 要移除查询缓存查询缓存看起来很美好但实际上它的弊远大于利缓存失效太频繁只要对一个表执行了任何更新操作INSERT、UPDATE、DELETE这个表的所有查询缓存都会被清空。对于写多读少的业务场景缓存几乎没有任何作用反而会增加缓存维护的开销。因此MySQL 从 8.0 版本开始直接删除了查询缓存功能以后再也不用纠结要不要开启缓存了。第三步解析 SQL—— 分析器如果缓存没有命中MySQL 就会开始真正处理这条 SQL第一个环节就是分析器。分析器的工作分为两步词法分析从 SQL 语句中提取关键字。比如上面的例子分析器会识别出SELECT是查询关键字t_user是表名user_name、user_salary是列名user_id 100是查询条件。语法分析根据 MySQL 的语法规则判断 SQL 语句是否合法。如果你的 SQL 写错了比如把FROM写成了FORM少了分号或者关键字用错了分析器会返回经典的You have an error in your SQL syntax错误错误信息通常会提示你在哪个位置附近出错。分析器执行完成后会生成一棵语法树供后面的优化器使用。第四步生成执行计划 —— 优化器拿到语法树后MySQL 还不能直接执行它需要通过优化器生成一个最优的执行方案。优化器的核心工作就是在多个可能的执行方案中选择一个效率最高的。比如当表中有多个索引时优化器会判断使用哪个索引查询速度最快。当进行多表连接查询时优化器会决定先查询哪个表再连接哪个表通常是先查小表再查大表。举个例子SELECT * FROM t_user WHERE name 张三 AND age 25;如果name列和age列都有索引优化器会比较两个索引的过滤性如果叫 “张三” 的人只有 1 个而 25 岁的人有 1000 个那么优化器会选择使用name索引因为它能更快地定位到目标数据。需要注意的是优化器的选择并不总是正确的有时候它会选错索引这时候就需要我们手动干预使用FORCE INDEX强制使用某个索引。第五步执行 SQL—— 执行器优化器生成执行计划后就交给执行器来真正执行 SQL 语句。执行器的执行流程权限检查再次检查用户是否有执行该操作的权限。比如你只有查询权限却执行了删除操作执行器会返回权限不足的错误。为什么这里还要再检查一次权限因为有些权限是在运行时才能确定的比如视图的权限。调用存储引擎接口执行器本身不读写数据它会根据执行计划调用存储引擎提供的接口来读取或写入数据。逐行处理数据执行器会逐行读取存储引擎返回的数据判断是否满足查询条件如果满足就将该行加入结果集。返回结果将收集到的结果集返回给客户端。还是以上面的查询为例执行器会调用 InnoDB 的接口从user_id索引中找到user_id 100的那一行然后读取该行的user_name和user_salary字段返回给客户端。如果是没有索引的全表扫描执行器会调用存储引擎的接口逐行读取表中的所有数据然后判断是否满足条件直到扫描完整个表。这就是为什么全表扫描速度很慢的原因。第六步存储数据 —— 存储引擎存储引擎是真正与磁盘打交道的组件它负责将数据存储到磁盘以及从磁盘中读取数据。以最常用的 InnoDB 存储引擎为例当执行读操作时InnoDB 会先从缓冲池Buffer Pool中查找数据如果找到了就直接返回如果没有找到就从磁盘中读取数据加载到缓冲池然后再返回给执行器。当执行写操作时InnoDB 会先写Redo Log重做日志保证持久性然后修改缓冲池中的数据最后在合适的时机将缓冲池中的数据异步刷到磁盘。不同的存储引擎有不同的实现方式比如 MyISAM 不支持事务和行锁它的读写性能在某些场景下比 InnoDB 好但因为不支持事务现在已经很少使用了。三、完整流程总结我们再把上面的步骤串起来回顾一下一条 SQL 的完整执行过程客户端通过 TCP 连接 MySQL 服务器连接器验证身份并获取权限。MySQL 5.7 及以下查询缓存命中则直接返回结果。分析器对 SQL 进行词法分析和语法分析生成语法树。优化器根据语法树生成最优的执行计划。执行器根据执行计划调用存储引擎的接口执行 SQL。存储引擎从磁盘或缓冲池中读取数据返回给执行器。执行器将结果集返回给客户端。四、了解执行流程有什么用搞懂 MySQL 的执行流程你就能更好地优化 SQL知道索引是在哪个环节生效的为什么全表扫描慢为什么优化器会选错索引。更快地排查问题当 SQL 执行慢时能快速定位是连接问题、缓存问题、分析器问题、优化器问题还是存储引擎问题。深入理解 MySQL 核心原理事务、锁、MVCC 等机制都是基于这个执行流程实现的。希望这篇文章能帮你彻底搞懂 MySQL 的执行流程以后再写 SQL 的时候就能做到 “知其然更知其所以然” 了。
一文搞懂 MySQL：一条 SQL 语句的完整执行之旅
你是否每天都在写 SQL却从未想过它在 MySQL 内部是如何一步步执行的今天我们就通过这张经典的 MySQL 执行流程图带你拆解一条 SQL 从客户端发送到结果返回的完整过程搞懂这个过程你就能轻松理解 SQL 优化、事务原理、锁机制等核心知识点。一、先搞懂 MySQL 的整体架构MySQL 的架构可以清晰地分为两层Server 层和存储引擎层这也是 MySQL 最核心的设计思想 ——插件式存储引擎。Server 层包含连接器、查询缓存、分析器、优化器、执行器等核心组件负责处理所有跨引擎的通用逻辑比如 SQL 解析、优化、权限检查、结果缓存等。存储引擎层负责数据的存储和读取提供读写接口。常见的存储引擎有 InnoDBMySQL 5.5 默认、MyISAM、Memory 等不同的存储引擎有不同的特性比如 InnoDB 支持事务和行锁MyISAM 不支持。简单来说Server 层负责 “怎么干”存储引擎层负责 “真正干”。二、一条 SQL 的完整执行流程我们以最常见的查询语句为例SELECT user_name, user_salary FROM t_user WHERE user_id 100;看看它在 MySQL 内部经历了怎样的旅程。第一步建立连接 —— 连接器当你在客户端点击 “连接” 按钮时第一个打交道的就是连接器。连接器的核心工作有三件建立 TCP 连接客户端与 MySQL 服务器通过 3 次握手建立网络连接。身份验证验证你输入的用户名和密码是否正确。如果错误会返回经典的Access denied for user错误连接直接终止。权限管理验证通过后连接器会从权限表中查询该用户拥有的所有权限。注意连接建立后即使管理员修改了该用户的权限也不会影响当前连接必须等下次重新连接才会生效。长连接 vs 短连接图中特别提到了长连接和短连接的区别这也是生产环境中非常重要的知识点长连接客户端有需求时一直使用同一个连接。优点只需要建立一次连接减少连接建立的开销。缺点长时间连接会占用大量内存因为 MySQL 在执行过程中使用的临时内存会保存在连接对象中直到连接断开才会释放。短连接每次执行完很少的几次查询就断开连接下次查询再重新建立。优点不会长时间占用内存。缺点频繁建立连接会增加服务器开销。最佳实践使用长连接但定期断开空闲时间过长的连接MySQL 5.7 及以上版本可以使用mysql_reset_connection命令重置连接释放内存而不需要断开重连。第二步查询缓存MySQL 8.0 已彻底移除连接建立后MySQL 拿到 SQL 语句首先会去查询缓存中查找是否有对应的结果。缓存的 key 是完整的 SQL 语句value 是查询结果集。如果在缓存中找到了完全匹配的 SQL就会直接将结果返回给客户端跳过后面所有步骤速度非常快。如果缓存中没有找到就会继续执行后面的流程执行完成后会将结果存入查询缓存。为什么 MySQL 8.0 要移除查询缓存查询缓存看起来很美好但实际上它的弊远大于利缓存失效太频繁只要对一个表执行了任何更新操作INSERT、UPDATE、DELETE这个表的所有查询缓存都会被清空。对于写多读少的业务场景缓存几乎没有任何作用反而会增加缓存维护的开销。因此MySQL 从 8.0 版本开始直接删除了查询缓存功能以后再也不用纠结要不要开启缓存了。第三步解析 SQL—— 分析器如果缓存没有命中MySQL 就会开始真正处理这条 SQL第一个环节就是分析器。分析器的工作分为两步词法分析从 SQL 语句中提取关键字。比如上面的例子分析器会识别出SELECT是查询关键字t_user是表名user_name、user_salary是列名user_id 100是查询条件。语法分析根据 MySQL 的语法规则判断 SQL 语句是否合法。如果你的 SQL 写错了比如把FROM写成了FORM少了分号或者关键字用错了分析器会返回经典的You have an error in your SQL syntax错误错误信息通常会提示你在哪个位置附近出错。分析器执行完成后会生成一棵语法树供后面的优化器使用。第四步生成执行计划 —— 优化器拿到语法树后MySQL 还不能直接执行它需要通过优化器生成一个最优的执行方案。优化器的核心工作就是在多个可能的执行方案中选择一个效率最高的。比如当表中有多个索引时优化器会判断使用哪个索引查询速度最快。当进行多表连接查询时优化器会决定先查询哪个表再连接哪个表通常是先查小表再查大表。举个例子SELECT * FROM t_user WHERE name 张三 AND age 25;如果name列和age列都有索引优化器会比较两个索引的过滤性如果叫 “张三” 的人只有 1 个而 25 岁的人有 1000 个那么优化器会选择使用name索引因为它能更快地定位到目标数据。需要注意的是优化器的选择并不总是正确的有时候它会选错索引这时候就需要我们手动干预使用FORCE INDEX强制使用某个索引。第五步执行 SQL—— 执行器优化器生成执行计划后就交给执行器来真正执行 SQL 语句。执行器的执行流程权限检查再次检查用户是否有执行该操作的权限。比如你只有查询权限却执行了删除操作执行器会返回权限不足的错误。为什么这里还要再检查一次权限因为有些权限是在运行时才能确定的比如视图的权限。调用存储引擎接口执行器本身不读写数据它会根据执行计划调用存储引擎提供的接口来读取或写入数据。逐行处理数据执行器会逐行读取存储引擎返回的数据判断是否满足查询条件如果满足就将该行加入结果集。返回结果将收集到的结果集返回给客户端。还是以上面的查询为例执行器会调用 InnoDB 的接口从user_id索引中找到user_id 100的那一行然后读取该行的user_name和user_salary字段返回给客户端。如果是没有索引的全表扫描执行器会调用存储引擎的接口逐行读取表中的所有数据然后判断是否满足条件直到扫描完整个表。这就是为什么全表扫描速度很慢的原因。第六步存储数据 —— 存储引擎存储引擎是真正与磁盘打交道的组件它负责将数据存储到磁盘以及从磁盘中读取数据。以最常用的 InnoDB 存储引擎为例当执行读操作时InnoDB 会先从缓冲池Buffer Pool中查找数据如果找到了就直接返回如果没有找到就从磁盘中读取数据加载到缓冲池然后再返回给执行器。当执行写操作时InnoDB 会先写Redo Log重做日志保证持久性然后修改缓冲池中的数据最后在合适的时机将缓冲池中的数据异步刷到磁盘。不同的存储引擎有不同的实现方式比如 MyISAM 不支持事务和行锁它的读写性能在某些场景下比 InnoDB 好但因为不支持事务现在已经很少使用了。三、完整流程总结我们再把上面的步骤串起来回顾一下一条 SQL 的完整执行过程客户端通过 TCP 连接 MySQL 服务器连接器验证身份并获取权限。MySQL 5.7 及以下查询缓存命中则直接返回结果。分析器对 SQL 进行词法分析和语法分析生成语法树。优化器根据语法树生成最优的执行计划。执行器根据执行计划调用存储引擎的接口执行 SQL。存储引擎从磁盘或缓冲池中读取数据返回给执行器。执行器将结果集返回给客户端。四、了解执行流程有什么用搞懂 MySQL 的执行流程你就能更好地优化 SQL知道索引是在哪个环节生效的为什么全表扫描慢为什么优化器会选错索引。更快地排查问题当 SQL 执行慢时能快速定位是连接问题、缓存问题、分析器问题、优化器问题还是存储引擎问题。深入理解 MySQL 核心原理事务、锁、MVCC 等机制都是基于这个执行流程实现的。希望这篇文章能帮你彻底搞懂 MySQL 的执行流程以后再写 SQL 的时候就能做到 “知其然更知其所以然” 了。
