news 2026/6/6 4:42:25

慢SQL分析与优化实战

作者头像

张小明

前端开发工程师

1.2k 24
文章封面图
慢SQL分析与优化实战

慢SQL分析与优化实战

一、发现问题:如何发现慢查询?

慢查询的发现通常依赖于监控体系,不同规模团队分工不同:

团队角色主要发现途径工具示例
运维 / DBA主导监控。负责数据库整体健康度,通过监控平台主动发现、统计并告警慢查询。MySQL 慢查询日志Prometheus + GrafanaAPM(应用性能监控)工具(如SkyWalking, Pinpoint)、云厂商RDS控制台
开发人员被动接收 & 主动探查。接收DBA/运维提供的慢SQL清单;在开发测试阶段通过压测、代码Review或本地分析提前发现问题。测试环境 EXPLAIN压测工具集成开发环境(IDE)的数据库插件

核心工具:MySQL慢查询日志

  • 配置参数:slow_query_log,long_query_time(定义“慢”的阈值,如2秒),slow_query_log_file

  • 作用:自动记录所有执行时间超过阈值的SQL语句及相关信息(执行时间、锁时间、扫描行数等),是分析的根本依据。

二、分析问题:诊断慢查询的“病因”

拿到一条慢SQL后,不要盲目猜测,应进行系统化诊断。核心原因通常归为以下三类:

1. 查询未命中或低效使用索引(最常见)

  • 现象:EXPLAIN输出中typeALL(全表扫描)、index(全索引扫描),或key字段为NULL

  • 排查点:

    • 索引是否创建WHEREORDER BYGROUP BYJOIN ON的字段上?

    • 索引是否失效?常见失效场景:对索引列进行函数计算、类型隐式转换、使用!=<>OR连接非索引列、左模糊匹配LIKE ‘%xxx’

    • 是否使用了不合适的索引?通过EXPLAIN对比possible_keyskey

2. 查询了不必要的数据(可优化空间大)

  • 现象:查询返回的数据量远大于业务需要。

  • 排查点:

    • 是否滥用SELECT *只查询需要的列,特别是TEXT/BLOB大字段。

    • 是否有大量重复数据被返回?考虑使用DISTINCT或优化业务逻辑。

    • 是否通过多表关联JOIN)查询了无需的关联表数据?或可以使用更高效的EXISTS/IN

    • 分页查询是否深度翻页?LIMIT 1000000, 10会先扫描1000010行,效率极低。优化方案:使用覆盖索引+延迟关联,或记录上一页最大ID作为查询起点。

3. 单表数据量过大(触及架构瓶颈)

  • 现象:SQL和索引已优化到极致,EXPLAIN结果理想,但因数据行数过多,查询仍慢。

  • 判断标准:这是一个在业务增长到一定阶段后必然出现的问题。

三、解决问题:针对性优化方案

根据诊断出的“病因”,实施相应优化:

针对索引问题:

  1. 添加缺失索引:为高频查询条件创建合适索引,考虑联合索引并利用最左前缀原则

  2. 优化索引设计:避免在区分度低的字段(如“性别”)上建单列索引。考虑使用覆盖索引避免回表。

  3. 改写SQL绕过索引失效:例如,将WHERE YEAR(create_time) = 2023改为WHERE create_time BETWEEN ‘2023-01-01’ AND ‘2023-12-31’

针对查询数据量问题:

  1. 禁用SELECT *,明确指定列。

  2. 优化分页:

    -- 低效 SELECT * FROM table ORDER BY id LIMIT 1000000, 10; -- 高效:使用覆盖索引延迟关联 SELECT * FROM table t1 INNER JOIN (SELECT id FROM table ORDER BY id LIMIT 1000000, 10) t2 ON t1.id = t2.id;
  3. 拆分复杂查询:有时将一个大查询拆成多个小查询,在应用层组合,反而比数据库内复杂JOIN更高效(利用了应用服务器的扩展性)。

针对大数据量表问题(架构级优化):

  1. 历史数据归档:将访问频率低的冷数据迁移到历史表或归档存储。

  2. 垂直分表:将包含不常用大字段(如文章详情)的列拆分到子表。

  3. 水平分库分表:当单表数据量持续增长至千万/亿级时,这是终极解决方案。根据业务逻辑(如用户ID、时间)将数据分布到多个数据库或表中。

版权声明: 本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若内容造成侵权/违法违规/事实不符,请联系邮箱:809451989@qq.com进行投诉反馈,一经查实,立即删除!
网站建设 2026/6/4 20:21:23

《乌合之众》精读笔记

&#x1f9e0;《乌合之众》精读笔记 副标题&#xff1a;群体心理学的奠基之作一、写作背景与作者动机 作者&#xff1a;古斯塔夫勒庞&#xff08;Gustave Le Bon&#xff09;&#xff0c;法国社会心理学家。背景&#xff1a;19世纪末法国社会剧烈变革&#xff0c;民主运动、罢工…

作者头像 李华
网站建设 2026/6/2 22:20:37

孩子近视怎么办?父母们可以这么做

近年来&#xff0c;儿童青少年近视发生率呈逐年攀升的趋势&#xff0c;近视低龄化、重度化问题愈发突出&#xff0c;这让不少家长忧心忡忡。很多家长发现孩子视力下降后&#xff0c;往往陷入焦虑与慌乱&#xff0c;不知道该采取哪些科学有效的措施。其实&#xff0c;面对孩子近…

作者头像 李华
网站建设 2026/5/30 9:22:24

Java毕设项目推荐-基于springboot校园招聘平台与岗位推荐系统的设计与实现springboot的启梦校园招聘平台【附源码+文档,调试定制服务】

博主介绍&#xff1a;✌️码农一枚 &#xff0c;专注于大学生项目实战开发、讲解和毕业&#x1f6a2;文撰写修改等。全栈领域优质创作者&#xff0c;博客之星、掘金/华为云/阿里云/InfoQ等平台优质作者、专注于Java、小程序技术领域和毕业项目实战 ✌️技术范围&#xff1a;&am…

作者头像 李华
网站建设 2026/5/30 9:22:24

2022 CISCN 华东北赛区 Blue NSSCTF PWN house of botcake

House of botcake 难死我了&#xff01;IDA分析main函数有一次UAF的机会来泄露libc 也只有一次机会打印出libc刚好分配到unsored bin来泄露依旧全保护根据程序写出自动化脚本 from pwn import *libdir /home/ubuntu/glibc-all-in-one/libs/2.31-0ubuntu9_amd64 ld libdir /l…

作者头像 李华
网站建设 2026/5/28 23:07:29

Java计算机毕设之基于JAVA的无人机销售平台的设计与实现商品管理、订单履约、售后跟踪(完整前后端代码+说明文档+LW,调试定制等)

博主介绍&#xff1a;✌️码农一枚 &#xff0c;专注于大学生项目实战开发、讲解和毕业&#x1f6a2;文撰写修改等。全栈领域优质创作者&#xff0c;博客之星、掘金/华为云/阿里云/InfoQ等平台优质作者、专注于Java、小程序技术领域和毕业项目实战 ✌️技术范围&#xff1a;&am…

作者头像 李华