如何利用工具,迅猛定位低效SQL? | 1分钟系列

2023-11-30 14:38

本文主要是介绍如何利用工具,迅猛定位低效SQL? | 1分钟系列,希望对大家解决编程问题提供一定的参考价值,需要的开发者们随着小编来一起学习吧!

《两个工具分析SQL死锁》

《SQL空值带来的大坑》

两个案例分析,展现了MySQL性能分析工具explain的强大。


《同一个SQL语句,为啥性能差异咋就这么大呢?》

详细叙述了explain结果中最重要的type字段(连接类型)的含义。

 

其实,explain结果中还有一个Extra字段,对分析与优化SQL有很大的帮助,今天花1分钟简单和大家聊一聊。

 

数据准备

create table user (

id int primary key,

name varchar(20),

sex varchar(5),

index(name)

)engine=innodb;

 

insert into user values(1, 'shenjian','no');

insert into user values(2, 'zhangsan','no');

insert into user values(3, 'lisi', 'yes');

insert into user values(4, 'lisi', 'no');

 

数据说明

用户表:id主键索引,name普通索引(非唯一),sex无索引

四行记录:其中name普通索引存在重复记录lisi;

 

实验目的

通过构造各类SQL语句,对explain的Extra字段进行说明,启发式定位待优化低性能SQL语句。

 

一、【Using where】

640?wx_fmt=png

实验语句

explain select * from user where sex='no';

 

结果说明

Extra为Using where说明,SQL使用了where条件过滤数据

 

需要注意的是:

(1)返回所有记录的SQL,不使用where条件过滤数据,大概率不符合预期,对于这类SQL往往需要进行优化;

(2)使用了where条件的SQL,并不代表不需要优化,往往需要配合explain结果中的type(连接类型)来综合判断;

画外音:join type在同一个SQL语句,为啥性能差异咋就这么大呢?一文中有详细叙述,本文不再展开。

 

本例虽然Extra字段说明使用了where条件过滤,但type属性是ALL,表示需要扫描全部数据,仍有优化空间。

 

常见的优化方法为,在where过滤属性上添加索引。

画外音:本例中,sex字段区分度不高,添加索引对性能提升有限。

 

二、【Using index】

640?wx_fmt=png

实验语句

explain select id,name from user where name='shenjian';

 

结果说明

Extra为Using index说明,SQL所需要返回的所有列数据均在一棵索引树上,而无需访问实际的行记录

画外音:The column information is retrieved from the table using only information in the index tree without having to do an additional seek to read the actual row.

 

这类SQL语句往往性能较好。

 

问题来了,什么样的列数据,会包含在索引树上呢?

 

三、【Using index condition】

640?wx_fmt=png

实验语句:

explain select id,name,sex from user 

where name='shenjian';

画外音:该SQL语句与上一个SQL语句不同的地方在于,被查询的列,多了一个sex字段。

 

结果说明:

Extra为Using index condition说明,确实命中了索引,但不是所有的列数据都在索引树上,还需要访问实际的行记录

画外音:聚集索引,普通索引的底层实现差异,详见《1分钟了解MyISAM与InnoDB的索引差异》。

 

这类SQL语句性能也较高,但不如Using index

 

问题来了,如何优化为Using index呢?

 

四、【Using filesort】

640?wx_fmt=png

实验语句:

explain select * from user order by sex;

 

结果说明:

Extra为Using filesort说明,得到所需结果集,需要对所有记录进行文件排序

 

这类SQL语句性能极差,需要进行优化。

 

典型的,在一个没有建立索引的列上进行了order by,就会触发filesort,常见的优化方案是,在order by的列上添加索引,避免每次查询都全量排序。

 

五、【Using temporary】

640?wx_fmt=png

实验语句:

explain select * from user group by name order by sex;

 

结果说明:

Extra为Using temporary说明,需要建立临时表(temporary table)来暂存中间结果

 

这类SQL语句性能较低,往往也需要进行优化。

 

典型的,group byorder by同时存在,且作用于不同的字段时,就会建立临时表,以便计算出最终的结果集。

 

六、【Using join buffer (Block Nested Loop)】

640?wx_fmt=png

实验语句:

explain select * from user where id in(select id from user where sex='no');

 

结果说明:

Extra为Using join buffer (Block Nested Loop)说明,需要进行嵌套循环计算

画外音:内层和外层的type均为ALL,rows均为4,需要循环进行4*4次计算。

 

这类SQL语句性能往往也较低,需要进行优化。

 

典型的,两个关联表join,关联字段均未建立索引,就会出现这种情况。常见的优化方案是,在关联字段上添加索引,避免每次嵌套循环计算。

 

结尾

explain是SQL优化中最常用的工具,搞定type和Extra,explain也就基本搞定了。

  • 《MySQL explain,type分析》进行了常见type分析

  • 本文进行了常见Extra分析

  • 《两个工具分析SQL死锁》和《SQL空值带来的大坑》是两篇典型案例分析

  • 《MyISAM与InnoDB的索引差异》是InnoDB和MyISAM索引差异分析

  • 《数据库索引,到底是什么做的?》是索引底层实现分析

以上几篇文章,强烈建议大家读透。


640?wx_fmt=jpeg

架构师之路-分享技术思路

相关推荐

《缓冲池(buffer pool),这次彻底懂了!》

《写缓冲(change buffer),这次彻底懂了!》


作业

select id,name where XXXUsing index

select id,name,sex where XXXUsing index condition

后者如何优化为Using index


希望大家有收获,帮忙再看哟。

这篇关于如何利用工具,迅猛定位低效SQL? | 1分钟系列的文章就介绍到这儿,希望我们推荐的文章对编程师们有所帮助!



http://www.chinasem.cn/article/437407

相关文章

线上Java OOM问题定位与解决方案超详细解析

《线上JavaOOM问题定位与解决方案超详细解析》OOM是JVM抛出的错误,表示内存分配失败,:本文主要介绍线上JavaOOM问题定位与解决方案的相关资料,文中通过代码介绍的非常详细,需要的朋... 目录一、OOM问题核心认知1.1 OOM定义与技术定位1.2 OOM常见类型及技术特征二、OOM问题定位工具

MySQL的JDBC编程详解

《MySQL的JDBC编程详解》:本文主要介绍MySQL的JDBC编程,具有很好的参考价值,希望对大家有所帮助,如有错误或未考虑完全的地方,望不吝赐教... 目录前言一、前置知识1. 引入依赖2. 认识 url二、JDBC 操作流程1. JDBC 的写操作2. JDBC 的读操作总结前言本文介绍了mysq

java.sql.SQLTransientConnectionException连接超时异常原因及解决方案

《java.sql.SQLTransientConnectionException连接超时异常原因及解决方案》:本文主要介绍java.sql.SQLTransientConnectionExcep... 目录一、引言二、异常信息分析三、可能的原因3.1 连接池配置不合理3.2 数据库负载过高3.3 连接泄漏

Linux下MySQL数据库定时备份脚本与Crontab配置教学

《Linux下MySQL数据库定时备份脚本与Crontab配置教学》在生产环境中,数据库是核心资产之一,定期备份数据库可以有效防止意外数据丢失,本文将分享一份MySQL定时备份脚本,并讲解如何通过cr... 目录备份脚本详解脚本功能说明授权与可执行权限使用 Crontab 定时执行编辑 Crontab添加定

MySQL中On duplicate key update的实现示例

《MySQL中Onduplicatekeyupdate的实现示例》ONDUPLICATEKEYUPDATE是一种MySQL的语法,它在插入新数据时,如果遇到唯一键冲突,则会执行更新操作,而不是抛... 目录1/ ON DUPLICATE KEY UPDATE的简介2/ ON DUPLICATE KEY UP

MySQL分库分表的实践示例

《MySQL分库分表的实践示例》MySQL分库分表适用于数据量大或并发压力高的场景,核心技术包括水平/垂直分片和分库,需应对分布式事务、跨库查询等挑战,通过中间件和解决方案实现,最佳实践为合理策略、备... 目录一、分库分表的触发条件1.1 数据量阈值1.2 并发压力二、分库分表的核心技术模块2.1 水平分

Python与MySQL实现数据库实时同步的详细步骤

《Python与MySQL实现数据库实时同步的详细步骤》在日常开发中,数据同步是一项常见的需求,本篇文章将使用Python和MySQL来实现数据库实时同步,我们将围绕数据变更捕获、数据处理和数据写入这... 目录前言摘要概述:数据同步方案1. 基本思路2. mysql Binlog 简介实现步骤与代码示例1

Python实战之SEO优化自动化工具开发指南

《Python实战之SEO优化自动化工具开发指南》在数字化营销时代,搜索引擎优化(SEO)已成为网站获取流量的重要手段,本文将带您使用Python开发一套完整的SEO自动化工具,需要的可以了解下... 目录前言项目概述技术栈选择核心模块实现1. 关键词研究模块2. 网站技术seo检测模块3. 内容优化分析模

使用shardingsphere实现mysql数据库分片方式

《使用shardingsphere实现mysql数据库分片方式》本文介绍如何使用ShardingSphere-JDBC在SpringBoot中实现MySQL水平分库,涵盖分片策略、路由算法及零侵入配置... 目录一、ShardingSphere 简介1.1 对比1.2 核心概念1.3 Sharding-Sp

MySQL 表空却 ibd 文件过大的问题及解决方法

《MySQL表空却ibd文件过大的问题及解决方法》本文给大家介绍MySQL表空却ibd文件过大的问题及解决方法,本文给大家介绍的非常详细,对大家的学习或工作具有一定的参考借鉴价值,需要的朋友参考... 目录一、问题背景:表空却 “吃满” 磁盘的怪事二、问题复现:一步步编程还原异常场景1. 准备测试源表与数据