mysql原理--Explain详解

1.概述
一条查询语句在经过 MySQL 查询优化器的各种基于成本和规则的优化会后生成一个所谓的 执行计划 ,这个执行计划展示了接下来具体执行查询的方式,比如多表连接的顺序是什么,对于每个表采用什么访问方法来具体执行查询等等。设计 MySQL 的大叔贴心的为我们提供了 EXPLAIN 语句来帮助我们查看某个查询语句的具体执行计划。

如果我们想看看某个查询的执行计划的话,可以在具体的查询语句前边加一个 EXPLAIN ,就像这样:EXPLAIN SELECT 1\G
在这里插入图片描述
输出的一大坨东西就是所谓的 执行计划 ,我的任务就是带领大家看懂这一大坨东西里边的每个列都是干啥用的,以及在这个 执行计划 的辅助下,我们应该怎样改进自己的查询语句以使查询执行起来更高效。其实除了以 SELECT 开头的查询语句,其余的 DELETE 、 INSERT 、 REPLACE 以及 UPDATE 语句前边都可以加上 EXPLAIN这个词儿,用来查看这些语句的执行计划,不过我们这里对 SELECT 语句更感兴趣,所以后边只会以 SELECT 语句为例来描述 EXPLAIN 语句的用法。为了让大家先有一个感性的认识,我们把 EXPLAIN 语句输出的各个列的作用先大致罗列一下:

列名描述
id在一个大的查询语句中每个 SELECT 关键字都对应一个唯一的 id
select_typeSELECT 关键字对应的那个查询的类型
table表名
partitions匹配的分区信息
type针对单表的访问方法
possible_keys可能用到的索引
key实际上使用的索引
key_len实际使用到的索引长度
ref当使用索引列等值查询时,与索引列进行等值匹配的对象信息
rows预估的需要读取的记录条数
filtered某个表经过搜索条件过滤后剩余记录条数的百分比
Extra一些额外的信息

为了故事的顺利发展,我们还是要请出我们前边已经用了n遍的 single_table 表,为了防止大家忘了,再把它的结构描述一遍:

CREATE TABLE single_table (id INT NOT NULL AUTO_INCREMENT,key1 VARCHAR(100),key2 INT,key3 VARCHAR(100),key_part1 VARCHAR(100),key_part2 VARCHAR(100),key_part3 VARCHAR(100),common_field VARCHAR(100),PRIMARY KEY (id),KEY idx_key1 (key1),UNIQUE KEY idx_key2 (key2),KEY idx_key3 (key3),KEY idx_key_part(key_part1, key_part2, key_part3)
) Engine=InnoDB CHARSET=utf8;

我们仍然假设有两个和 single_table 表构造一模一样的 t1 、 t2 表,而且这两个表里边儿有10000条记录,除 id 列外其余的列都插入随机值。

2.执行计划输出中各列详解
2.1.table
设计MySQL 的大叔规定EXPLAIN语句输出的每条记录都对应着某个单表的访问方法,该条记录的table列代表着该表的表名。
我们看一条比较简单的查询语句:
在这里插入图片描述
这个查询语句只涉及对 t1 表的单表查询,所以 EXPLAIN 输出中只有一条记录,其中的 table 列的值是 t1 ,表明这条记录是用来说明对 t1 表的单表访问方法的。

下边我们看一下一个连接查询的执行计划:
在这里插入图片描述
可以看到这个连接查询的执行计划中有两条记录,这两条记录的 table 列分别是 t1 和 t2 ,这两条记录用来分别说明对 t1 表和 t2 表的访问方法是什么。

2.2. id
我们知道我们写的查询语句一般都以 SELECT 关键字开头,比较简单的查询语句里只有一个 SELECT 关键字,比如下边这个查询语句:SELECT * FROM t1 WHERE key1 = 'a';稍微复杂一点的连接查询中也只有一个 SELECT 关键字,比如:SELECT * FROM s1 INNER JOIN s2 ON s1.key1 = s2.key1 WHERE s1.common_field = 'a';

但是下边两种情况下在一条查询语句中会出现多个 SELECT 关键字:
(1). 查询中包含子查询的情况
比如下边这个查询语句中就包含2个 SELECT 关键字: SELECT * FROM s1 WHERE key1 IN (SELECT * FROM s2);
(2). 查询中包含 UNION 语句的情况
比如下边这个查询语句中也包含2个 SELECT 关键字: SELECT * FROM s1 UNION SELECT * FROM s2;

查询语句中每出现一个 SELECT 关键字,设计 MySQL 的大叔就会为它分配一个唯一的 id 值。这个 id 值就是 EXPLAIN 语句的第一个列,比如下边这个查询中只有一个 SELECT 关键字,所以 EXPLAIN 的结果中也就只有一条 id 列为 1 的记录:EXPLAIN SELECT * FROM t1 WHERE key1 = 'a';

对于连接查询来说,一个 SELECT 关键字后边的 FROM 子句中可以跟随多个表,所以在连接查询的执行计划中,每个表都会对应一条记录,但是这些记录的id值都是相同的,比如: EXPLAIN SELECT * FROM t1 INNER JOIN t2;
在这里插入图片描述
可以看到,上述连接查询中参与连接的 t1 和 t2 表分别对应一条记录,但是这两条记录对应的 id 值都是 1 。这里需要大家记住的是,在连接查询的执行计划中,每个表都会对应一条记录,这些记录的id列的值是相同的,出现在前边的表表示驱动表,出现在后边的表表示被驱动表。所以从上边的 EXPLAIN 输出中我们可以看出,查询优化器准备让 t1 表作为驱动表,让 t2 表作为被驱动表来执行查询。

对于包含子查询的查询语句来说,就可能涉及多个 SELECT 关键字,所以在包含子查询的查询语句的执行计划中,每个 SELECT 关键字都会对应一个唯一的 id 值,比如这样: EXPLAIN SELECT * FROM t1 WHERE key1 IN (SELECT key1 FROM t2) OR key3 = 'a';
在这里插入图片描述
从输出结果中我们可以看到, t1 表在外层查询中,外层查询有一个独立的 SELECT 关键字,所以第一条记录的 id 值就是 1 , t2 表在子查询中,子查询有一个独立的 SELECT 关键字,所以第二条记录的 id 值就是 2 。

但是这里大家需要特别注意,查询优化器可能对涉及子查询的查询语句进行重写,从而转换为连接查询。所以如果我们想知道查询优化器对某个包含子查询的语句是否进行了重写,直接查看执行计划就好了,比如说: EXPLAIN SELECT * FROM t1 WHERE key1 IN (SELECT key3 FROM t2 WHERE common_field = 'a');
在这里插入图片描述
可以看到,虽然我们的查询语句是一个子查询,但是执行计划中 t1 和 t2 表对应的记录的 id 值全部是 1 ,这就表明了查询优化器将子查询转换为了连接查询。

对于包含 UNION 子句的查询语句来说,每个 SELECT 关键字对应一个 id 值也是没错的,不过还是有点儿特别的东西,比方说下边这个查询: EXPLAIN SELECT * FROM t1 UNION SELECT * FROM t2;
在这里插入图片描述
这个语句的执行计划的第三条记录是个什么鬼?而且 table 列长的也怪怪的?大家别忘了 UNION 子句是干嘛用的,它会把多个查询的结果集合并起来并对结果集中的记录进行去重,怎么去重呢? MySQL 使用的是内部的临时表。正如上边的查询计划中所示, UNION 子句是为了把 id 为 1 的查询和 id 为 2 的查询的结果集合并起来并去重,所以在内部创建了一个名为 <union1, 2> 的临时表(就是执行计划第三条记录的 table 列的名称)。

跟 UNION 对比起来, UNION ALL 就不需要为最终的结果集进行去重,它只是单纯的把多个查询的结果集中的记录合并成一个并返回给用户,所以也就不需要使用临时表。所以在包含 UNION ALL 子句的查询的执行计划中,就没有那个 id 为 NULL 的记录,如下所示: EXPLAIN SELECT * FROM t1 UNION ALL SELECT * FROM t2;
在这里插入图片描述

2.3.select_type
通过上边的内容我们知道,一条大的查询语句里边可以包含若干个 SELECT 关键字,每个 SELECT 关键字代表着一个小的查询语句,而每个 SELECT 关键字的 FROM 子句中都可以包含若干张表(这些表用来做连接查询),每一张表都对应着执行计划输出中的一条记录,对于在同一个 SELECT 关键字中的表来说,它们的 id 值是相同的。

设计 MySQL 的大叔为每一个 SELECT 关键字代表的小查询都定义了一个称之为 select_type 的属性,意思是我们只要知道了某个小查询的 select_type 属性,就知道了这个小查询在整个大查询中扮演了一个什么角色,口说无凭,我们还是先来见识见识这个 select_type 都能取哪些值(为了精确起见,我们直接使用文档中的英文做简要描述,随后会进行详细解释的):

名称描述
SIMPLESimple SELECT (not using UNION or subqueries)
PRIMARYOutermost SELECT
UNIONSecond or later SELECT statement in a UNION
UNION RESULTResult of a UNION
SUBQUERYFirst SELECT in subquery
DEPENDENT SUBQUERYFirst SELECT in subquery, dependent on outer query
DEPENDENT UNIONSecond or later SELECT statement in a UNION, dependent on outer query
DERIVEDDerived table
MATERIALIZEDMaterialized subquery
UNCACHEABLE SUBQUERYA subquery for which the result cannot be cached and must be re-evaluated for each row of the outer query
UNCACHEABLE UNIONThe second or later select in a UNION that belongs to an uncacheable subquery (see UNCACHEABLE SUBQUERY)

英文描述太简单,不知道说了啥?来详细瞅瞅里边儿的每个值都是干啥吃的:
(1). SIMPLE
查询语句中不包含 UNION 或者子查询的查询都算作是 SIMPLE 类型,比方说下边这个单表查询的 select_type 的值就是 SIMPLEEXPLAIN SELECT * FROM t1;
在这里插入图片描述
当然,连接查询也算是 SIMPLE 类型,比如: EXPLAIN SELECT * FROM t1 INNER JOIN t2;
在这里插入图片描述
(2). PRIMARY
对于包含 UNION 、 UNION ALL 或者子查询的大查询来说,它是由几个小查询组成的,其中最左边的那个查询的 select_type 值就是 PRIMARY ,比方说: EXPLAIN SELECT * FROM t1 UNION SELECT * FROM t2;
在这里插入图片描述
从结果中可以看到,最左边的小查询 SELECT * FROM t1 对应的是执行计划中的第一条记录,它的 select type 值就是 PRIMARY

(3). UNION
对于包含 UNION 或者 UNION ALL 的大查询来说,它是由几个小查询组成的,其中除了最左边的那个小查询以外,其余的小查询的 select_type 值就是 UNION ,可以对比上一个例子的效果,这就不多举例子了。

(4). UNION RESULT
MySQL 选择使用临时表来完成 UNION 查询的去重工作,针对该临时表的查询的 select_type 就是 UNION RESULT ,例子上边有,就不赘述了。

(5). SUBQUERY
如果包含子查询的查询语句不能够转为对应的 semi-join 的形式,并且该子查询是不相关子查询,并且查询优化器决定采用将该子查询物化的方案来执行该子查询时,该子查询的第一个 SELECT 关键字代表的那个查询的 select_type 就是 SUBQUERY ,比如下边这个查询: EXPLAIN SELECT * FROM t1 WHERE key1 IN (SELECT key1 FROM t2) OR key3 = 'a';
在这里插入图片描述
可以看到,外层查询的 select_type 就是 PRIMARY ,子查询的 select_type 就是 SUBQUERY 。需要大家注意的是,由于select_typeSUBQUERY的子查询由于会被物化,所以只需要执行一遍。

注意:这里实际显示的是DEPENDENT SUBQUERY

(6). DEPENDENT SUBQUERY
如果包含子查询的查询语句不能够转为对应的 semi-join 的形式,并且该子查询是相关子查询,则该子查询的第一个 SELECT 关键字代表的那个查询的 select_type 就是 DEPENDENT SUBQUERY ,比如下边这个查询: EXPLAIN SELECT * FROM t1 WHERE key1 IN (SELECT key1 FROM t2 WHERE t1.key2 = t2.key2) OR key3 = 'a';
在这里插入图片描述
需要大家注意的是,select_typeDEPENDENT SUBQUERY的查询可能会被执行多次。

(7). DEPENDENT UNION
在包含 UNION 或者 UNION ALL 的大查询中,如果各个小查询都依赖于外层查询的话,那除了最左边的那个小查询之外,其余的小查询的 select_type 的值就是 DEPENDENT UNION 。说的有些绕哈,比方说下边这个查询:EXPLAIN SELECT * FROM t1 WHERE key1 IN (SELECT key1 FROM t2 WHERE key1 = 'a' UNION SELECT key1 FROM t1 WHERE key1 = 'b');
在这里插入图片描述
这个查询比较复杂啊,大查询里包含了一个子查询,子查询里又是由 UNION 连起来的两个小查询。从执行计划中可以看出来, SELECT key1 FROM t2 WHERE key1 = 'a' 这个小查询由于是子查询中第一个查询,所以它的 select_typeDEPENDENT SUBQUERY ,而 SELECT key1 FROM t1 WHERE key1 = 'b' 这个查询的 select_type 就是 DEPENDENT UNION

(8). DERIVED
对于采用物化的方式执行的包含派生表的查询,该派生表对应的子查询的 select_type 就是 DERIVED ,比方说下边这个查询: EXPLAIN SELECT * FROM (SELECT key1, count(*) as c FROM t1 GROUP BY key1) AS derived_s1 where c > 1;
在这里插入图片描述
从执行计划中可以看出, id 为 2 的记录就代表子查询的执行方式,它的 select_typeDERIVED ,说明该子查询是以物化的方式执行的。 id 为 1 的记录代表外层查询,大家注意看它的 table 列显示的是 <derived2> ,表示该查询是针对将派生表物化之后的表进行查询的。

如果派生表可以通过和外层查询合并的方式执行的话,执行计划又是另一番景象。

(9). MATERIALIZED
当查询优化器在执行包含子查询的语句时,选择将子查询物化之后与外层查询进行连接查询时,该子查询对应的 select_type 属性就是 MATERIALIZED ,比如下边这个查询:EXPLAIN SELECT * FROM t1 WHERE key1 IN (SELECT key1 FROM t2);
在这里插入图片描述
执行计划的第三条记录的 id 值为 2 ,说明该条记录对应的是一个单表查询,从它的 select_type 值为 MATERIALIZED 可以看出,查询优化器是要把子查询先转换成物化表。然后看执行计划的前两条记录的 id 值都为 1 ,说明这两条记录对应的表进行连接查询,需要注意的是第二条记录的 table 列的值是 <subquery2> ,说明该表其实就是 id 为 2 对应的子查询执行之后产生的物化表,然后将 s1 和该物化表进行连接查询。

(10). UNCACHEABLE SUBQUERY
不常用,就不多唠叨了。

(11). UNCACHEABLE UNION
不常用,就不多唠叨了。

2.4.partitions
由于我们压根儿就没唠叨过分区是个啥,所以这个输出列我们也就不说了哈,一般情况下我们的查询语句的执行计划的 partitions 列的值都是 NULL

2.5.type
我们前边说过执行计划的一条记录就代表着 MySQL 对某个表的执行查询时的访问方法,其中的 type 列就表明了这个访问方法是个啥,比方说下边这个查询: EXPLAIN SELECT * FROM t1 WHERE key1 = 'a';
在这里插入图片描述
完整的访问方法如下: system , const ,eq_ref , ref , fulltext , ref_or_null , index_merge , unique_subquery , index_subquery ,range , index , ALL 。当然我们还要详细唠叨一下哈:
(1). system
当表中只有一条记录并且该表使用的存储引擎的统计数据是精确的,比如MyISAM、Memory,那么对该表的访问方法就是 system 。
(2). const
当我们根据主键或者唯一二级索引列与常数进行等值匹配时,对单表的访问方法就是 const 。
(3). eq_ref
在连接查询时,如果被驱动表是通过主键或者唯一二级索引列等值匹配的方式进行访问的(如果该主键或者唯一二级索引是联合索引的话,所有的索引列都必须进行等值比较),则对该被驱动表的访问方法就是 eq_ref 。
(4). ref
当通过普通的二级索引列与常量进行等值匹配时来查询某个表,那么对该表的访问方法就可能是 ref。
(5). fulltext
全文索引,我们没有细讲过,跳过~
(6). ref_or_null
当对普通二级索引进行等值匹配查询,该索引列的值也可以是 NULL 值时,那么对该表的访问方法就可能是 ref_or_null
(7). index_merge
一般情况下对于某个表的查询只能使用到一个索引,但我们唠叨单表访问方法时特意强调了在某些场景下可以使用 Intersection 、 Union 、 Sort-Union 这三种索引合并的方式来执行查询。
(8). unique_subquery
类似于两表连接中被驱动表的 eq_ref 访问方法, unique_subquery 是针对在一些包含 IN 子查询的查询语句中,如果查询优化器决定将 IN子查询转换为 EXISTS 子查询,而且子查询可以使用到主键进行等值匹配的话,那么该子查询执行计划的 type 列的值就是 unique_subquery ,比如下边的这个查询语句:EXPLAIN SELECT * FROM t1 WHERE key2 IN (SELECT id FROM t2 where t1.key1 = t2.key1) OR key3 = 'a';
在这里插入图片描述
(9). index_subquery
index_subqueryunique_subquery 类似,只不过访问子查询中的表时使用的是普通的索引,比如这样:EXPLAIN SELECT * FROM t1 WHERE common_field IN (SELECT key3 FROM t2 where t1. key1 = t2.key1) OR key3 = 'a';
(10). range
如果使用索引获取某些 范围区间 的记录,那么就可能使用到 range 访问方法。
(11). index
当我们可以使用索引覆盖,但需要扫描全部的索引记录时,该表的访问方法就是 index 。
(12). ALL
全表扫描

一般来说,这些访问方法按照我们介绍它们的顺序性能依次变差。其中除了 All 这个访问方法外,其余的访问方法都能用到索引,除了 index_merge 访问方法外,其余的访问方法都最多只能用到一个索引。

2.6.possible_keyskey
EXPLAIN 语句输出的执行计划中, possible_keys 列表示在某个查询语句中,对某个表执行单表查询时可能用到的索引有哪些, key 列表示实际用到的索引有哪些,比方说下边这个查询:
在这里插入图片描述
2.7.key_len
key_len 列表示当优化器决定使用某个索引执行查询时,该索引记录的最大长度,它是由这三个部分构成的:
(1). 对于使用固定长度类型的索引列来说,它实际占用的存储空间的最大长度就是该固定值,对于指定字符集的变长类型的索引列来说,比如某个索引列的类型是 VARCHAR(100) ,使用的字符集是 utf8 ,那么该列实际占用的最大存储空间就是 100 × 3 = 300 个字节。
(2). 如果该索引列可以存储 NULL 值,则 key_len 比不可以存储 NULL 值时多1个字节。
(3). 对于变长字段来说,都会有2个字节的空间来存储该变长列的实际长度。

比如下边这个查询:EXPLAIN SELECT * FROM t1 WHERE id = 1;由于 id 列的类型是 INT ,并且不可以存储 NULL 值,所以在使用该列的索引时 key_len 大小就是 4 。当索引列可以存储 NULL 值时,比如: EXPLAIN SELECT * FROM t1 WHERE key2 = 5; key_len 列就变成了 5 ,比使用 id 列的索引时多了 1

对于可变长度的索引列来说,比如下边这个查询:EXPLAIN SELECT * FROM t1 WHERE key1 = 'a';由于 key1 列的类型是 VARCHAR(100) ,所以该列实际最多占用的存储空间就是 300 字节,又因为该列允许存储 NULL 值,所以 key_len 需要加 1 ,又因为该列是可变长度列,所以 key_len 需要加 2 ,所以最后 ken_len 的值就是 303

执行计划的生成是在 MySQL server 层中的功能,并不是针对具体某个存储引擎的功能,设计 MySQL 的大叔在执行计划中输出key_len 列主要是为了让我们区分某个使用联合索引的查询具体用了几个索引列,并不需要十分精确。

2.8.ref
当使用索引列等值匹配的条件去执行查询时,也就是在访问方法是 const 、 eq_ref 、 ref 、 ref_or_null 、unique_subquery 、 index_subquery 其中之一时, ref 列展示的就是与索引列作等值匹配的东东是个啥,比如只是一个常数或者是某个列。大家看下边这个查询: EXPLAIN SELECT * FROM t1 WHERE key1 = 'a';
在这里插入图片描述
当然有时候更复杂一点: EXPLAIN SELECT * FROM t1 INNER JOIN t2 ON t1.id = t2.id;
在这里插入图片描述
有的时候与索引列进行等值匹配的对象是一个函数,比方说下边这个查询:EXPLAIN SELECT * FROM t1 INNER JOIN t2 ON t2.key1 = UPPER(t1.key1);
在这里插入图片描述
2.9.rows
如果查询优化器决定使用全表扫描的方式对某个表执行查询时,执行计划的 rows 列就代表预计需要扫描的行数,如果使用索引来执行查询时,执行计划的 rows 列就代表预计扫描的索引记录行数。

2.10.filtered
之前在分析连接查询的成本时提出过一个 condition filtering 的概念,就是 MySQL 在计算驱动表扇出时采用的一个策略:
(1). 如果使用的是全表扫描的方式执行的单表查询,那么计算驱动表扇出时需要估计出满足搜索条件的记录到底有多少条。
(2). 如果使用的是索引执行的单表扫描,那么计算驱动表扇出的时候需要估计出满足除使用到对应索引的搜索条件外的其他搜索条件的记录有多少条。

比方说下边这个查询: EXPLAIN SELECT * FROM t1 WHERE key1 > 'z' AND common_field = 'a';
在这里插入图片描述
从执行计划的 key 列中可以看出来,该查询使用 idx_key1 索引来执行查询,从 rows 列可以看出满足 key1 >'z' 的记录有 1 条。执行计划的 filtered 列就代表查询优化器预测在这 1条记录中,有多少条记录满足其余的搜索条件,也就是 common_field = 'a' 这个条件的百分比。此处 filtered 列的值是 33.33 ,说明查询优化器预测在 1条记录中有 33.33% 的记录满足 common_field = 'a' 这个条件。

对于单表查询来说,这个 filtered 列的值没什么意义,我们更关注在连接查询中驱动表对应的执行计划记录的 filtered 值,比方说下边这个查询:EXPLAIN SELECT * FROM t1 INNER JOIN t2 ON t1.key1 = t2.key1 WHERE t1.common_field = 'a';
在这里插入图片描述
从执行计划中可以看出来,查询优化器打算把 t1 当作驱动表, t2 当作被驱动表。我们可以看到驱动表 t1 表的执行计划的 rows 列为 3filtered 列为 33.33 ,这意味着驱动表 t1 的扇出值就是 3× 33.33 % = 99.99% ,这说明还要对被驱动表执行大约 99.99% 次查询。

2.11.Extra
顾名思义, Extra 列是用来说明一些额外信息的,我们可以通过这些额外信息来更准确的理解 MySQL 到底将如何执行给定的查询语句。 MySQL 提供的额外信息有好几十个,所以我们只挑一些平时常见的或者比较重要的额外信息介绍给大家哈。
(1). No tables used
当查询语句的没有 FROM 子句时将会提示该额外信息。
(2). Impossible WHERE
查询语句的 WHERE 子句永远为 FALSE 时将会提示该额外信息。
(3). No matching min/max row
当查询列表处有 MIN 或者 MAX 聚集函数,但是并没有符合 WHERE 子句中的搜索条件的记录时,将会提示该额外信息,比方说:EXPLAIN SELECT MIN(key1) FROM t1 WHERE key1 = 'abcdefg';
(4). Using index
当我们的查询列表以及搜索条件中只包含属于某个索引的列,也就是在可以使用索引覆盖的情况下,在 Extra 列将会提示该额外信息。
(5). Using index condition
有些搜索条件中虽然出现了索引列,但却不能使用到索引,比如下边这个查询: SELECT * FROM t1 WHERE key1 > 'z' AND key1 LIKE '%a';
在以前版本的 MySQL 中,是按照下边步骤来执行这个查询的:
a. 先根据 key1 > 'z' 这个条件,从二级索引 idx_key1 中获取到对应的二级索引记录。
b. 根据上一步骤得到的二级索引记录中的主键值进行回表,找到完整的用户记录再检测该记录是否符合 key1 LIKE '%a' 这个条件,将符合条件的记录加入到最后的结果集。

但是虽然 key1 LIKE '%a' 不能组成范围区间参与 range 访问方法的执行,但这个条件毕竟只涉及到了 key1 列,所以设计 MySQL 的大叔把上边的步骤改进了一下:
a. 先根据 key1 > 'z' 这个条件,定位到二级索引 idx_key1 中对应的二级索引记录。
b. 对于指定的二级索引记录,先不着急回表,而是先检测一下该记录是否满足 key1 LIKE '%a' 这个条件,如果这个条件不满足,则该二级索引记录压根儿就没必要回表。
c. 对于满足 key1 LIKE '%a' 这个条件的二级索引记录执行回表操作。

我们说回表操作其实是一个随机 IO ,比较耗时,所以上述修改虽然只改进了一点点,但是可以省去好多回表操作的成本。设计 MySQL 的大叔们把他们的这个改进称之为 索引条件下推 (英文名: Index Condition Pushdown )。如果在查询语句的执行过程中将要使用 索引条件下推 这个特性,在 Extra 列中将会显示 Using index condition

(6). Using where
当我们使用全表扫描来执行对某个表的查询,并且该语句的 WHERE 子句中有针对该表的搜索条件时,在 Extra 列中会提示上述额外信息。比如下边这个查询: EXPLAIN SELECT * FROM t1 WHERE common_field = 'a';

当使用索引访问来执行对某个表的查询,并且该语句的 WHERE 子句中有除了该索引包含的列之外的其他搜索条件时,在 Extra 列中也会提示上述额外信息。比如下边这个查询虽然使用 idx_key1 索引执行查询,但是搜索条件中除了包含 key1 的搜索条件 key1 = 'a' ,还有包含 common_field 的搜索条件,所以 Extra 列会显示 Using where 的提示: EXPLAIN SELECT * FROM t1 WHERE key1 = 'a' AND common_field = 'a';

(7). Using join buffer (Block Nested Loop)
在连接查询执行过程中,当被驱动表不能有效的利用索引加快访问速度, MySQL 一般会为其分配一块名叫 join buffer 的内存块来加快查询速度,也就是我们所讲的 基于块的嵌套循环算法 ,比如下边这个查询语句: EXPLAIN SELECT * FROM t1 INNER JOIN t2 ON t1.common_field = t2.common_field;
在这里插入图片描述
可以在对 t2 表的执行计划的 Extra 列显示了两个提示:
a. Using join buffer (Block Nested Loop) :这是因为对表 s2 的访问不能有效利用索引,只好退而求其次,使用 join buffer 来减少对 s2 表的访问次数,从而提高性能。
b. Using where :可以看到查询语句中有一个 t1.common_field = t2.common_field 条件,因为 t1 是驱动表, t2 是被驱动表,所以在访问 t2 表时, t1.common_field 的值已经确定下来了,所以实际上查询 t2 表的条件就是 t2.common_field = 一个常数 ,所以提示了 Using where 额外信息。

(8). Not exists
当我们使用左(外)连接时,如果 WHERE 子句中包含要求被驱动表的某个列等于 NULL 值的搜索条件,而且那个列又是不允许存储 NULL 值的,那么在该表的执行计划的 Extra 列就会提示 Not exists 额外信息,比如这样:EXPLAIN SELECT * FROM t1 LEFT JOIN t2 ON t1.key1 = t2.key1 WHERE t2.id IS NULL;

上述实例中,只有驱动表中某条记录,在被驱动表里找不到符号ON条件的记录时,驱动表此记录才会加入到最终的结果集。

(9). Using intersect(...)Using union(...)Using sort_union(...)
如果执行计划的 Extra 列出现了 Using intersect(...) 提示,说明准备使用 Intersect 索引合并的方式执行查询,括号中的 ... 表示需要进行索引合并的索引名称;如果出现了 Using union(...) 提示,说明准备使用 Union 索引合并的方式执行查询;出现了 Using sort_union(...) 提示,说明准备使用 Sort-Union 索引合并的方式执行查询。

(10). Zero limit
当我们的 LIMIT 子句的参数为 0 时,表示压根儿不打算从表中读出任何记录,将会提示该额外信息,比如这样:EXPLAIN SELECT * FROM t1 LIMIT 0;
在这里插入图片描述
(11). Using filesort
有一些情况下对结果集中的记录进行排序是可以使用到索引的,比如下边这个查询: EXPLAIN SELECT * FROM t1 ORDER BY key1 LIMIT 10;
这个查询语句可以利用 idx_key1 索引直接取出 key1 列的10条记录,然后再进行回表操作就好了。但是很多情况下排序操作无法使用到索引,只能在内存中(记录较少的时候)或者磁盘中(记录较多的时候)进行排序,设计 MySQL 的大叔把这种在内存中或者磁盘上进行排序的方式统称为文件排序(英文名:filesort )。如果某个查询需要使用文件排序的方式执行查询,就会在执行计划的 Extra 列中显示 Using
filesort 提示,比如这样: EXPLAIN SELECT * FROM t1 ORDER BY common_field LIMIT 10;

需要注意的是,如果查询中需要使用 filesort 的方式进行排序的记录非常多,那么这个过程是很耗费性能的,我们最好想办法将使用 文件排序 的执行方式改为使用索引进行排序。

(12). Using temporary
在许多查询的执行过程中, MySQL 可能会借助临时表来完成一些功能,比如去重、排序之类的,比如我们在执行许多包含 DISTINCT 、 GROUP BY 、 UNION 等子句的查询过程中,如果不能有效利用索引来完成查询,MySQL 很有可能寻求通过建立内部的临时表来执行查询。如果查询中使用到了内部的临时表,在执行计划的 Extra 列将会显示 Using temporary 提示,比方说这样: EXPLAIN SELECT DISTINCT common_field FROM t1;

执行计划中出现 Using temporary 并不是一个好的征兆,因为建立与维护临时表要付出很大成本的,所以我们最好能使用索引来替代掉使用临时表,比方说下边这个包含 GROUP BY 子句的查询就不需要使用临时表: EXPLAIN SELECT key1, COUNT(*) AS amount FROM t1 GROUP BY key1;

(13). Start temporary, End temporary
我们前边唠叨子查询的时候说过,查询优化器会优先尝试将 IN 子查询转换成 semi-join ,而 semi-join 又有好多种执行策略,当执行策略为 DuplicateWeedout 时,也就是通过建立临时表来实现为外层查询中的记录进行去重操作时,驱动表查询执行计划的 Extra 列将显示 Start temporary 提示,被驱动表查询执行计划的 Extra 列将显示 End temporary 提示,就是这样: EXPLAIN SELECT * FROM t1 WHERE key1 IN (SELECT key3 FROM t2 WHERE common_field = 'a');

(14). LooseScan
在将 In 子查询转为 semi-join 时,如果采用的是 LooseScan 执行策略,则在驱动表执行计划的 Extra 列就是显示 LooseScan 提示,比如这样: EXPLAIN SELECT * FROM t1 WHERE key3 IN (SELECT key1 FROM t2 WHERE key1 > 'z');

(15). FirstMatch(tbl_name)
在将 In 子查询转为 semi-join 时,如果采用的是 FirstMatch 执行策略,则在被驱动表执行计划的 Extra 列就是显示 FirstMatch(tbl_name) 提示,比如这样:EXPLAIN SELECT * FROM t1 WHERE common_field IN (SELECT key1 FROM t2 where t1.key3 = t2.key3);

3.Json格式的执行计划
我们上边介绍的 EXPLAIN 语句输出中缺少了一个衡量执行计划好坏的重要属性 —— 成本。不过设计 MySQL 的大叔贴心的为我们提供了一种查看某个执行计划花费的成本的方式:在 EXPLAIN 单词和真正的查询语句中间加上 FORMAT=JSON

这样我们就可以得到一个 json 格式的执行计划,里边儿包含该计划花费的成本,比如这样: EXPLAIN FORMAT=JSON SELECT * FROM t1 INNER JOIN t2 ON t1.key1 = t2.key2 WHERE t1.common_field = 'a'\G

mysql> EXPLAIN FORMAT=JSON SELECT * FROM s1 INNER JOIN s2 ON s1.key1 = s2.key2 WHERE s1.common_field = 'a'\G
*************************** 1. row ***************************
EXPLAIN: {"query_block": {"select_id": 1, # 整个查询语句只有1个SELECT关键字,该关键字对应的id号为1"cost_info": {"query_cost": "3197.16" # 整个查询的执行成本预计为3197.16},"nested_loop": [ # 几个表之间采用嵌套循环连接算法执行{"table": {"table_name": "s1", # s1表是驱动表"access_type": "ALL", # 访问方法为ALL,意味着使用全表扫描访问"possible_keys": [ # 可能使用的索引"idx_key1"],"rows_examined_per_scan": 9688, # 查询一次s1表大致需要扫描9688条记录"rows_produced_per_join": 968, # 驱动表s1的扇出是968"filtered": "10.00", # condition filtering代表的百分比"cost_info": {"read_cost": "1840.84", # 稍后解释"eval_cost": "193.76", # 稍后解释"prefix_cost": "2034.60", # 单次查询s1表总共的成本"data_read_per_join": "1M" # 读取的数据量},"used_columns": [ # 执行查询中涉及到的列"id","key1","key2","key3","key_part1","key_part2","key_part3","common_field"],# 对s1表访问时针对单表查询的条件"attached_condition": "((`xiaohaizi`.`s1`.`common_field` = 'a') and (`xiaohaizi`.`s1`.`key1` is not null))"}},{"table": {"table_name": "s2", # s2表是被驱动表"access_type": "ref", # 访问方法为ref,意味着使用索引等值匹配的方式访问"possible_keys": [ # 可能使用的索引"idx_key2"],key": "idx_key2", # 实际使用的索引"used_key_parts": [ # 使用到的索引列"key2"],"key_length": "5", # key_len"ref": [ # 与key2列进行等值匹配的对象"xiaohaizi.s1.key1"],"rows_examined_per_scan": 1, # 查询一次s2表大致需要扫描1条记录"rows_produced_per_join": 968, # 被驱动表s2的扇出是968(由于后边没有多余的表进行连接,所以这个值也没啥用)"filtered": "100.00", # condition filtering代表的百分比# s2表使用索引进行查询的搜索条件"index_condition": "(`xiaohaizi`.`s1`.`key1` = `xiaohaizi`.`s2`.`key2`)","cost_info": {"read_cost": "968.80", # 稍后解释"eval_cost": "193.76", # 稍后解释"prefix_cost": "3197.16", # 单次查询s1、多次查询s2表总共的成本"data_read_per_join": "1M" # 读取的数据量},"used_columns": [ # 执行查询中涉及到的列"id","key1","key2","key3","key_part1","key_part2","key_part3","common_field"]}}]}
}

大家可能有疑问 “cost_info” 里边的成本看着怪怪的,它们是怎么计算出来的?先看 s1 表的 “cost_info” 部分:

"cost_info": {"read_cost": "1840.84","eval_cost": "193.76","prefix_cost": "2034.60","data_read_per_join": "1M"
}

(1). read_cost 是由下边这两部分组成的:
a. IO 成本
b. 检测 rows × (1 - filter) 条记录的 CPU 成本
(2). eval_cost 是这样计算的:
检测 rows × filter 条记录的成本。
(3). prefix_cost 就是单独查询 s1 表的成本,也就是:
read_cost + eval_cost
(4). data_read_per_join 表示在此次查询中需要读取的数据量,我们就不多唠叨这个了。

对于 s2 表的 “cost_info” 部分是这样的:

"cost_info": {"read_cost": "968.80","eval_cost": "193.76","prefix_cost": "3197.16","data_read_per_join": "1M"
}

由于 s2 表是被驱动表,所以可能被读取多次,这里的 read_cost 和 eval_cost 是访问多次 s2 表后累加起来的值,大家主要关注里边儿的 prefix_cost 的值代表的是整个连接查询预计的成本,也就是单次查询 s1 表和多次查询 s2 表后的成本的和,也就是:968.80 + 193.76 + 2034.60 = 3197.16

4.Extented EXPLAIN
在我们使用 EXPLAIN 语句查看了某个查询的执行计划后,紧接着还可以使用 SHOW WARNINGS 语句查看与这个查询的执行计划有关的一些扩展信息,比如这样:EXPLAIN SELECT t1.key1, t2.key1 FROM t1 LEFT JOIN t2 ON t1.key1 = t2.key1 WHERE t2.common_field IS NOT NULL;,再执行: SHOW WARNINGS\G
在这里插入图片描述
大家可以看到 SHOW WARNINGS 展示出来的信息有三个字段,分别是 Level 、 Code 、 Message 。我们最常见的就是 Code1003 的信息,当 Code 值为 1003 时, Message 字段展示的信息类似于查询优化器将我们的查询语句重写后的语句。比如我们上边的查询本来是一个左(外)连接查询,但是有一个 t2.common_field IS NOT NULL的条件,着就会导致查询优化器把左(外)连接查询优化为内连接查询,从 SHOW WARNINGSMessage 字段也可以看出来,原本的 LEFT JOIN 已经变成了 JOIN

但是大家一定要注意,我们说 Message 字段展示的信息类似于查询优化器将我们的查询语句重写后的语句,并不是等价于,也就是说 Message 字段展示的信息并不是标准的查询语句,在很多情况下并不能直接拿到黑框框中运行,它只能作为帮助我们理解查 MySQL 将如何执行查询语句的一个参考依据而已。

本文来自互联网用户投稿,该文观点仅代表作者本人,不代表本站立场。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如若转载,请注明出处:http://www.hqwc.cn/news/313486.html

如若内容造成侵权/违法违规/事实不符,请联系编程知识网进行投诉反馈email:809451989@qq.com,一经查实,立即删除!

相关文章

react + redux 之 美团案例

1.案例展示 2.环境搭建 克隆项目到本地&#xff08;内置了基础静态组件和模版&#xff09; git clone http://git.itcast.cn/heimaqianduan/redux-meituan.git 安装所有依赖 npm i 启动mock服务&#xff08;内置了json-server&#xff09; npm run serve 启动前端服务 npm…

基于Window下的Node.js安装教程

基于Window下的Node.js安装教程 1.安装包下载安装2.安装字蚁2.1压缩字体 写这篇文章&#xff0c;主要是方便自己以后再安装&#xff0c;容易查看&#xff0c;相关内容有参考网上内容和自己想法。 1.安装包下载安装 Node官网 进入终端查看&#xff1a; echo %PATH%ec…

Linux调试工具—gdb

&#x1f3ac;慕斯主页&#xff1a;修仙—别有洞天 ♈️今日夜电波&#xff1a;HEART BEAT—YOASOBI 2:20━━━━━━️&#x1f49f;──────── 5:35 &#x1f504; ◀️ ⏸ ▶️ ☰ …

《数据结构、算法与应用C++语言描述》- 平衡搜索树 -全网唯一完整详细实现插入和删除操作的模板类

平衡搜索树 完整可编译运行代码见&#xff1a;Github::Data-Structures-Algorithms-and-Applications/_34Balanced search tree 概述 本章会讲AVL、红-黑树、分裂树、B-树。 平衡搜索树的应用&#xff1f; AVL 和红-黑树和分裂树适合内部存储的应用。 B-树适合外部存储的…

[DAU-FI Net开源 | Dual Attention UNet+特征融合+Sobel和Canny等算子解决语义分割痛点]

文章目录 概要I Introduction小结 概要 提出的架构&#xff0c;双注意力U-Net与特征融合&#xff08;DAU-FI Net&#xff09;&#xff0c;解决了语义分割中的挑战&#xff0c;特别是在多类不平衡数据集上&#xff0c;这些数据集具有有限的样本。DAU-FI Net 整合了多尺度空间-通…

基于Vite创建简单Vue3工程

首先安装node.js环境&#xff0c;没有node.js环境&#xff0c;便没有npm命令。 1、Vue3创建执行命令 D:\TABLE\test>npm create vuelatestVue.js - The Progressive JavaScript Framework√ 请输入项目名称&#xff1a; ... vue_test √ 是否使用 TypeScript 语法&#xff…

QT上位机开发(带配置文件的倒计时软件)

【 声明&#xff1a;版权所有&#xff0c;欢迎转载&#xff0c;请勿用于商业用途。 联系信箱&#xff1a;feixiaoxing 163.com】 前面我们用qt写过倒计时软件&#xff0c;但是那个时候界面只有分钟和秒钟&#xff0c;这一次我们希望在之前的基础上拓展一下。第一&#xff0c;可…

Oracle merge into 语句用法 Oracle merge into 批量更新 关联更新 批量修改 关联修改

Oracle merge into 语句用法 Oracle merge into 批量更新 关联更新 批量修改 关联修改 一、概述 在开发任务中&#xff0c;遇到一个需求&#xff0c;同一批次的名单&#xff1b;根据一定的条件判断是否存在&#xff0c;若存在&#xff0c;则进行更新操作&#xff1b;若不存在&a…

无监督关键词提取算法:TF-IDF、TextRank、RAKE、YAKE、 keyBERT

TF-IDF TF-IDF是一种经典的基于统计的方法&#xff0c;TF(Term frequency)是指一个单词在一个文档中出现的次数&#xff0c;通常一个单词在一个文档中出现的次数越多说明该词越重要。IDF(Inverse document frequency)是所有文档数比上出现某单词的个数&#xff0c;通常一个单词…

建模杂谈系列236 Block Manager

说明 很久没有写了&#xff0c;总是写一半就没空往下写。这次正好有个单独的主题&#xff0c;可以写一下。 内容 1 块的分配 数据应该怎么切分和管理&#xff1f;这没有一个固定的答案&#xff0c;在我的实践中&#xff0c;我觉得一个块(Block)一万条记录是比较合理的。然后…

3分钟了解Android中稳定性测试

一、什么是Monkey Monkey在英文里的含义是猴子&#xff0c;在测试行业的学名叫“猴子测试”&#xff0c;指的是没有测试经验的人甚至是根本不懂计算机的人&#xff08;就像一只猴子&#xff09;&#xff0c;不需要知道程序的任何用户交互方面的知识&#xff0c;给他一个程序&a…

Apache OFBiz RCE漏洞复现(CVE-2023-51467)

0x01 产品简介 Apache OFBiz是一个电子商务平台,用于构建大中型企业级、跨平台、跨数据库、跨应用服务器的多层、分布式电子商务类应用系统。 0x02 漏洞概述 漏洞成因 该系统的身份验证机制存在缺陷,可能允许未授权用户通过绕过标准登录流程来获取后台访问权限。此外,在…