眼睁睁地踩到 MySQL in 子查询的“坑”

眼睁睁地踩到 MySQL in 子查询的“坑”

PlatformDev 360云计算

女主宣言

什么情况? 一个简单的 SQL 子查询,在几万条记录中查询,竟然用了 33 秒!快来看看,怎么跳过这个坑。
PS:丰富的一线技术、多元化的表现形式,尽在“HULK一线技术杂谈”,点关注哦!

前言

MySQL 是项目中常用的数据库,其中 in 查询也是很常用。最近项目调试过程中,遇到一个出乎意料的 select 查询,竟然用了 33 秒!

一、表结构

1. userinfo 表
眼睁睁地踩到 MySQL in 子查询的“坑”

2. article 表
眼睁睁地踩到 MySQL in 子查询的“坑”

二、问题 SQL 实例

select * from userinfo where id in (select author_id from artilce where type = 1);

大家第一眼看到上面的 SQL 时,可能都会觉得这是一个很简单的子查询。先把 author_id 查出来,再用 in 查询一下。

如果有相关索引会非常快的,拆解来讲就是以下这样的:

  1. select author_id from artilce where type = 1;
  2. select * from userinfo where id in (1,2,3);

但是事实是这样的:

mysql> select count(*) from userinfo;
眼睁睁地踩到 MySQL in 子查询的“坑”

mysql> select count(*) from article;
眼睁睁地踩到 MySQL in 子查询的“坑”

mysql> select id,username from userinfo where id in (select author_id from article where type = 1);
眼睁睁地踩到 MySQL in 子查询的“坑”

33 秒!为什么会这么慢呢?

三、问题原因

官方文档解释:in 子句在查询的时候有时会被转换为 exists 的方式来执行,变成逐条记录进行遍历(版本 5.5 中存在,5.6 中已做优化)。

眼睁睁地踩到 MySQL in 子查询的“坑”
参考:
https://dev.mysql.com/doc/refman/5.5/en/subquery-optimization.html

四、解决方式(版本 5.5)

1. 使用临时表


select id,username from userinfo 
where id in (select author_id from 
    (select author_id from article where type = 1) as tb
);

眼睁睁地踩到 MySQL in 子查询的“坑”

2. 使用 join


select a.id,a.username from userinfo a, article b 
where a.id = b.author_id and b.type = 1;

眼睁睁地踩到 MySQL in 子查询的“坑”

五、补充

版本 5.6 已针对子查询做了优化,方式跟【四】中的临时表方式一样,参考官方文档:


If materialization is not used, the optimizer sometimes rewrites a noncorrelated subquery as a correlated subquery.

For example, the following IN subquery is noncorrelated  ( where_condition involves only columns from t2 and not t1 ):

select * from t1 
where t1.a in (select t2.b from t2 where where_condition);

The optimizer might rewrite this as an EXISTS correlated subquery:

select * from t1 
where exists (select t2.b from t2 where where_condition and t1.a=t2.b);

Subquery materialization using a temporary table avoids such rewrites and makes it possible to execute the subquery only once rather than once per row of the outer query.

https://dev.mysql.com/doc/refman/5.6/en/subquery-materialization.html

眼睁睁地踩到 MySQL in 子查询的“坑”

上一篇:Centos7 安装mysql-8.0.22


下一篇:ps里面怎么填充颜色?ps填充颜色方法介绍