SQL优化 - 避免使用 IN 和 NOT IN

时间:2022-11-24 13:03:14

WHY?

  • IN 和 NOT IN 是比较常用的关键字,为什么要尽量避免呢?

1、效率低

  • 项目中遇到这么个情况:
  • t1表 和 t2表  都是150w条数据,600M的样子,都不算大。
  • 但是这样一句查询 
    select * from t1 where phone not in (select phone from t2)
  • 直接就把我跑傻了。。。十几分钟,检查了一下  phone在两个表都建了索引,字段类型也是一样的。原来not in 是不能命中索引的。。。。
  • 改成 NOT EXISTS 之后查询 20s ,效率真的差好多。
    1.  
      select * from t1
    2.  
      where not EXISTS (select phone from t2 where t1.phone =t2.phone)
     

2、容易出现问题,或查询结果有误 (不能更严重的缺点)

  • 以 IN 为例。建两个表:test1 和 test2
    1.  
      create table test1 (id1 int)
    2.  
      create table test2 (id2 int)
    3.  
       
    4.  
      insert into test1 (id1) values (1),(2),(3)
    5.  
      insert into test2 (id2) values (1),(2)
     
  • 我想要查询,在test2中存在的  test1中的id 。使用IN的一般写法是:
    1.  
      select id1 from test1
    2.  
      where id1 in (select id2 from test2)
 
  • 结果是:SQL优化 - 避免使用 IN 和 NOT IN OK 木有问题!
  • 但是如果我一时手滑,写成了:
    1.  
      select id1 from test1
    2.  
      where id1 in (select id1 from test2)
 
  • 不小心把id2写成id1了 ,会怎么样呢?
  • 结果是:SQL优化 - 避免使用 IN 和 NOT IN EXCUSE ME! 为什么不报错? 
    1.  
      单独查询 select id1 from test2 是一定会报错: 消息 207,级别 16,状态 1,第 11 行 列名 'id1' 无效。
    2.  
      然而使用了IN的子查询就是这么敷衍,直接查出 1 2 3
  • 这仅仅是容易出错的情况,自己不写错还没啥事儿,下面来看一下 NOT IN 直接查出错误结果的情况:
  • 给test2插入一个空值:
     
insert into test2 (id2) values (NULL)
  • 我想要查询,在test2中不存在的  test1中的id 。
    1.  
      select id1 from test1
    2.  
      where id1 not in (select id2 from test2)
  • 结果是:SQL优化 - 避免使用 IN 和 NOT IN空白! 显然这个结果不是我们想要的。我们想要3。为什么会这样呢?
  • 原因是:NULL不等于任何非空的值啊!如果id2只有1和2, 那么3<>1 且 3<>2 所以3输出了,但是 id2包含空值,那么 3也不等于NULL 所以它不会输出。

  1. (跑题一句:建表的时候最好不要允许含空值,否则问题多多。)
 

HOW?

1、用 EXISTS 或 NOT EXISTS 代替

  1.  
    select * from test1
  2.  
    where EXISTS (select * from test2 where id2 = id1 )
  3.  
    select * FROM test1
  4.  
    where NOT EXISTS (select * from test2 where id2 = id1 )

2、用JOIN 代替

  1.  
    select id1 from test1
  2.  
    INNER JOIN test2 ON id2 = id1
  3.  
    select id1 from test1
  4.  
    LEFT JOIN test2 ON id2 = id1
  5.  
    where id2 IS NULL

妥妥的没有问题了!

  • PS:那我们死活都不能用 IN 和 NOT IN 了么?并没有,一位大神曾经说过,如果是确定且有限的集合时,可以使用。如 IN (0,1,2)。