Mysql百万级分页优化技巧

时间:2021-08-28 01:27:44

普通分页

   数据分页在网页中十分多见,分页一般都是limit start,offset,然后根据页码page计算start

?
1
select * from user limit 1,20

   这种分页在几十万的时候分页效率就会比较低了,MySQL需要从头开始一直往后计算,这样大大影响效率

?
1
2
SELECT * from user limit 100001,20; //time 0.151s
explain SELECT * from user limit 100001,20;

  我们可以用explain分析下语句,没有用到任何索引,MySQL执行的行数是16W+,于是我们可以想用到索引去实现分页

Mysql百万级分页优化技巧

   优化分页

   使用主键索引来优化数据分页

?
1
select * from user where id>(select id from user where id>=100000 limit 1) limit 20; //time 0.003s

  使用explain分析语句,MySQL这次扫描的行数是8W+,时间也大大缩短。

?
1
explain select * from user where id>(select id from user where id>=100000 limit 1) limit 20;

Mysql百万级分页优化技巧

     总结

  在数据量比较大的时候,我们尽量去利用索引来优化语句。上面的优化方法如果id不是主键索引,查询效率比第一种还要低点。我们可以先使用explain来分析语句,查看语句的执行顺序和执行性能。

补充:mysql中百万级别分页查询性能优化

前提条件:

1.表的唯一索引

2.百万级数据

SQL语句:

?
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
select
     c.*
     FROM
  (
  SELECT
   a.logid
  FROM
   tableA a
  where 1 = 1
     <#if phone?exists&& phone!="">
      AND a.phone like "%":phone"%"
     </#if>
   ORDER BY
    a.create_time DESC
   limit :startIndex,:maxCount
  ) b,tableA c
  where 1 = 1 AND b.logid = c.logid

其中:

1:startIndex:表示查找数据的开始位置

2:maxCount:表示每页显示数据个数

3:a.create_time DESC:降序排列,需要在create_time建立索引

4:limiit放在里面,而不要放在查询的外面,这样效率提升很多

5:logid:唯一索引