普通分页
数据分页在网页中十分多见,分页一般都是limit start,offset,然后根据页码page计算start
1
|
select * from user limit 1,20
|
这种分页在几十万的时候分页效率就会比较低了,MySQL需要从头开始一直往后计算,这样大大影响效率
1
2
|
SELECT * from user limit 100001,20; // time 0.151s
explain SELECT * from user limit 100001,20;
|
我们可以用explain分析下语句,没有用到任何索引,MySQL执行的行数是16W+,于是我们可以想用到索引去实现分页
优化分页
使用主键索引来优化数据分页
1
|
select * from user where id>( select id from user where id>=100000 limit 1) limit 20; // time 0.003s
|
使用explain分析语句,MySQL这次扫描的行数是8W+,时间也大大缩短。
1
|
explain select * from user where id>( select id from user where id>=100000 limit 1) limit 20;
|
总结
在数据量比较大的时候,我们尽量去利用索引来优化语句。上面的优化方法如果id不是主键索引,查询效率比第一种还要低点。我们可以先使用explain来分析语句,查看语句的执行顺序和执行性能。
补充:mysql中百万级别分页查询性能优化
前提条件:
1.表的唯一索引
2.百万级数据
SQL语句:
1
2
3
4
5
6
7
8
9
10
11
12
13
14
15
16
17
|
select
c.*
FROM
(
SELECT
a.logid
FROM
tableA a
where 1 = 1
<#if phone?exists&& phone!= "" >
AND a.phone like "%" :phone "%"
</#if>
ORDER BY
a.create_time DESC
limit :startIndex,:maxCount
) b,tableA c
where 1 = 1 AND b.logid = c.logid
|
其中:
1:startIndex:表示查找数据的开始位置
2:maxCount:表示每页显示数据个数
3:a.create_time DESC:降序排列,需要在create_time建立索引
4:limiit放在里面,而不要放在查询的外面,这样效率提升很多
5:logid:唯一索引