mysql分页时offset过大的Sql优化经验分享
作者:MartinDai
mysql分页是我们在开发经常遇到的一个功能,最近在实现该功能的时候遇到一个问题,所以这篇文章主要给大家介绍了关于mysql分页时offset过大的Sql优化经验,文中介绍的非常详细,对大家的学习或者工作具有一定的参考学习价值,需要的朋友们下面跟着小编来一起看看吧。
发现问题
当我们展示一个列表中的内容时,难免会遇到分页问题,因为列表中的内容数量可能很多,但是用户能一次看到的界面大小是有限的,不可能一个界面展示所有的内容,从后端一次性取太多的数据也会给后端造成额外的压力。
通常分页查询的时候会使用这样的语句:
SELECT * FROM table where condition1 = 0 and condition2 = 0 and condition3 = -1 and condition4 = -1 order by id asc LIMIT 2000 OFFSET 50000
当offset特别大时,这条语句的执行效率会明显减低,而且效率是随着offset的增大而降低的。
原因为:
MySQL并不是跳过offset行,而是取offset+N行,然后返回放弃前offset行,返回N行,当offset特别大,然后单条数据也很大的时候,每次查询需要获取的数据就越多,自然就会很慢。
优化方案:
SELECT * FROM table JOIN (select id from table where condition1 = 0 and condition2 = 0 and condition3 = -1 and condition4 = -1 order by id asc LIMIT 2000 OFFSET 50000) as tmp using(id)
或者
SELECT a.* FROM table a, (select id from table where condition1 = 0 and condition2 = 0 and condition3 = -1 and condition4 = -1 order by id asc LIMIT 2000 OFFSET 50000) b where a.id = b.id
先获取主键列表,再通过主键查询目标数据,即使offset很大,也是获取了很多的主键,而不是所有的字段数据,相对而言效率会提升很多。
总结
以上就是这篇文章的全部内容了,希望本文的内容对大家的学习或者工作能带来一定的帮助,如果有疑问大家可以留言交流,谢谢大家对脚本之家的支持。
您可能感兴趣的文章:
- MySql分页时使用limit+order by会出现数据重复问题解决
- 为什么MySQL分页用limit会越来越慢
- mysql分页的limit参数简单示例
- 浅谈MySQL分页Limit的性能问题
- MySQL分页Limit的优化过程实战
- mysql分页性能探索
- 浅析Oracle和Mysql分页的区别
- SpringMVC+Mybatis实现的Mysql分页数据查询的示例
- 利用Spring MVC+Mybatis实现Mysql分页数据查询的过程详解
- MySQL分页分析原理及提高效率
- MySQL优化案例系列-mysql分页优化
- 你应该知道的PHP+MySQL分页那点事
- MYSQL分页limit速度太慢的优化方法
- MySQL分页优化
- MySQL分页技术、6种分页方法总结
- 8种MySQL分页方法总结
- mysql分页原理和高效率的mysql分页查询语句
- MySQL的几种分页方式,你知道几种方式