使用limit分页，在大量数据情况下，效率什么样？

billyou 2003-10-16 11:26:33

使用limit分页，在大量数据情况下，效率什么样？如：
select * from table limit x,x
一直用ASP，问问

...全文

183 3 打赏收藏转发到动态举报

写回复

3 条回复

切换为时间正序

请发表友善的回复…

发表回复

billyou 2003-10-16

打赏
举报

回复

肯定有索引

xuzuning 2003-10-16

打赏
举报

回复

有索引和无索引区别很大

blueoxygen 2003-10-16

打赏
举报

回复

效率比较低，可以看这篇讨论.
http://www.phpx.com/happy/showthread.php?s=ef1c7cb1dbe955c00d83bd0652580b2f&threadid=46443

在 MySQL 中通常我们使用 limit 来完成页面上的分页功能，但是当数据量达到一个很大的值之后，越往后翻页，接口的响应速度就越慢。本文主要讨论 limit 分页大偏移量慢的原因及优化方案，为了模拟这种情况，下面首先介绍表结构和执行的 SQL。场景模拟建表语句user 表的结构比较简单，id、sex 和 name，为了让 SQL 的执行时间变化更加明显，这里有9个姓名列。CREATE TABL...

比limit size要慢，且offset的值越大，sql的执行速度越慢。当offset过大，会引发深度分页问题，目前不管是mysql还是es都没有很好的方法去解决这个问题。只能通过限制查询数量或分批获取的方式进行规避。遇到深度分页的问题，多思考其原始需求，大部分时候是不应该出现深度分页的场景的，必要时多去影响产品经理。如果数据量很少，比如1k的量级，且长期不太可能有巨大的增长，还是用的方案吧，整挺好，能用就行。...

然后再用这100个id去跟t1表做id匹配，此时走的是主键索引，将匹配到的100条行数据返回。当然，这种写法存在一定问题，如果第0页的id=5的数据被删除了，就会导致查询第0页的数据和第1页的数据有重合，第0页是1-4，6-11（默认一页10条数据，因为limit10，所以会查询到id=11），第二页就是11-20，可见id=11重合了。但不同的地方在于，在返回server层的过程中，只会拷贝数据行内的id这一列，而不会拷贝数据行的所有列，当数据量较大时，这部分的耗时还是比较明显的。...

基本概念流式查询指的是查询成功后不是返回一个集合而是返回一个迭代器，应用每次从迭代器取一条查询结果。流式查询的好处是能够降低内存使用。如果没有流式查询，我们想要从数据库取 1000 万条记录而又没有足够的内存时，就不得不分页查询，而分页查询效率取决于表设计，如果设计的不好，就无法执行高效的分页查询。因此流式查询是一个数据库访问框架必须具备的功能。流式查询的过程当中，数据库连接是保持打开状态的， MyBatis 流式查询接口 MyBatis 提供了一个叫org.apache.ibatis...

刷网站的时候，我们经常会遇到需要分页查询的场景。比如下图红框里的翻页功能。我们很容易能联想到可以用mysql实现。假设我们的建表sql是这样的mysql建表sql建表sql大家也不用扣细节，只需要知道id是主键，并且在user_name建了个非主键索引就够了，其他都不重要。为了实现分页。很容易联想到下面这样的sql语句。select*frompageorderb...

21,886

社区成员

140,365

社区内容

发帖

与我相关

我的任务

社区管理员

加入社区

近7日
近30日
至今

加载中

查看更多榜单

社区公告

暂无公告

试试用AI创作助手写篇文章吧

+ 用AI写文章