在MySQL中如何避免分页查询LIMIT 1000000时的严重性能衰减

酷静吖_5873

酷静吖_5873

2026-09-22

246人浏览

原创

limit 1000000, 10会扫描1000010行,因mysql需逐行计数并丢弃前100万行;若order by未走覆盖索引,每行还需回表,导致io与cpu开销线性增长。

在mysql中如何避免分页查询limit 1000000时的严重性能衰减

为什么LIMIT 1000000, 10会扫100万行才出结果

MySQL执行LIMIT offset, size时,不会跳过前offset行,而是从头开始逐行扫描、计数,直到累计读满offset + size行,再丢弃前offset行。所以LIMIT 1000000, 10实际要读取并处理1000010行数据。

更关键的是:如果查询带ORDER BY且该字段没走覆盖索引,MySQL每扫一行就要回表一次——主键索引树上找ID,再回聚簇索引捞整行。IO和CPU开销随offset线性增长,不是“慢一点”,是“指数级恶化”。

常见错误现象包括:

  • EXPLAIN显示rows值极大(比如 >50万),但Extra里还有Using filesortUsing temporary
  • 同一语句在测试库秒出,在生产库查5秒以上,且offset每加10万,耗时明显递增
  • 慢日志里频繁出现Query_time: 3.212Rows_examined: 451350这类组合

延迟关联:最通用的SQL层优化写法

核心思路是把“查全量记录”拆成两步:第一步只走索引(甚至覆盖索引),快速捞出目标id;第二步用这些id精准回表。避免大范围扫描和无效回表。

实操建议如下:

  • 子查询必须只SELECT id,且ORDER BY字段需有索引(最好是主键或联合索引最左前缀)
  • 外层用JOININ更可靠——MySQL 8.0以前不支持IN子句里用LIMIT
  • 复合条件(如WHERE update_time > '2025-01-01')必须下推到子查询中,否则外层JOIN会放大结果集

示例语句:

MySQL
MySQL

编写正确的MySQL查询,避免字符集、索引和锁方面的常见陷阱。

下载
SELECT a.* FROM account a
INNER JOIN (
  SELECT id FROM account 
  WHERE update_time > '2025-01-01' 
  ORDER BY id 
  LIMIT 1000000, 10
) b ON a.id = b.id;

游标分页:性能最强,但业务要配合

适用于“一页页往下刷”的场景(如APP下拉加载、Feed流),直接用上一页最后一条记录的id(或时间戳+主键组合)作为下一页起点。MySQL只需在主键B+树叶子节点链表上往后走size条,完全规避偏移计算。

实操要点:

  • 第一页:先查SELECT * FROM orders ORDER BY id DESC LIMIT 10,拿到最后一条的id(比如9990
  • 第二页:改用SELECT * FROM orders WHERE id
  • 若排序字段非主键(如create_time),需用复合条件避免重复/漏数据:WHERE create_time

优势是无论翻到第几亿条,性能都和第一页一样快;缺点是无法支持随机跳页(如直接点第1000页)。

子查询定位起始ID:支持跳页但要注意边界

当用户必须能输入任意页码(比如后台管理页),可用子查询先查出第M条的id,再用WHERE id >=取数据:

SELECT * FROM orders 
WHERE id >= (SELECT id FROM orders ORDER BY id LIMIT 1000000, 1) 
ORDER BY id 
LIMIT 10;

这个写法比延迟关联少一次JOIN,但有两个易踩的坑:

  • 子查询LIMIT 1000000, 1返回的是第1000001个id,但如果该id对应多条记录(比如id不是主键、或有重复排序值),外层可能查出超过10条
  • 如果排序字段存在大量相同值(如status字段只有0/1),ORDER BY status, id必须写全,否则结果不稳定
  • MySQL 5.7对子查询中LIMIT的支持较弱,建议升级到8.0+并确认执行计划是否走索引

真正难的不是写出某条优化SQL,而是判断当前业务能不能接受游标分页、要不要为跳页牺牲一致性、以及有没有漏掉WHERE条件下推——这些细节一错,优化就变负优化。

相关文章

数码产品性能查询
数码产品性能查询

该软件包括了市面上所有手机CPU,手机跑分情况,电脑CPU,电脑产品信息等等,方便需要大家查阅数码产品最新情况,了解产品特性,能够进行对比选择最具性价比的商品。

下载

相关标签:

mysql

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
mysql修改数据表名
mysql修改数据表名

MySQL修改数据表:1、首先查看数据库中所有的表,代码为:‘SHOW TABLES;’;2、修改表名,代码为:‘ALTER TABLE 旧表名 RENAME [TO] 新表名;’。php中文网还提供MySQL的相关下载、相关课程等内容,供大家免费下载使用。

2023.06.20

1913

6

MySQL创建存储过程
MySQL创建存储过程

存储程序可以分为存储过程和函数,MySQL中创建存储过程和函数使用的语句分别为CREATE PROCEDURE和CREATE FUNCTION。使用CALL语句调用存储过程智能用输出变量返回值。函数可以从语句外调用(通过引用函数名),也能返回标量值。存储过程也可以调用其他存储过程。php中文网还提供MySQL创建存储过程的相关下载、相关课程等内容,供大家免费下载使用。

2023.06.21

1179

5

mongodb和mysql的区别
mongodb和mysql的区别

mongodb和mysql的区别:1、数据模型;2、查询语言;3、扩展性和性能;4、可靠性。本专题为大家提供mongodb和mysql的区别的相关的文章、下载、课程内容,供大家免费下载体验。

2023.07.18

695

5

mysql密码忘了怎么查看
mysql密码忘了怎么查看

MySQL是一个关系型数据库管理系统,由瑞典MySQL AB 公司开发,属于 Oracle 旗下产品。MySQL 是最流行的关系型数据库管理系统之一,在 WEB 应用方面,MySQL是最好的 RDBMS 应用软件之一。那么mysql密码忘了怎么办呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.07.19

2472

5

mysql创建数据库
mysql创建数据库

MySQL是一个关系型数据库管理系统,由瑞典MySQL AB 公司开发,属于 Oracle 旗下产品。MySQL 是最流行的关系型数据库管理系统之一,在 WEB 应用方面,MySQL是最好的 RDBMS 应用软件之一。那么mysql怎么创建数据库呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.07.25

4048

4

mysql默认事务隔离级别
mysql默认事务隔离级别

MySQL是一种广泛使用的关系型数据库管理系统,它支持事务处理。事务是一组数据库操作,它们作为一个逻辑单元被一起执行。为了保证事务的一致性和隔离性,MySQL提供了不同的事务隔离级别。php中文网给大家带来了相关的教程以及文章欢迎大家前来学习阅读。

2023.08.08

979

3

sqlserver和mysql区别
sqlserver和mysql区别

SQL Server和MySQL是两种广泛使用的关系型数据库管理系统。它们具有相似的功能和用途,但在某些方面存在一些显著的区别。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.08.11

4331

4

mysql忘记密码
mysql忘记密码

MySQL是一种关系型数据库管理系统,关系数据库将数据保存在不同的表中,而不是将所有数据放在一个大仓库内,这样就增加了速度并提高了灵活性。那么忘记mysql密码我们该怎么解决呢?php中文网给大家带来了相关的教程以及其他关于mysql的文章,欢迎大家前来学习阅读。

2023.08.14

3922

7

mysql事务隔离级别
mysql事务隔离级别

mysql规范中定义了四种事务隔离级别,不同的隔离级别对事务的处理有所不同。本专题为大家提供mysql事务隔离级别相关的文章内容,大家可以免费体验。

2023.08.16

5034

11

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
PostgreSQL vs MySQL
PostgreSQL vs MySQL

共1课时 | 169人学习

使用phpenv集成环境安装极致CMS
使用phpenv集成环境安装极致CMS

共2课时 | 273人学习