mysql如何实现排行榜实时更新_mysql内存表与索引优化

星涛姑娘_1296

星涛姑娘_1296

2026-04-11

906人浏览

原创

mysql如何实现排行榜实时更新_mysql内存表与索引优化

排行榜实时更新卡顿,先看是不是在用普通 InnoDB 表做高频 UPDATE

MySQL 排行榜卡,90% 的情况不是逻辑写得烂,而是表结构和更新方式没对齐场景。InnoDB 每次 UPDATE 都要走 redo log + buffer pool + 索引树维护,如果每秒几百次用户积分变更还带 ORDER BY score DESC LIMIT 100 查,磁盘 I/O 和锁竞争立刻拉满。

实操建议:

  • 把排行榜核心字段(如 user_id、score、updated_at)单独拆进一张轻量表,只保留必要索引 —— 至少删掉所有非查询用的冗余字段和索引
  • 避免在排行榜表里存昵称、头像等大字段;这些信息查出来后用 JOIN users 或应用层异步补全
  • 如果更新频率 > 50 QPS,直接放弃对原表 UPDATE ... ORDER BY 的幻想,改用“写缓冲 + 定时合并”策略(见下一条)

用 MEMORY 表做实时榜单?小心重启丢数据和内存爆掉

MEMORY 表确实快,但它是把整张表塞进内存、不落盘。一旦 MySQL 重启、OOM Killer 干掉 mysqld,或执行了 TRUNCATE TABLE,数据就没了 —— 这不是 bug,是设计如此。

实操建议:

  • 只用 MEMORY 表存“最终展示用”的精简榜单(比如 top100 视图),每天定时从主表 INSERT INTO top100 SELECT ... ORDER BY score DESC LIMIT 100 刷新一次
  • MAX_HEAP_TABLE_SIZE 必须显式调大,默认 16MB 很容易撑爆;设成 256M 前先算:100 万用户 ×(4 字节 user_id + 8 字节 score + 4 字节 rank)≈ 16MB,留点余量再翻倍
  • 别在 MEMORY 表上建 HASH 索引还用来 ORDER BY —— HASH 索引不支持范围和排序,ORDER BY 会强制全表扫描

score 字段没加索引?ORDER BY score DESC LIMIT N 就是全表扫

很多人以为“反正就查前 100 条”,不建索引也无所谓。错。MySQL 不知道你要的是 TopN,它得先把所有行按 score 排一遍,再取前 N —— 数据量一过 10 万,EXPLAIN 里立马出现 Using filesort。

MySQL
MySQL

编写正确的MySQL查询,避免字符集、索引和锁方面的常见陷阱。

下载

实操建议:

  • 给 score 加单独索引:ALTER TABLE leaderboard ADD INDEX idx_score (score);如果还要按时间衰减(比如最近 7 天),就建联合索引:ADD INDEX idx_score_updated (score, updated_at)
  • 注意 score 类型:用 INT 或 BIGINT,别用 DECIMAL(10,2) —— 浮点类排序性能差,且可能因精度导致相同分数排名错乱
  • 如果业务允许“近似 TopN”,可以用采样查询:SELECT * FROM leaderboard TABLESAMPLE SYSTEM (5) ORDER BY score DESC LIMIT 100(MySQL 8.0.23+ 支持)

真正扛住高并发更新的方案:异步聚合 + 缓存兜底

硬刚数据库永远是最笨的办法。真实生产环境里,没人靠纯 SQL 实时刷排行榜。核心思路是:把“写”和“读”彻底解耦。

实操建议:

  • 用户积分变更不直接 UPDATE leaderboard,而是发到消息队列(如 Kafka / Pulsar),由消费者批量聚合(比如每 1 秒合并同用户的多次变更)再落地
  • 前端查榜优先走 Redis:ZADD leaderboard:week user_id score + ZREVRANGE leaderboard:week 0 99 WITHSCORES,MySQL 只作为兜底和对账源
  • 如果必须强一致,用 MySQL 8.0 的 SET PERSIST sort_buffer_size = 4194304 调大排序缓存,但别指望靠这个救活设计缺陷

最常被忽略的一点:排行榜的“实时”到底指什么?是秒级?毫秒级?还是用户感知不到延迟就行?把这个问题问清楚,比调任何参数都管用。

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

mysql

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
数据分析工具有哪些
数据分析工具有哪些

数据分析工具有Excel、SQL、Python、R、Tableau、Power BI、SAS、SPSS和MATLAB等。详细介绍:1、Excel,具有强大的计算和数据处理功能;2、SQL,可以进行数据查询、过滤、排序、聚合等操作;3、Python,拥有丰富的数据分析库;4、R,拥有丰富的统计分析库和图形库;5、Tableau,提供了直观易用的用户界面等等。

2023.10.12

4343

8

SQL中distinct的用法
SQL中distinct的用法

SQL中distinct的语法是“SELECT DISTINCT column1, column2,...,FROM table_name;”。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.27

911

4

SQL中months_between使用方法
SQL中months_between使用方法

在SQL中,MONTHS_BETWEEN 是一个常见的函数,用于计算两个日期之间的月份差。想了解更多SQL的相关内容,可以阅读本专题下面的文章。

2024.02.23

1129

5

SQL出现5120错误解决方法
SQL出现5120错误解决方法

SQL Server错误5120是由于没有足够的权限来访问或操作指定的数据库或文件引起的。想了解更多sql错误的相关内容,可以阅读本专题下面的文章。

2024.03.06

6261

10

sql procedure语法错误解决方法
sql procedure语法错误解决方法

sql procedure语法错误解决办法:1、仔细检查错误消息;2、检查语法规则;3、检查括号和引号;4、检查变量和参数;5、检查关键字和函数;6、逐步调试;7、参考文档和示例。想了解更多语法错误的相关内容,可以阅读本专题下面的文章。

2024.03.06

3083

4

oracle数据库运行sql方法
oracle数据库运行sql方法

运行sql步骤包括:打开sql plus工具并连接到数据库。在提示符下输入sql语句。按enter键运行该语句。查看结果,错误消息或退出sql plus。想了解更多oracle数据库的相关内容,可以阅读本专题下面的文章。

2024.04.07

6240

11

sql中where的含义
sql中where的含义

sql中where子句用于从表中过滤数据,它基于指定条件选择特定的行。想了解更多where的相关内容,可以阅读本专题下面的文章。

2024.04.29

8441

6

sql中删除表的语句是什么
sql中删除表的语句是什么

sql中用于删除表的语句是drop table。语法为drop table table_name;该语句将永久删除指定表的表和数据。想了解更多sql的相关内容,可以阅读本专题下面的文章。

2024.04.29

1150

5

sql中删除一列的命令是什么
sql中删除一列的命令是什么

在sql中,使用alter table语句可以删除一列,语法为:alter table table_name drop column column_name。想了解更多sql的相关内容,可以阅读本专题下面的文章。

2024.04.29

1012

5

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
PostgreSQL vs MySQL
PostgreSQL vs MySQL

共1课时 | 188人学习