如何使用Redis Lua脚本实现分布式ID生成器?

P粉602998670

P粉602998670

2026-07-31

368人浏览

原创

不能直接用incr生成全局唯一id,因为redis cluster中incr仅作用于单个slot,跨slot无法保证原子递增;若分片键路由到不同节点,会导致id重复,这是设计使然而非bug;必须通过hash tag(如{idgen})强制所有key落同一slot,否则lua脚本执行会因crossslot错误被服务端直接拒绝。

如何使用redis lua脚本实现分布式id生成器?

为什么不能直接用 INCR 生成全局唯一ID?

单机 Redis 用 INCR 没问题,但集群模式下 INCR 只作用于单个 slot,跨 slot 无法保证原子递增。如果业务分片键(如 user_id)路由到不同节点,INCR 就会生成重复 ID —— 这不是 bug,是 Redis Cluster 的设计使然。

常见错误是把 INCR 包进 Lua 脚本再 EVAL,以为能“跨节点原子”,其实不行:Lua 脚本执行前,Redis 仍要根据 key 算出所属 slot,脚本只能在那个 slot 所在节点运行,其他节点完全不参与。

所以必须让所有 ID 生成请求落到同一个 slot。办法只有一个:强制所有 key hash 到同一 slot,靠 {} 标记 hash tag:

redis-cli --eval idgen.lua , '{idgen}'

EVAL 脚本里怎么安全地生成带时间戳的 ID?

分布式 ID 通常需要时间有序、无冲突、可排序,常见方案是 Snowflake 变种。Lua 里拿不到毫秒级时间戳(redis.call('TIME') 只返回秒+微秒,且不精确),所以得靠客户端传入 current_ms 参数,由调用方保证单调递增(比如用 System.currentTimeMillis()process.hrtime())。

脚本核心逻辑是:读取上一个时间戳和序列号 → 若时间相同则序列号 +1,否则重置为 0 → 更新并返回组合 ID。

关键点:

Redis 8.2.3
Redis 8.2.3

Redis 8.2.3 是一款安全优先的高性能键值存储系统。该版本紧急修复了可能引发远程代码执行(RCE)的高危漏洞(CVE-2025-62507),并解决了 HyperLogLog 及 Cuckoo Filter 等数据结构在特定场景下的崩溃问题。建议所有用户立即升级,以保障生产环境的系统稳定与数据安全。

下载
  • 必须用 redis.call('GET', KEYS[1]) 读旧值,不能用 redis.pcall(它捕获异常但不中断脚本,容易掩盖逻辑错误)
  • 序列号上限建议设为 4095(12 bit),超过就阻塞等待下一毫秒 —— Lua 里没法 sleep,所以得由客户端处理等待
  • 拼接 ID 时用 string.format('%d%04d', ts, seq),避免整数溢出(Redis number 是 53-bit IEEE754,大 ID 用字符串更稳)

如何保证 Lua 脚本在集群中只运行在一个 slot?

这是最容易被忽略的硬性前提。Redis Cluster 要求脚本里所有 key 必须落在同一 slot,否则报错 CROSSSLOT Keys in request don't hash to the same slot

解决方法只有两个:

  • 所有 key 都带相同 hash tag,例如 idgen:{shard1}seq:{shard1},其中 {shard1} 决定 slot
  • 或者只用一个 key,把时间戳和序列号存成 JSON 字符串,比如 GETSET idgen:{global} '{"ts":1717023456123,"seq":12}'

别试图用 KEYS[1]KEYS[2] 分开存 —— 即使你传入 {idgen}{seq},只要花括号内容不同,就可能路由到不同节点。

客户端调用时要注意哪些坑?

脚本本身没问题,但客户端一不小心就掉坑里:

  • Java Jedis 要用 jedis.eval(script, Collections.singletonList("{idgen}"), Arrays.asList(currentMsStr)),注意 KEYSListARGVList,顺序不能错
  • Python redis-py 的 eval(script, 1, '{idgen}', current_ms) 第二个参数是 key 数量,不是 key 列表,容易写错
  • Node.js ioredis 支持 eval(script, ['{idgen}'], [currentMs]),但若用了 pipeline,必须确保所有命令都指向同一 slot,否则 pipeline 会失败
  • 超时设置要宽松些:Lua 脚本默认最大执行时间是 5 秒(lua-time-limit),序列号重置等待逻辑如果卡住,可能触发 BUSY 错误

真正麻烦的是时钟漂移 —— 如果客户端时间回拨,生成的 ID 会变小,破坏单调性。生产环境必须校准 NTP,或改用混合逻辑(比如用 Redis 的 TIME 做基准,客户端只提供 delta)。

相关专题

更多
什么是分布式
什么是分布式

分布式是一种计算和数据处理的方式,将计算任务或数据分散到多个计算机或节点中进行处理。本专题为大家提供分布式相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.11

1495

5

分布式和微服务的区别
分布式和微服务的区别

分布式和微服务的区别在定义和概念、设计思想、粒度和复杂性、服务边界和自治性、技术栈和部署方式等。本专题为大家提供分布式和微服务相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.07

1355

5

常用的数据库软件
常用的数据库软件

常用的数据库软件有MySQL、Oracle、SQL Server、PostgreSQL、MongoDB、Redis、Cassandra、Hadoop、Spark和Amazon DynamoDB。更多关于数据库软件的内容详情请看本专题下面的文章。php中文网欢迎大家前来学习。

2023.11.02

1907

19

内存数据库有哪些
内存数据库有哪些

内存数据库有Redis、Memcached、Apache Ignite、VoltDB、TimesTen、H2 Database、Aerospike、Oracle TimesTen In-Memory Database、SAP HANA和ache Cassandra。更多关于内存数据库相关问题,详情请看本专题下面的文章。php中文网欢迎大家前来学习。

2023.11.14

1579

11

mongodb和redis哪个读取速度快
mongodb和redis哪个读取速度快

redis 的读取速度比 mongodb 更快。原因包括:1. redis 使用简单的键值存储,而 mongodb 存储 json 格式的数据,需要解析和反序列化。2. redis 使用哈希表快速查找数据,而 mongodb 使用 b-tree 索引。因此,redis 在需要高性能读取操作的应用程序中是一个更好的选择。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.02

2524

6

redis怎么做缓存服务器
redis怎么做缓存服务器

redis 作为缓存服务器的答案:redis 是一款开源、高性能、分布式的键值存储,可作为缓存服务器使用。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

518

6

redis怎么解决数据一致性
redis怎么解决数据一致性

redis 提供了两种一致性模型,以维护副本数据一致性:强一致性 (sync) 确保写操作仅在复制到所有从节点后才完成;最终一致性 (async) 则在主节点上写操作后认为已完成,牺牲一致性换取性能。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

525

6

mysql和redis怎么保证双写一致性
mysql和redis怎么保证双写一致性

确保 mysql 和 redis 双写一致性的技术包括:1、事务性更新:同时更新 mysql 和 redis,保证一致性;2、主从复制:mysql 主服务器更改同步到 redis 从服务器;3、基于事件的更新:mysql 记录更改并发送到 redis等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

2511

6

redis缓存一般存些什么数据
redis缓存一般存些什么数据

redis缓存中存储的数据类型包括:字符串、哈希、列表、集合、有序集合、位图、地理空间数据和hyperloglog。这些数据类型适用于存储各种数据,从简单信息到复杂对象和地理位置。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.04.07

943

6

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
phpEnv手册
phpEnv手册

共0课时 | 0人学习

进程与SOCKET
进程与SOCKET

共6课时 | 0.5万人学习

Redis+MySQL数据库面试教程
Redis+MySQL数据库面试教程

共72课时 | 9万人学习