漏桶限流核心是“非阻塞感知+异步填充”:用atomic变量维护水位,每次请求惰性计算流出量并CAS更新lastTick,避免sleep阻塞和ticker调度开销,严格限制平均速率,适用于恒定节拍场景。
漏桶限流的核心逻辑不能靠 time.Sleep
直接在请求处理中调用 time.sleep 会阻塞 goroutine,违背 go 高并发设计初衷,且无法应对突发流量反弹。漏桶必须是“非阻塞感知 + 异步填充”模型:桶容量和当前水位用原子变量维护,每次请求只做一次 cas 判断,不挂起协程。
典型错误是把漏桶实现成带 ticker 的后台 goroutine 持续加水——这在高 QPS 下产生大量定时器调度开销,且水位更新与请求判断不同步,容易出现精度漂移或竞争漏判。
- 水位更新必须用
atomic.AddInt64或atomic.LoadInt64+ CAS 循环,避免锁 - 加水操作不主动触发,而是在每次请求时按「距上次请求的时间差 × 流出速率」惰性计算并更新水位
- 流出速率单位统一为「单位时间(秒)内允许的请求数」,内部全部换算为 float64 秒级精度,避免整数截断误差
使用 sync/atomic 实现无锁水位管理
Go 标准库没有现成的浮点原子操作,所以要把「剩余容量」转为整数纳秒粒度存储,或用 atomic.LoadUint64 存储 int64 类型的「最后请求时间戳(纳秒)」,再配合当前时间动态算出应流出量。后者更省内存、无精度累积误差。
推荐方案:桶状态只存两个字段:lastTick(上一次成功请求时间戳,纳秒)和 capacity(最大容量,int64),所有计算基于当前 time.Now().UnixNano() 展开:
// 每次请求调用
func (l *LeakyBucket) Allow() bool {
now := time.Now().UnixNano()
// 按时间推移自动“漏水”
elapsed := now - atomic.LoadInt64(&l.lastTick)
drain := int64(float64(elapsed) * l.ratePerNanosecond) // ratePerNanosecond = rate / 1e9
if drain > l.capacity {
drain = l.capacity
}
<pre class="brush:php;toolbar:false;">// CAS 尝试更新水位:仅当自上次读取后 lastTick 未被其他 goroutine 修改,才写入新时间
for {
oldLast := atomic.LoadInt64(&l.lastTick)
oldNow := time.Unix(0, oldLast).UnixNano()
elapsedSinceOld := now - oldLast
drainSinceOld := int64(float64(elapsedSinceOld) * l.ratePerNanosecond)
if drainSinceOld > l.capacity {
drainSinceOld = l.capacity
}
// 当前等效水位 = capacity - 已流出量;若水位 >= 1,说明还有空间
// 这里简化为:只要能“放下一个请求”,就允许,并更新 lastTick
if atomic.CompareAndSwapInt64(&l.lastTick, oldLast, now) {
return true
}
}
}
注意 rate 设置和系统时钟跳跃的影响
Linux 上 time.Now() 默认走 CLOCK_MONOTONIC,不受 NTP 调整影响,但某些容器环境或虚拟机可能配置异常,导致 UnixNano() 出现回跳或突增。一旦 now ,elapsed 为负,drain 变成 0,桶瞬间“满水”,所有后续请求都被拒绝,直到时钟追平。
- 务必在
Allow()开头加if now 容错 -
rate不宜设得过高(如 > 10000 req/s),否则float64乘法在纳秒级下易丢失精度,建议用预计算的ratePerSecond = float64(rate),然后按秒粒度算:先算经过多少整秒,再单独处理余下纳秒 - 测试时用
runtime.GOMAXPROCS(1)+ 高并发 goroutine 打压,观察atomic.CompareAndSwapInt64失败率,超 5% 说明 CAS 竞争激烈,需考虑分片桶(sharded bucket)
不要把漏桶和令牌桶混用场景
漏桶严格限制**平均速率**,不允许突发;令牌桶允许突发(只要令牌够)。如果你的业务需要“1000 QPS 基线 + 最多 2000 请求瞬时爆发”,选令牌桶;如果目标是保护下游 DB 不被慢查询拖垮,漏桶更合适——它天然削峰填谷,且实现更轻量。
常见误用:用漏桶实现“每分钟最多 600 次”的限流。这种固定窗口需求更适合滑动日志或 Redis ZSET,漏桶的连续时间模型会导致窗口边界请求集中通过,实际峰值远超预期。
真正适合漏桶的场景很窄:API 网关对单个 clientIP 的长稳流控、gRPC stream 中每个消息的节奏压制、硬件设备模拟类服务的帧率限制——这些都需要恒定输出节拍,而不是统计周期内的总量。











