etcd v3 的 newelection 是唯一推荐的起点,因其将 lease 创建、cas put、watch 删除、自动重试四步封装为原子操作,底层用事务确保租约与 key 绑定,避免手写漏 withlease、未消费 keepalive channel 或轮询 get 导致的脑裂和假活。

etcd v3 的 NewElection 是唯一推荐的起点
别从零手写 lease + watch + CAS 逻辑——90% 的脑裂和假活都源于漏掉 WithLease、没消费 KeepAlive 返回的 channel,或轮询 Get 而非监听 Observe。官方 clientv3/concurrency.Election 封装了租约申请、CAS 写入、watch 删除事件、自动重试四步原子操作,且底层用事务绑定 lease 和 key,避免 key 残留。
实操建议:
Go 配置库,使用 spf13/viper — 分层优先级(flag > env >file > KV > default),提供 BindPFlag/BindPFlags、SetEnvPrefix + SetEnvKeyReplace 等功能。
-
NewElection必须传入带 TTL 的clientv3.Lease实例,TTL 设为10~15秒:太短易因 GC 停顿误判失效;太长则故障恢复慢 -
Campaign返回nil才算真正当选;非nil错误要区分:context.DeadlineExceeded是超时未抢到,clientv3.ErrNoLeader是 etcd 不可用,不能一概重试 - 绝不能把
IsLeader()结果缓存为全局bool变量——每次业务操作前仍需Get(ctx, leaderKey)校验,防幽灵存活
KeepAlive 失败必须立刻 Resign,不能等租约自然过期
lease 过期是 etcd server 单方面行为,客户端无感知。如果 KeepAlive goroutine 因网络抖动、channel 满或 panic 退出,而代码继续以 Leader 身份发请求,就会双主。
实操建议:
- 启动
KeepAlive必须用独立 goroutine,并持续消费返回的chan *clientv3.LeaseKeepAliveResponse——不消费会导致后续续租静默失败 - 一旦从该 channel 收到
error或 channel 关闭,立即调用Election.Resign(ctx),并清空本地 leader 状态(如关闭定时器、停止消费队列) - 别用
Lease.TimeToLive轮询判断是否过期:它只返回快照,且频繁调用增加 etcd 压力
监听 Election.Observe 而不是自己 Watch 前缀
Election.Observe 内部已封装带 WithPrefix 和 WithRev 的 watch,能自动从断连点续播,避免事件丢失;自己手写 watch 容易漏掉 WithPrevKV,导致无法区分是新建还是覆盖,也容易在重连时传错 revision。
实操建议:
-
Observe()返回的chan *concurrency.ElectionResponse会在 leader 身份变更(被抢占、lease 过期、key 被删)时推消息,但它不是永不停止的 stream:一旦 lease 彻底失效或连接断开,channel 会被 close - 必须用
select+case + <code>case 双重判断,不能只读不判空 - 收到
nil响应或 channel 关闭,立刻退出 leader 工作循环;别在Observegoroutine 里做耗时操作,否则会卡住后续通知
多个节点共用同一 Election 实例会直接导致选主失灵
同一个 concurrency.Election 对象不能被多个 goroutine 并发调 Proclaim() 或 Resign(),更不能在不同进程间共享。常见误用是把 election 实例塞进全局变量,然后所有 worker 都去抢——结果是 CAS 失败率飙升,leader 频繁切换。
实操建议:
- 每个服务实例必须创建独立的
Election实例,key prefix 应包含唯一标识(如 hostname 或 pod UID),例如/my-service/leader/worker-001 - 不要复用 client 连接池里的同一个
clientv3.Client实例来初始化多个Election——虽不报错,但 lease 续期竞争会加剧 - 退出前显式调用
Election.Resign(ctx),避免残留 lease 导致下次启动被拒;若进程崩溃未执行,etcd 会在 lease 过期后自动清理,但恢复时间取决于 TTL
golang免费学习笔记(深入):立即使用
在学习笔记中,你将探索golang的核心概念和高级技巧!










