用 sync.map 是因普通 map 并发读写会 panic,sync.map 分片无锁读、局部锁写,吞吐高 3–5 倍;但不支持遍历删除,聚合需先 loadall,仅适用简单键值对且避免大结构体。
为什么用 sync.map 而不是普通 map 存指标数据
业务指标采集器要高频读写(如每秒数万次 inc 或 get),普通 map 并发读写会直接 panic:fatal error: concurrent map read and map write。虽然加 sync.rwmutex 能解决,但锁竞争在高并发下会成为瓶颈。
用 sync.Map 是更轻量的选择——它内部按 key 哈希分片,读操作无锁,写操作只锁对应分片,实测在 16 核机器上吞吐比带锁 map 高 3–5 倍。但要注意:sync.Map 不支持遍历中删除,也不适合做聚合计算(比如求所有指标平均值),这类操作得先 LoadAll 到临时 slice 再处理。
- 只存简单键值对:key 是
string(如"http_req_total{method=GET,path=/api/user}"),value 是*metricValue(含原子计数器) - 避免在
sync.Map中存大结构体,否则复制开销明显 - 不要依赖
Range的顺序——它不保证遍历顺序,导出指标时需额外排序
如何让标签维度真正“多”而不炸内存
用户可能传任意组合的标签:service="auth",env="prod",region="us-east",如果每种组合都新建一个计数器,标签基数稍高(比如 10 个标签各取 5 个值)就会生成上百万个指标实例,OOM 是分分钟的事。
实际做法是:预定义合法标签键(validLabelKeys = []string{"service", "env", "region", "endpoint"}),采集前强制校验并丢弃非法键;再对值做长度和正则限制(如 env 只允许 "dev|staging|prod"),防止注入恶意长字符串。
- 用
strings.Builder拼接 label 字符串,比fmt.Sprintf快 2–3 倍且不逃逸 - 标签值统一小写 + 去空格,避免
"Prod"和"prod"重复建指标 - 加内存水位告警:当
sync.Map中 key 数量超 10 万时,打日志并采样 dump 前 100 个高频 key 分析来源
expvar 导出 vs 自研 HTTP handler 的取舍
Go 标准库 expvar 开箱即用,但只支持全局变量导出,没法按标签动态过滤;而且它的 JSON 输出没有类型标识(所有数字都是 float64),Prometheus 抓取后类型推断容易出错。
更稳妥的是自己写一个 /metrics handler,用 promhttp.Handler()(来自 github.com/prometheus/client_golang)——它原生支持 Counter/Gauge/Histogram,label 语义清晰,还自带采样压缩(比如自动合并 http_req_duration_seconds_bucket{le="0.1"} 这类直方图桶)。
- 别直接用
fmt.Fprintf手写 Prometheus 文本格式,漏掉# HELP或换行错误会导致 target 状态为 DOWN - 把指标注册逻辑放在
init()或服务启动早期,避免热加载时重复注册同名指标 panic - 给 handler 加
http.StripPrefix和路径校验,防止/metrics/../etc/passwd这类路径遍历
压测时 CPU 突增却查不到热点?试试 runtime/metrics
上线后发现采集器自身 CPU 占用飙升,pprof 显示大量 runtime.mapassign,但代码里只有一处 sync.Map.Store ——问题往往出在 label 拼接:每次调用 fmt.Sprintf 生成 label key 会分配新字符串,GC 压力大,间接拖慢写入。
用 Go 1.17+ 的 runtime/metrics 可以快速定位:采集 /runtime/heap/allocs:bytes 和 /runtime/gc/num:gc,如果 allocs/sec 异常高,就说明字符串构造太频繁。
- 把常用 label 组合缓存为 const(如
const labelProdAuth = "service=auth,env=prod") - 用
unsafe.String+[]byte避免字符串拷贝(仅限已知 byte slice 生命周期可控的场景) - 开启
GODEBUG=gctrace=1观察 GC 频率,若 2 秒内触发多次,基本可断定是短生命周期对象爆炸
多维度监控不是堆 label,而是控制爆炸半径。标签组合数、字符串分配、map 分片粒度——这三个地方卡住了,性能就上不去,其他再 fancy 的功能都白搭。
golang免费学习笔记(深入):立即使用
在学习笔记中,你将探索golang的核心概念和高级技巧!











