prometheus四大黄金指标需用go分别暴露:延迟用histogramvec(设秒级桶边界),流量与错误用带method/status/path标签的counter,饱和度用gauge(如连接池使用率),所有指标须加instance/job标签并初始化于main开头。

怎么用 Go 暴露延迟、流量、错误、饱和度这四个指标
Go 服务要接入 Prometheus,就得把四大黄金指标(Latency、Traffic、Errors、Saturation)转成 prometheus.Metric 类型并注册到 prometheus.DefaultRegisterer。不能只靠 pprof 或 expvar —— 它们不带标签、不可聚合、也没业务语义。
-
http_requests_total这类计数器(Counter)用来表达 Traffic 和 Errors:按 method、status、path 打 label,比如http_requests_total{method="POST",status="200",path="/api/pay"} - 延迟必须用
prometheus.HistogramVec,不是 Summary:Histogram 支持服务端分位计算(histogram_quantile),且能按 route 或 service 标签切分;桶边界推荐设为[]float64{0.1, 0.2, 0.5, 1, 2, 5, 10}(单位秒) - 饱和度指标如 goroutines 数、连接池使用率,用
Gauge即可:goroutines 可直接读runtime.NumGoroutine(),但连接池使用率得从 sql.DB 或 redis.Client 里取Stats().Idle, Stats().InUse等字段 - 所有指标必须加
instance和joblabel:否则多实例部署时无法区分是哪台机器出问题;建议在初始化prometheus.NewRegistry()后,用prometheus.WrapRegistererWith注入默认 labels
为什么用 http middleware 埋点比手动 defer 更可靠
手动在每个 handler 里写 start := time.Now(); defer recordLatency(start) 看似简单,实际漏掉大量路径:panic 恢复后没走 defer、中间件提前 return、HTTP/2 流复用导致一次请求多个响应等。
- 标准做法是写一个
promhttp.InstrumentHandlerDuration+InstrumentHandlerCounter组合的 middleware,套在http.ServeMux最外层 - 注意:如果用了 Gin/Echo 等框架,别直接套
promhttp的 handler —— 它们不兼容;要用对应生态的 adapter,比如ginprometheus或echo-prometheus - Errors 指标不能只看 HTTP status:业务返回
200但 body 里{"code":5001}也算错误;得在 middleware 里解析响应体或检查自定义 error type - 延迟统计必须在 WriteHeader 之后才结束:否则 gzip、TLS 握手等耗时被漏掉;
promhttp默认行为是WriteHeader时打点,符合要求
goroutine 数和内存分配算饱和度?小心误判
很多人把 runtime.NumGoroutine() 当成“CPU 饱和度”直接告警,这是错的。goroutine 数高 ≠ CPU 高,可能是大量 idle goroutine(比如用 time.AfterFunc 或 channel 等待);同样,runtime.ReadMemStats 里的 Alloc 是瞬时值,不能代表内存压力。
- 真正反映饱和度的是排队类指标:比如 HTTP server 的
http.Server.ConnState中StateClosed和StateActive差值过大,说明连接堆积;或者数据库连接池InUse == MaxOpen且WaitCount > 0 - goroutine 数建议设动态基线告警:比如 P95 值 + 20%,而不是固定阈值;突增 3 倍且持续 2 分钟才触发,避免毛刺误报
- 内存饱和度要看
MemStats.PauseTotalNs(GC 暂停总时间)和NextGC距离当前堆大小的比例;当HeapAlloc / NextGC > 0.8且 GC 频次 > 1 次/秒,才算真实内存紧张
业务指标怎么和黄金指标联动而不变成噪音
支付成功率、库存扣减失败率这些业务指标,不是加个 Counter 就完事。它们必须能反向关联到黄金指标异常点,否则就是孤立数据。
- 每个业务指标必须带和 HTTP 指标一致的 label 维度:比如
payment_success_rate{service="order",env="prod"},这样能在 Grafana 里和http_requests_total{service="order"}放在同一面板做对比 - 避免“每新增一个接口就加一个指标”:统一用
business_events_total{type="pay_submit",result="success"}这种泛化命名,靠 label 区分语义,方便 PromQL 聚合 - 关键业务指标要配置 “指标驱动日志跳转”:Prometheus 告警时,在 Alertmanager 的
annotations里注入req_id="{{ $labels.req_id }}",前端点击告警直接打开 Loki 搜索该 req_id —— 这比查 trace ID 更快定位业务逻辑错误
prometheus.MustRegister 应放在 main 函数最开头,连同默认 labels 一起初始化。golang免费学习笔记(深入):立即使用
在学习笔记中,你将探索golang的核心概念和高级技巧!











