linux守护进程心跳检测分三层:一、进程级用systemd watchdog或时间戳文件监控存活;二、tcp层调优keepalive参数探测链路中断;三、业务层定制http/sql/自定义协议健康检查,均需超时控制与轻量恢复。

Linux 中为长时间运行的后台守护进程添加心跳检测,核心目标是及时发现进程僵死、卡顿或通信中断,而非单纯判断进程是否“还在”。关键在于区分两种场景:一种是守护进程自身是否存活(健康状态),另一种是它所管理的服务或连接是否可用(业务连通性)。下面从实用角度分三类说明。
一、守护进程自身的存活心跳(进程级)
最简单有效的方式是配合系统级监控工具,避免在守护进程中嵌入复杂逻辑:
- 用 systemd 管理守护进程时,在 service 文件中启用
Restart=always和RestartSec=5,并配置WatchdogSec=30;守护进程需每 25 秒内调用sd_notify("WATCHDOG=1"),否则 systemd 自动重启它 - 若不用 systemd,可让守护进程定期向一个固定路径写入时间戳(如
/var/run/mydaemon.heartbeat),再用独立脚本每 10 秒检查该文件是否 30 秒内有更新;超时即触发重启 - 避免使用
ps | grep判断进程存在——它无法识别进程已卡死但未退出的情况
二、TCP 连接层的心跳(网络连接级)
对依赖长连接的守护进程(如代理、消息中转服务),应启用内核 TCP keepalive 并合理调参:
Linux系统管理专家,覆盖12大模块:用户权限、SSH、存储、网络、systemd、防火墙、日志监控、备份恢复、TLS证书、Ansible、容器、IaC。提供配置、验证、加固、监控、备份、自动化、故障排查、回滚闭环。关键词:useradd、sudo、sshd_config、chmod、SEL...
- 设置
SO_KEEPALIVE开启基础心跳,再通过TCP_KEEPIDLE(空闲多久开始探测)、TCP_KEEPINTVL(探测间隔)、TCP_KEEPCNT(失败几次断连)精细控制。例如:30 秒无数据后启动探测,每 5 秒发一次 ACK,连续 3 次无响应则关闭连接 - 注意:默认的 2 小时探测周期完全不适用于生产环境,必须显式覆盖;且 keepalive 只能发现链路层断开(如网线拔掉),无法感知应用层挂起(如进程卡在锁里)
- 代码中应在
socket()后、connect()或bind()前调用setsockopt()设置这些选项,确保生效
三、业务逻辑层的心跳(服务可用级)
这是最贴近真实需求的一层,需根据服务类型定制检测逻辑:
- HTTP 服务:守护进程定期
curl -s -o /dev/null -w "%{http_code}" http://127.0.0.1:8080/health,只接受 200 响应;非 200 时记录日志并触发重启或告警 - 数据库代理类:执行轻量 SQL(如
SELECT 1)并验证返回,超时时间设为 2 秒以内;连续 3 次失败才判定异常 - 自定义协议服务:在守护进程中单独起一个检测线程,定时向本地监听端口发一个极小的 ping 包(如 4 字节),等待 pong 回复;超时或格式错误即标记异常
- 关键点:所有检测必须带超时(
curl --max-time 2、select() + timeout),不能阻塞主逻辑;失败后不要立即重启,先尝试 graceful reload 或清空缓存等轻量恢复动作
实际部署时,这三层心跳常组合使用:systemd 看护进程不死,TCP keepalive 维持连接不断,健康接口确保业务可响应。三者缺一不可,但实现上应尽量解耦——心跳检测本身也应是轻量、隔离、可诊断的。










