核心目标是3分钟内定位阻塞线程和锁持有者:先用jstack -l 抓快照,重点看末尾“Found 1 deadlock.”及waiting to lock/locked地址闭环;再结合业务超时日志匹配traceId确认影响面;最后按死锁规模果断重启、降级或kill线程。

生产环境遇到死锁,核心目标不是搞懂原理,而是3分钟内定位到阻塞线程和锁持有者,立刻做决策:是重启、回滚、还是临时降级。以下步骤按实战优先级排序,跳过理论,直奔关键命令和日志线索。
一、用 jstack 快速抓取线程快照(10秒内完成)
别等现象复现,只要 CPU 或响应变慢就执行:
-
查 Java 进程 PID:
ps -ef | grep java(注意过滤掉 grep 自身) -
导出线程栈:
jstack -l(加> /tmp/threaddump_$(date +%s).log -l才能显示锁信息) -
重点看输出末尾:jstack 会在最后自动标出 “Found 1 deadlock.” 并列出所有死锁线程 + 持有/等待的锁对象(如
java.util.concurrent.locks.ReentrantLock$NonfairSync@7f8b2a1c)
二、聚焦 “waiting to lock” 和 “locked” 对应关系(30秒定位根因)
在 jstack 日志里搜索关键词,不读全量内容:
- 搜
waiting to lock→ 找出哪个线程卡在哪把锁上 - 搜对应锁地址(如
@7f8b2a1c)→ 找到谁locked - 顺着那个“持锁线程”的堆栈,看它又在等哪把锁 → 两条线程互相等待,闭环形成
- 例:
Thread-A等lockA,而lockA被Thread-B持有;Thread-B又在等lockB,而lockB被Thread-A持有
三、结合业务日志缩小范围(2分钟确认影响面)
死锁本身不报错,但请求会超时或堆积。立刻交叉验证:
使用 Husky 将 pre-commit、pre-push 和 commit-msg 检查集成到仓库中,以便代理和开发人员在更改离开工作站之前运行相同的本地防护措施。
- 查最近 2 分钟应用日志(
grep "TIME_WAITING\|Timeout\|Blocked"),看哪些接口/用户ID 出现大量超时 - 比对 jstack 中死锁线程的线程名(如
http-nio-8080-exec-23)和日志里的 traceId,确认是否是同一请求链路 - 如果多个线程卡在相同锁地址,说明是热点资源竞争,不是偶发;如果只有一组,可能是特定参数触发的边界逻辑
四、救火动作要果断(不犹豫,不分析完再动)
根据死锁规模选策略:
-
单点死锁 + 影响小:直接 kill 掉卡住的线程(
jstack里找tid=0x...,用jcmd确认后,若支持热修复可考虑Thread.print arthas thread -i查详情,但生产慎用) - 多组死锁 or 核心接口阻塞:立即重启对应实例(滚动重启,避免雪崩),同时通知前端降级该功能
-
已知是数据库锁导致:跳过 jstack,直连 DB 执行
show engine innodb status,查TRANSACTIONS部分的锁等待链
真正救火靠的是肌肉记忆:定期演练 jstack 流程、预置一键采集脚本、把常见锁地址和业务模块映射表贴在团队 Wiki。死锁不可怕,可怕的是第一次见它时还在 Google “怎么查死锁”。
Java免费学习笔记:立即使用
解锁 Java 大师之旅:从入门到精通的终极指南










