Java中由于Logback等日志框架异步打印配置缓冲区过大引发的堆溢出

冰川箭仙

冰川箭仙

2026-06-06

1029人浏览

原创

logback异步日志缓冲区(queuesize)过大易引发java堆溢出,因arrayblockingqueue预分配固定大小object数组,每个iloggingevent携带消息、mdc/ndc、异常堆栈等大量对象,长期驻留无法gc;需按峰值qps×处理耗时×安全系数估算队列大小,启用discardingthreshold与neverblock,并限制堆栈深度及避免大对象入日志。

java中由于logback等日志框架异步打印配置缓冲区过大引发的堆溢出

Logback异步日志配置中缓冲区(queueSize)设得过大,确实可能直接引发Java堆溢出(OutOfMemoryError: Java heap space),尤其在高吞吐、长日志或异常堆栈密集的场景下。

Java JDK 25
Java JDK 25

Java JDK 25 来自 OpenJDK 官方归档,版本为 JDK 25,本条下载地址已指向官方 Windows x64 zip 安装包直链,适合调试旧项目或兼容旧版 Java 运行环境。

下载

为什么大缓冲区会触发堆溢出?

AsyncAppender 默认使用 ArrayBlockingQueue 作为队列容器,它在创建时就分配固定大小的 Object 数组。每个入队的日志事件(ILoggingEvent)本身是对象,还持有:
– 日志消息字符串(可能含千行堆栈)
– MDC/NDC 上下文副本
– 异常对象及其完整堆栈跟踪(ThrowableProxy
– 线程名、时间戳、Logger 名等元数据
queueSize=100000,而单个事件平均占 20KB,则仅队列底层数组就需约 2GB 堆内存——远超常规 JVM 堆配置(如 -Xmx2g),且这些对象长期驻留,无法被 GC 回收,直到 Worker 线程消费。

典型表现与排查线索

  • 线程栈中频繁出现 AsyncAppenderBase.put()ArrayBlockingQueue.offer() 阻塞,但 Worker 线程却停滞(如因 I/O 卡住、滚动策略死锁、磁盘满)
  • Heap Dump 显示大量 ch.qos.logback.core.spi.LoggingEventch.qos.logback.classic.spi.LoggingEvent 实例,占堆比例超 60%
  • GC 日志显示老年代持续增长、Full GC 频繁但回收量极少,最终抛 java.lang.OutOfMemoryError: Java heap space
  • 日志文件突然停止写入,同时应用响应变慢或假死,jstack 发现多数业务线程卡在 AsyncAppenderBase.append()

安全配置的关键原则

  • 队列大小必须可估算、可监控:按「峰值 QPS × 单事件平均处理耗时(秒)× 安全系数 2~3」计算,避免拍脑袋设 50000+;例如 QPS=2000、处理耗时=3ms → 推荐 <queuesize>15000</queuesize>
  • 必须启用丢弃保护:设 <discardingthreshold>0</discardingthreshold>,否则默认丢弃 20% 低优先级日志后仍会阻塞;配合 neverBlock=true 可防线程卡死,但需接受 INFO/DEBUG 日志丢失
  • 禁用无限制堆栈输出:通过自定义 ThrowableProxy 或 Logback 的 %ex{full, 10} 限制堆栈深度,避免单条日志达百 MB
  • 避免在异步队列中塞大对象:不在日志语句中拼接大 JSON、二进制 base64、全量 HTTP body;敏感字段脱敏后再打日志

应急与验证手段

  • 运行时动态调小队列:通过 JMX 操作 AsyncAppender.queueSize 属性(需开启 JMX 支持)
  • 添加队列水位监控:用 Micrometer + Prometheus 监控 logback_async_appender_queue_sizelogback_async_appender_queue_remaining_capacity
  • 压测验证:模拟真实日志负载(含异常堆栈),观察 GC 行为与堆内存走势,而非仅看吞吐量数字

Java免费学习笔记:立即使用
解锁 Java 大师之旅:从入门到精通的终极指南

相关文章

全能打印神器
全能打印神器

全能打印神器是一款非常好用的打印软件,可以在电脑、手机、平板电脑等设备上使用。支持无线打印和云打印,操作非常简单,使用起来也非常方便,有需要的小伙伴快来保存下载体验吧!

下载

相关标签:

java

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
java
java

Java是一个通用术语,用于表示Java软件及其组件,包括“Java运行时环境 (JRE)”、“Java虚拟机 (JVM)”以及“插件”。php中文网还为大家带了Java相关下载资源、相关课程以及相关文章等内容,供大家免费下载使用。

2023.06.15

3886

6

java正则表达式语法
java正则表达式语法

java正则表达式语法是一种模式匹配工具,它非常有用,可以在处理文本和字符串时快速地查找、替换、验证和提取特定的模式和数据。本专题提供java正则表达式语法的相关文章、下载和专题,供大家免费下载体验。

2023.07.05

2860

9

java自学难吗
java自学难吗

Java自学并不难。Java语言相对于其他一些编程语言而言,有着较为简洁和易读的语法,本专题为大家提供java自学难吗相关的文章,大家可以免费体验。

2023.07.31

2878

8

java配置jdk环境变量
java配置jdk环境变量

Java是一种广泛使用的高级编程语言,用于开发各种类型的应用程序。为了能够在计算机上正确运行和编译Java代码,需要正确配置Java Development Kit(JDK)环境变量。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.08.01

637

3

java保留两位小数
java保留两位小数

Java是一种广泛应用于编程领域的高级编程语言。在Java中,保留两位小数是指在进行数值计算或输出时,限制小数部分只有两位有效数字,并将多余的位数进行四舍五入或截取。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.08.02

602

3

java基本数据类型
java基本数据类型

java基本数据类型有:1、byte;2、short;3、int;4、long;5、float;6、double;7、char;8、boolean。本专题为大家提供java基本数据类型的相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.02

726

5

java有什么用
java有什么用

java可以开发应用程序、移动应用、Web应用、企业级应用、嵌入式系统等方面。本专题为大家提供java有什么用的相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.02

1317

5

java在线网站
java在线网站

Java在线网站是指提供Java编程学习、实践和交流平台的网络服务。近年来,随着Java语言在软件开发领域的广泛应用,越来越多的人对Java编程感兴趣,并希望能够通过在线网站来学习和提高自己的Java编程技能。php中文网给大家带来了相关的视频、教程以及文章,欢迎大家前来学习阅读和下载。

2023.08.03

18845

3

配置java环境变量
配置java环境变量

配置Java环境变量是为了让操作系统能够识别和使用Java的相关命令和功能。本专题为大家提供配置java环境变量相关文章,帮助大家解决问题。

2023.08.03

647

8

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Java JDBC数据库连接官方教程
Java JDBC数据库连接官方教程

共0课时 | 0人学习

Java 26官方文档
Java 26官方文档

共0课时 | 0人学习