Syslog 服务性能调试:追踪日志积压与处理延迟

胖芳小哥_9828

胖芳小哥_9828

2026-07-08

360人浏览

原创

排查syslog性能问题需分段验证:先确认积压状态(rsyslogd -n1、systemctl status、队列文件、dmesg),再按采集、磁盘、网络三环节定位延迟,最后针对性调参并闭环验证。

syslog 服务性能调试:追踪日志积压与处理延迟

排查 Syslog 服务性能问题,核心是定位日志“卡在哪”——是产生快但写不进磁盘,还是网络发不出去,或是队列越堆越多。关键不在于盲目调参,而在于分段验证、逐层下钻。

确认日志是否真在积压

先看实际状态,避免误判:

  • rsyslogd -N1 检查配置语法是否正确,避免因配置错误导致服务降级运行
  • 执行 systemctl status rsyslog,关注 Active 状态和 Recent logs 中是否有 “queue full”、“dropped”、“rate limit hit” 等提示
  • 查看队列文件:默认路径如 /var/lib/rsyslog/ 下是否存在大量 srvrfwd*.qfqueue_*.qf 文件,且大小持续增长,说明日志正在排队等待处理
  • 检查内核日志缓冲区:dmesg | grep -i "buffer.*full\|log.*overflow",确认是否因 imklog 或 imuxsock 模块缓冲溢出丢日志

定位延迟发生在哪一环

按数据流向分三段排查:

Image Creator
Image Creator

一款集成到Photoshop工作流中的AI图像生成插件,支持文字生图、图像生成与局部编辑等能力,辅助完成视觉设计。

下载
  • 本地采集端:用 journalctl -u rsyslog -n 50 --no-pager 查最近日志,留意 timestamp(日志生成时间)与 _HOSTNAME/_PID 字段时间差。若差值 >1s,说明 rsyslogd 本身处理慢;再结合 top -p $(pgrep rsyslogd) 看 CPU / %MEM 占用是否异常高
  • 磁盘写入环节:运行 iostat -x 1,观察 %util 是否长期 >90%、await 是否 >50ms。若高,说明磁盘 I/O 成瓶颈;再检查日志目录所在分区的 df -hinotifywait -m /var/log(确认是否有轮转锁或文件句柄未释放)
  • 外发传输链路:对远程目标,用 tcpdump -i any port 514 -c 20 抓包,对比本地日志时间戳与抓到的包时间戳;再用 ss -tuln | grep :514 确认监听状态,并用 nc -zv remote_ip 514 测试连通性与响应延迟

针对性调整关键参数

不要全局调大缓冲区,而是按场景精准干预:

  • 若本地写盘慢:在 /etc/rsyslog.conf 中启用异步队列 + 磁盘后备
    $ActionQueueType LinkedList<br>
    $ActionQueueFileName srvrfwd<br>
    $ActionResumeRetryCount -1<br>
    $ActionQueueSaveOnShutdown on<br>
    $ActionQueueMaxDiskSpace 1g

    并确保 /var/lib/rsyslog/ 所在分区有足够空间
  • 若网络外发卡顿:改用 TCP 并启用保活
    *.* @@logserver:514;RSYSLOG_ForwardFormat<br>
    $ActionSendTCPRebindInterval 600<br>
    $ActionSendTCPOption 1

    避免 UDP 丢包或 TCP 连接空闲超时断开
  • 若日志量突增:临时启用速率限制防雪崩
    $SystemLogRateLimitInterval 60<br>
    $SystemLogRateLimitBurst 200

    限制每分钟最多接收 200 条,超出则丢弃,保护主进程

验证优化是否生效

改完配置后,必须做闭环验证:

  • 重启服务:sudo systemctl restart rsyslog,再立即执行 sudo journalctl -u rsyslog --since "1 minute ago" | grep -E "(queue|drop|error)" 确认无新报错
  • 模拟压力测试:用 logger -p local0.info "$(date): test message $(seq 1 100)" 快速注入百条日志,随后 tail -n 20 /var/log/syslog | head -5 查看最老一条是否在 2 秒内落盘
  • 持续观测:部署简单脚本每 5 分钟记录一次 ls -lt /var/log/syslog | head -1 的时间戳,连续跑 1 小时,看时间差是否稳定 ≤1s
数码产品性能查询
数码产品性能查询

该软件包括了市面上所有手机CPU,手机跑分情况,电脑CPU,电脑产品信息等等,方便需要大家查阅数码产品最新情况,了解产品特性,能够进行对比选择最具性价比的商品。

下载

相关标签:

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
elk是什么意思
elk是什么意思

ELK指的是Elasticsearch、Logstash和Kibana三个开源软件的组合。想了解更多elk的相关内容,可以阅读本专题下面的文章。

2023.12.18

2560

6

Vibeknow在线使用入口合集
Vibeknow在线使用入口合集

本专题汇总了Vibeknow在线创作视频的官方入口及网页版使用教程,涵盖PPT、PDF、Word等文档一键转讲解视频的核心操作,并整理了免费版水印规则与手机端浏览器访问指南,助你快速将知识内容视频化。

2026.09.21

0

20

NumPy随机数文件读写与dtype数据类型
NumPy随机数文件读写与dtype数据类型

本专题整理 NumPy 随机数、文件读写与 dtype 数据类型相关教程,覆盖 Generator/random、随机数种子、正态分布采样、npy/npz/CSV/TXT 保存读取、loadtxt/savetxt、memmap、大文件处理、astype 类型转换、结构化 dtype、整数溢出和精度丢失等场景。

2026.09.21

0

24

NumPy矩阵运算与线性代数计算
NumPy矩阵运算与线性代数计算

本专题整理 NumPy 矩阵运算与线性代数计算相关教程,覆盖矩阵乘法、dot 与 @ 运算符、逆矩阵、行列式、特征值与特征向量、SVD、线性方程组、欧氏距离、矩阵分解和大规模矩阵性能优化等内容,帮助读者掌握 np.linalg 与矩阵计算实战。

2026.09.21

0

20

NumPy广播机制数学运算与统计分析
NumPy广播机制数学运算与统计分析

本专题整理 NumPy 广播机制、数组数学运算与统计分析相关教程,覆盖广播规则、维度对齐、矩阵与数组加减除法、向量化计算、均值方差、分位数、中位数、直方图和 unique 频次统计等场景,帮助读者掌握 ndarray 高效计算与统计处理方法。

2026.09.21

0

17

NumPy数组创建索引切片与数据选择
NumPy数组创建索引切片与数据选择

本专题整理 NumPy 数组创建、索引、切片与数据选择相关教程,覆盖 np.array、zeros/ones、多维数组形状、基础切片、花式索引、布尔索引、条件筛选、视图与副本等常用场景,帮助读者系统掌握 ndarray 数据构造与高效提取方法。

2026.09.21

0

12

Aionclaw智能助手介绍
Aionclaw智能助手介绍

本专题汇总了AionClaw(AI龙虾助手)的功能介绍与在线使用入口。AionClaw是杭州趣猿人工智能有限公司推出的桌面级AI智能体,能直接在电脑上读写文件、运行脚本、操作浏览器,自动交付Word、PPT、Excel等成品。

2026.09.20

20

13

AionClaw AI智能体与电脑自动化任务执行功能使用教程
AionClaw AI智能体与电脑自动化任务执行功能使用教程

AionClaw专题整理AI智能体与电脑自动化相关功能使用教程,涵盖安装部署、AI任务执行、Skills技能、文件处理、浏览器控制、电脑操作、持久记忆、聊天工具连接以及办公、编程和内容创作等功能,帮助用户快速掌握AionClaw的实际使用方法。

2026.09.20

0

15

AI视频生成软件推荐
AI视频生成软件推荐

本专题汇总了当前主流的AI视频生成软件推荐与排行榜单,涵盖seko、AniShort、剧云、Lovart、LiblibAI及立刻mv等热门工具。同时整理了各软件在文生视频、图生视频、时长限制、画质表现及免费额度等方面的差异对比,助您快速选对适合创作需求的AI视频生成工具。

2026.09.16

200

9

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
phpStudy极速入门视频教程
phpStudy极速入门视频教程

共6课时 | 54.6万人学习

独孤九贱(4)_PHP视频教程
独孤九贱(4)_PHP视频教程

共89课时 | 133.1万人学习