如何排查因rsyslog配置文件中缺少分号或存在隐蔽语法死锁导致的系统服务启动长时挂起

轻晨同学_2760

轻晨同学_2760

2026-06-25

361人浏览

原创

rsyslog启动卡在“activating (start)”状态时,需用-n2检查逻辑死锁(如模板未定义、条件无限嵌套),结合strace观察系统调用阻塞点,并逐段注释rainerscript配置隔离问题。

如何排查因rsyslog配置文件中缺少分号或存在隐蔽语法死锁导致的系统服务启动长时挂起

rsyslog 配置中缺少分号或存在隐蔽语法死锁(如模板循环引用、条件规则无限嵌套、未闭合的括号/引号块)时,服务常表现为启动卡在“activating (start)”状态,长时间无响应,不是崩溃也不是报错,而是静默挂起。这类问题不触发 -N1 语法检查失败,却让 rsyslog 主进程无法完成初始化,必须从加载行为和执行路径切入排查。

用 -N2 检查逻辑完整性,暴露隐性死锁

基础语法检查(-N1)只验证语句结构,对模板定义是否被正确引用、if 条件块是否形成闭环、$template 是否存在未解析变量等逻辑陷阱无能为力。-N2 会模拟规则加载过程,强制解析所有模板和条件分支:

  • 运行 rsyslogd -N2 -f /etc/rsyslog.conf,重点观察输出末尾是否有 "template 'xxx' not found""undefined variable""infinite loop detected in ruleset" 类提示
  • 若使用 include,需对每个被包含文件单独执行 -N2:例如 rsyslogd -N2 -f /etc/rsyslog.d/99-custom.conf
  • 常见死锁诱因:在 if 语句中调用另一个未定义的 template;使用 $!myvar 但未通过 mmjsonparse 解析 JSON;RainerScript 中写成 if $msg contains "error" then { action(type="omfile" file="/var/log/error.log") } 却遗漏了 else 分支,导致后续规则无法进入

观察进程行为,确认是否卡在模块加载阶段

挂起通常发生在模块初始化或规则编译环节。直接查看 rsyslog 进程实际在做什么:

Pandas 配置文件报告生成器
Pandas 配置文件报告生成器

使用ydata-profiling(前身为pandas-profiling)生成全面的数据质量报告,包含相关性分析、缺失值模式和基数检测。导出交互式HTML仪表板和JSON摘要。

下载
  • 启动前先清空日志缓冲:journalctl --rotate && journalctl --vacuum-size=50M
  • 执行 systemctl start rsyslog 后立即运行:ps auxf | grep rsyslog —— 若看到进程状态为 S(sleep)且 CPU 占用持续为 0%,说明正阻塞在某个系统调用上(如等待 socket、读取配置文件某一行)
  • strace -p $(pgrep rsyslog) -e trace=open,openat,read,futex 捕获系统调用流,重点关注是否反复 open 同一配置文件、或卡在 read() 调用上(暗示某处语法未终结,解析器持续等待更多输入)

临时禁用高风险语法组件,逐段隔离

分号缺失和死锁多集中在新式 RainerScript 区域(尤其是 if/else、call、ruleset 定义)。安全做法是注释掉全部非必要逻辑块,只保留最简骨架:

  • 备份原配置后,在 /etc/rsyslog.conf 开头添加:# module(load="imuxsock")\n# module(load="imklog")\n# *.* /var/log/messages
  • 然后逐步取消注释:先放开 module 加载,再加一条基础规则,再加一个 template,最后加 if 块 —— 每加一行就 systemctl restart rsyslog 测试一次
  • 特别注意引号嵌套:例如 template(name="jsonout" type="list") { property(name="$!all-json") } 中若 $!all-json 未被解析,整个 template 将无法实例化,导致后续所有依赖它的 action 挂起

检查 systemd 启动超时与依赖链干扰

某些发行版(如 Ubuntu 22.04+)默认设置 DefaultTimeoutStartSec=90s,而 rsyslog 在死锁时可能耗尽该时限,被 systemd 强制 kill 并重试,造成“反复启动失败”假象:

  • 运行 systemctl show rsyslog.service | grep TimeoutStartSec 确认实际超时值
  • 查看完整启动轨迹:systemctl status rsyslog --no-pager,留意 “Activating…” 后是否出现 “timed out” 或 “Killed” 字样
  • 检查是否存在循环依赖:例如 rsyslog 配置中尝试写入 /var/log/journal/ 下的文件,而 journald 正在等待 rsyslog 启动完成才释放 /dev/log —— 此时需调整 After=Wants= 顺序,或改用 omjournal 模块替代文件输出

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

配置文件

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
磁盘配额是什么
磁盘配额是什么

磁盘配额是计算机中指定磁盘的储存限制,就是管理员可以为用户所能使用的磁盘空间进行配额限制,每一用户只能使用最大配额范围内的磁盘空间。php中文网为大家提供各种磁盘配额相关的内容,教程,供大家免费下载安装。

2023.06.21

3630

4

如何安装LINUX
如何安装LINUX

本站专题提供如何安装LINUX的相关教程文章,还有相关的下载、课程,大家可以免费体验。

2023.06.29

3153

10

linux find
linux find

find是linux命令,它将档案系统内符合 expression 的档案列出来。可以指要档案的名称、类别、时间、大小、权限等不同资讯的组合,只有完全相符的才会被列出来。find根据下列规则判断 path 和 expression,在命令列上第一个 - ( ) , ! 之前的部分为 path,之后的是 expression。还有指DOS 命令 find,Excel 函数 find等。本站专题提供linux find相关教程文章,还有相关

2023.06.30

2213

5

linux修改文件名
linux修改文件名

本专题为大家提供linux修改文件名相关的文章,这些文章可以帮助用户快速轻松地完成文件名的修改工作,大家可以免费体验。

2023.07.05

5310

7

linux系统安装教程
linux系统安装教程

linux系统是一种可以免费使用,自由传播,多用户、多任务、多线程、多CPU的操作系统。本专题提供linux系统安装教程相关的文章,大家可以免费体验。

2023.07.06

4982

7

linux查看文件夹大小
linux查看文件夹大小

Linux是一种自由和开放源码的类Unix操作系统,存在着许多不同的Linux版本,但它们都使用了Linux内核。Linux可安装在各种计算机硬件设备中,比如手机、平板电脑、路由器、视频游戏控制台、台式计算机、大型机和超级计算机。linux怎么查看文件夹大小呢?php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.07.20

2973

8

linux查看ip命令
linux查看ip命令

本专题为大家提供linux查看ip命令相关文章内容,感兴趣的朋友可以免费下载体验试试。

2023.07.20

2485

4

linux查看cpu使用率
linux查看cpu使用率

在linux的系统维护中,可能需要经常查看cpu使用率,分析系统整体的运行情况。本专题为大家带来了linux查看cpu使用率的相关文章,感兴趣的朋友千万不要错过了。

2023.07.25

2699

6

linux查找文件命令
linux查找文件命令

Linux是一种自由和开放源码的类Unix操作系统,存在着许多不同的Linux版本,但它们都使用了Linux内核。Linux可安装在各种计算机硬件设备中,比如手机、平板电脑、路由器、视频游戏控制台、台式计算机、大型机和超级计算机。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.07.31

277

3

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
Conan 参考手册
Conan 参考手册

共0课时 | 0人学习

Jupyter Notebook官方文档
Jupyter Notebook官方文档

共0课时 | 0人学习

nginx浅谈
nginx浅谈

共15课时 | 1.2万人学习