如何通过脚本自动化统计服务器集群资源占用情况

梦枫小哥_6009

梦枫小哥_6009

2026-06-10

680人浏览

原创

可通过脚本定期采集各节点cpu、内存、磁盘和网络使用率并生成报告或告警;推荐无代理(ssh执行命令)或轻量agent(flask暴露/metrics)方式统一采集;需解析标准化指标、过滤异常值;支持终端简报、csv日志、prometheus对接及阈值告警;注意安全配置、并发控制与日志维护。

如何通过脚本自动化统计服务器集群资源占用情况

可以通过编写脚本定期采集各节点的 CPU、内存、磁盘和网络使用率,汇总后生成简洁报告或触发告警。核心在于统一数据获取方式、集中处理逻辑、避免人工登录每台机器。

统一采集:用 SSH 或 Agent 获取指标

推荐两种轻量方式:

  • 无代理方案:脚本遍历服务器列表,通过 ssh user@host "free -m; df -h; top -bn1 | head -20" 获取基础指标,配合 timeout 防卡死;注意配置免密 SSH 和合理超时(如 5 秒)
  • 轻量 Agent 方案:在每台服务器部署一个简单 HTTP 接口(如用 Python Flask 暴露 /metrics),返回 JSON 格式指标({"cpu": 42.3, "mem_used_mb": 1280}),主脚本用 curl 批量拉取,更稳定且易扩展

结构化处理:解析+标准化+去噪

原始命令输出格式不一,需清洗再计算:

职徒简历
职徒简历

职徒简历是一款AI求职招聘工具,智能简历制作软件,基于GPT的简历优化和简历代写。

下载
  • CPU 使用率:从 top -bn1 提取 %Cpu(s) 行,用正则匹配空闲率,再用 100 - idle 得出实际占用
  • 内存:用 free -m 中 Mem: 行的 used / total 计算百分比,排除 buff/cache 干扰(除非业务强依赖缓存)
  • 磁盘:对 df -h 过滤关键挂载点(如 /、/data),跳过 tmpfs/overlay 等虚拟文件系统
  • 异常值过滤:单次采集若某节点 CPU > 99.9% 或响应超时,标记为“N/A”而非直接丢弃,便于后续识别故障模式

聚合与输出:生成可读报告或对接监控系统

采集完成后,按需选择输出形式:

  • 终端简报:按 CPU 占用降序列出前 5 台高负载机器,附内存/磁盘状态,适合每日晨会快速浏览
  • CSV 日志:保存为 cluster_usage_$(date +%F).csv,含时间戳、主机名、各项百分比,方便 Excel 分析趋势
  • 对接 Prometheus:改用 node_exporter + 自定义 textfile collector,让脚本生成 /var/lib/node_exporter/textfile_collector/cluster_usage.prom,天然支持 Grafana 展示
  • 阈值告警:例如任意节点内存 > 90% 持续 3 次采集,则发邮件或钉钉消息,附上该节点最近 5 分钟负载曲线(可调用 uptime 或 sar 补充)

安全与维护要点

避免脚本成为运维负担:

  • 所有敏感信息(如密码、密钥路径)从环境变量或独立配置文件读取,不硬编码进脚本
  • 添加运行锁(flock)防止同一时段多个实例并发执行,导致采集混乱
  • 日志记录每次执行的开始/结束时间、成功数、失败主机列表,错误写入 stderr 并保留最近 7 天日志
  • 每月检查一次目标服务器是否新增内核参数或命令行为变更(如新版 free 默认单位变化),及时更新解析逻辑

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
服务器是什么
服务器是什么

服务器是一种计算机硬件设备或软件程序,它具有强大的计算和存储能力,用请求、存储数据和提供服务。它在互联网中着关重要的作用,为用户提供各种服务和资源。本专题为大家提供服务器相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.15

437

5

连接apple id服务器时出错
连接apple id服务器时出错

连接apple id服务器时出错的原因包括网络连接问题、服务器问题、Apple ID账户问题、设备问题、防火墙或安全软件问题、时间和日期设置问题、Apple服务器维护等。本专题为大家提供apple id相关的文章、下载、课程内容,供大家免费下载体验。

2023.09.08

900

5

搭建互联网服务器
搭建互联网服务器

搭建互联网服务器需要:1、选择合适的硬件和操作系统,第一步是选择合适的硬件和操作系统;2、安装和配置操作系统,是搭建互联网服务器的关键步骤;3、安装和配置服务器软件,是搭建互联网服务器的下一步,常见的服务器软件包括Apache、Nginx、Tomcat等;4、配置防火墙和安全性,是搭建互联网服务器的重要步骤;5、域名解析和配置,是搭建互联网服务器的最后一步。

2023.09.19

2752

5

如何查看服务器状态
如何查看服务器状态

查看服务器状态的方法有使用命令行工具、图形界面工具、监控工具、日志文件和远程管理工具等。本专题为大家提供服务器状态相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.09

916

5

服务器域名转接慢怎么解决
服务器域名转接慢怎么解决

服务器域名转接慢的解决办法有DNS优化、服务器优化、CDN加速、前端优化和网络优化等。本专题为大家提供服务器相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.17

829

5

服务器评测软件
服务器评测软件

服务器评测软件有PassMark Software、CPU-Z、GPU-Z、CrystalDiskMark、IOmeter、JMeter、LoadRunner、Apache Bench等等。详细介绍:1、PassMark Software是一款综合性的服务器性能测试软件,可以评估服务器在各种负载条件下的性能;2、CPU-Z是一款可以提供服务器CPU详细信息的软件等等。

2023.10.17

414

3

如何开启TFTP服务器
如何开启TFTP服务器

开启TFTP服务器的步骤包括选择TFTP服务器软件、下载和安装软件、配置TFTP服务器以及启动和测试服务器等。本专题为大家提供服务器相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.18

2476

4

服务器负载不兼容怎么解决
服务器负载不兼容怎么解决

解决方法:1、增加服务器资源;2、负载均衡;3、优化应用程序;4、增加缓存机制;5、分布式架构;6、限流和熔断;7、自动化扩容。想知道更详细服务器负载不兼容的解决方法,可以访问本专题下面的文章。

2023.10.20

4612

4

宽带如何接入服务器
宽带如何接入服务器

宽带接入服务器的方法有ADSL宽带接入服务器、光纤接入服务器、无线接入服务器和以太网接入服务器等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2023.10.20

747

5

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
phpStudy极速入门视频教程
phpStudy极速入门视频教程

共6课时 | 54.6万人学习

独孤九贱(4)_PHP视频教程
独孤九贱(4)_PHP视频教程

共89课时 | 133.4万人学习