怎么利用 $sent_http_content_type 变量在日志中统计并分析不同 MIME 类型的流量消耗

胖芳大大_2091

胖芳大大_2091

2026-06-24

210人浏览

原创

可通过 nginx 的 $sent_http_content_type 变量在 access log 中记录响应 mime 类型,并结合 awk、prometheus 或 elk 等工具统计流量占比、请求数及带宽消耗;需在 log_format 中定义该变量,其值为小写标准化类型(如 text/html),未设置时为空或“-”;awk 分析时需确认字段位置,建议清洗参数(如去除 charset)后按大类聚合(如 text、image);进阶可对接 nginxlog-exporter 暴露 prometheus 指标或用 logstash 入库做可视化与告警。

怎么利用 $sent_http_content_type 变量在日志中统计并分析不同 mime 类型的流量消耗

可以通过 Nginx 的 $sent_http_content_type 变量,在 access log 中记录每个响应的实际 MIME 类型,再结合日志分析工具(如 awk、goaccess、ELK 或 Prometheus+nginxlog-exporter)统计各类 MIME 类型的流量占比、请求数和带宽消耗。

配置 Nginx 日志格式,捕获 Content-Type

该变量在响应头已发送后才可读取,需确保它出现在 log_format 中,并且放在 log_format 定义里(不能只在 access_log 指令中临时引用):

log_format mime_stats 
  '$remote_addr - $remote_user [$time_local] '
  '"$request" $status $body_bytes_sent '
  '"$http_referer" "$http_user_agent" '
  '$sent_http_content_type';  # 关键:记录实际发出的 Content-Type
<p>access_log /var/log/nginx/access.log mime_stats;
</p>

注意:$sent_http_content_type 是小写形式(Nginx 自动标准化),值如 text/html、application/json、image/jpeg;若响应未设 Content-Type(极少见),该字段为空或显示为 -。

一点妙笔
一点妙笔

一款AI工具,主要用于体制内必备 AI 公文写作助手,适合需要提升相关任务效率的用户。

下载

用 awk 快速统计各类型流量与请求数

假设日志已按上述格式生成,可运行以下命令快速汇总(按字节数降序):

  • awk '{ct[$12] += $10; req[$12]++} END {for (i in ct) print ct[i], req[i], i}' /var/log/nginx/access.log | sort -nr
  • 其中 $12 对应 $sent_http_content_type 字段(按空格分隔,位置取决于你的 log_format);$10 是 $body_bytes_sent(实际传输的响应体字节数)
  • 建议先用 head -1 /var/log/nginx/access.log | awk '{print NF}' 确认字段总数,再用 awk '{print $0}' | cut -d' ' -f1-15 查看前几行字段对齐情况,避免错位

识别常见 MIME 类型并归类分析

原始值较细碎(如 text/css; charset=utf-8、application/javascript; charset=utf-8),建议清洗后再聚合:

  • 用 sed 或 awk 提取主类型:例如 sub(/;.*$/, "", $12) 去掉参数部分,得到 text/css → text/css
  • 按大类合并:将 text/html、text/plain、text/css、text/javascript 统计为 “text”;image/png、image/jpeg、image/webp 归为 “image”
  • 对 API 场景重点监控 application/json 和 application/xml 的请求频次与平均响应体积,辅助判断接口负载

进阶:对接时序分析或告警

若需长期监控,推荐两种轻量路径:

  • 使用 nginxlog-exporter,自定义解析规则提取 content_type 和 body_bytes_sent,暴露为 Prometheus 指标,例如:nginx_http_response_size_bytes_sum{content_type="application/json"}
  • 用 Logstash 或 Fluent Bit 做实时解析,把 $sent_http_content_type 作为字段入库,配合 Kibana 制作“MIME 类型带宽热力图”或“Top 5 流量类型周环比”看板
  • 设置简单告警:当某类(如 video/mp4)单日流量突增 300%,或 application/octet-stream 请求量异常升高(可能文件下载被滥用),触发通知

相关专题

更多
nginx 重启
nginx 重启

nginx重启对于网站的运维来说是非常重要的,根据不同的需求,可以选择简单重启、平滑重启或定时重启等方式。本专题为大家提供nginx重启的相关的文章、下载、课程内容,供大家免费下载体验。

2023.07.27

383

5

nginx 配置详解
nginx 配置详解

Nginx的配置是指设置和调整Nginx服务器的行为和功能的过程。通过配置文件,可以定义虚拟主机、HTTP请求处理、反向代理、缓存和负载均衡等功能。Nginx的配置语法简洁而强大,允许管理员根据自己的需要进行灵活的调整。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.08.04

3267

6

nginx配置详解
nginx配置详解

NGINX与其他服务类似,因为它具有以特定格式编写的基于文本的配置文件。本专题为大家提供nginx配置相关的文章,大家可以免费学习。

2023.08.04

5925

6

tomcat和nginx有哪些区别
tomcat和nginx有哪些区别

tomcat和nginx的区别:1、应用领域;2、性能;3、功能;4、配置;5、安全性;6、扩展性;7、部署复杂性;8、社区支持;9、成本;10、日志管理。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.02.23

561

5

nginx报404怎么解决
nginx报404怎么解决

当访问 nginx 网页服务器时遇到 404 错误,表明服务器无法找到请求资源,可以通过以下步骤解决:1. 检查文件是否存在且路径正确;2. 检查文件权限并更改为 644 或 755;3. 检查 nginx 配置,确保根目录设置正确、没有冲突配置等等。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.07.09

1476

5

Nginx报404错误解决方法
Nginx报404错误解决方法

解决方法:只需要加上这段配置:try_files $uri $uri/ /index.html;即可。想了解更多Nginx的相关内容,可以阅读本专题下面的文章。

2024.08.07

3938

3

nginx部署php项目教程汇总
nginx部署php项目教程汇总

本专题整合了nginx部署php项目教程汇总,阅读专题下面的文章了解更多详细内容。

2026.01.13

122

12

nginx配置文件详细教程
nginx配置文件详细教程

本专题整合了nginx配置文件相关教程详细汇总,阅读专题下面的文章了解更多详细内容。

2026.01.13

437

23

Nginx跨平台安装实操指南:Windows、macOS与Linux环境快速搭建
Nginx跨平台安装实操指南:Windows、macOS与Linux环境快速搭建

本指南详解Nginx在Windows、macOS及Linux系统的安装全流程。涵盖官方包解压、Homebrew一键部署、APT/YUM源配置及Docker容器化方案。无论新手或开发者,均可快速搭建运行环境,掌握跨平台核心指令,为后续配置与调优奠定坚实基础。

2026.03.16

159

12

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
phpStudy极速入门视频教程
phpStudy极速入门视频教程

共6课时 | 54.6万人学习

独孤九贱(4)_PHP视频教程
独孤九贱(4)_PHP视频教程

共89课时 | 133.4万人学习