可通过nginx日志+实时解析+轻量可视化低成本实现静态资源引用实时统计：1.自定义log_format并为静态资源location单独记录；2.实时清洗uri归一化路径；3.用内存聚合+sse每5秒统计pv/uv/错误率等；4.增强日志字段辅助问题定位。
可以通过 Nginx 日志 + 实时日志解析 + 轻量可视化方案，低成本实现静态资源引用情况的实时统计大盘。核心不依赖复杂组件，重点在日志结构化、关键字段提取和低延迟聚合展示。
1. 精准采集静态资源访问日志
默认 access_log 无法区分静态资源类型，需自定义 log_format 并按扩展名或路径特征打标：
- 在 http 块中定义带资源类型标识的日志格式：
log_format static_log '$remote_addr - $remote_user [$time_local] "$request" $status $body_bytes_sent "$http_referer" "$http_user_agent" "$request_filename" "$request_uri" $request_time'; - 为静态资源 location 单独启用该日志（避免污染主日志）：
location ~* \.(js|css|png|jpg|gif|woff2|ttf|svg|ico)$ {
access_log /var/log/nginx/static_access.log static_log;
expires 1h;
} - 关键：$request_filename 可辅助判断是否真实命中文件；$request_uri 保留原始路径，便于归一化（如去除 ?v=xxx）
2. 实时提取并归一化资源路径
原始 URI 常含版本参数、CDN 查询串等，需清洗后才能准确统计引用频次：
- 用 awk / sed 或轻量 Node.js/Python 脚本 tail -f 实时读取 static_access.log
- 对 $request_uri 做标准化处理：
– 去除 ? 后全部参数（或仅保留 ?v= 版本号用于灰度识别）
– 将 /static/v1.2.0/app.js → /static/app.js
– 统一小写（避免 /A.js 和 /a.js 被算作两个资源） - 输出结构化行：[timestamp] [clean_path] [status] [referer_domain] [user_agent_type]
3. 构建轻量实时聚合与展示层
无需接入 Kafka + Flink，用内存聚合 + WebSocket 或 Server-Sent Events（SSE）即可满足中小规模场景：
- 用 Python（Flask + Redis Sorted Set）或 Node.js（Express + in-memory Map）每 5 秒滚动统计：
– 每个 clean_path 的 PV、UV（基于 IP 或 UA Hash）、4xx/5xx 错误率
– 引用来源 Top5（从 referer_domain 提取） - 前端用 Chart.js 或 ECharts 连接 SSE 接口，每秒拉取最新 TOP20 资源列表 + 折线图（近 10 分钟趋势）
- 附加维度：点击热力图（按小时段分布）、错误突增告警（同比前 5 分钟 +300% 触发）
4. 补充可观测性增强定位效率
单纯 PV 不足以诊断问题，需关联上下文信息：
- 在日志中增加 $upstream_http_content_length 和 $sent_http_content_type，快速识别空响应或 MIME 错误
- 对 404 资源单独记录 referer，定位“谁在引用已下线的 JS/CSS”
- 配置 log_if 判断 $request_filename = ""，捕获因 alias/root 配置错误导致的 404（而非文件不存在）
不复杂但容易忽略：静态资源大盘的价值不在“好看”，而在快速发现冗余加载、错误引用、缓存失效链路——把日志变成可操作信号，才是关键。
