Nginx 中 access_log 配合 ELK 系统进行日志数据可视化-Nginx-PHP中文网

nginx access_log 接入 elk 的核心是：自定义 json 日志格式 → logstash 用 json codec 解析 → kibana 创建索引模式并构建可视化看板；需注意日志权限、sincedb 持久化、日期动态索引及敏感字段脱敏。

nginx 中 access_log 配合 elk 系统进行日志数据可视化

将 Nginx 的 access_log 接入 ELK（Elasticsearch + Logstash + Kibana）系统，是实现 Web 访问日志实时采集、结构化解析与可视化分析的常用方案。关键在于让原始日志具备可解析性，并通过 Logstash 正确提取字段，最终在 Kibana 中构建有意义的仪表板。

确保 Nginx 日志格式支持结构化解析

Nginx 默认的 log_format 是纯文本，不利于后续提取。建议自定义一个带命名字段的 JSON 或 key-value 格式，推荐使用 JSON 格式，兼容性好且 Logstash 解析稳定。

在 nginx.conf 的 http 块中定义：

log_format json '{"time":"$time_iso8601",'
                 '"remote_addr":"$remote_addr",'
                 '"host":"$host",'
                 '"request":"$request",'
                 '"status":$status,'
                 '"body_bytes_sent":$body_bytes_sent,'
                 '"http_referer":"$http_referer",'
                 '"http_user_agent":"$http_user_agent",'
                 '"request_time":$request_time,'
                 '"upstream_response_time":"$upstream_response_time"}';

在 server 或 location 块中启用该格式：

access_log /var/log/nginx/access.log json;

注意：确保日志路径有写入权限，且避免多进程并发写入冲突（Nginx 自身已处理）。

Logstash 配置：从文件读取并解析 JSON 日志

Logstash 是日志管道的核心，负责采集、解析和转发。使用 file input 插件读取日志文件，json filter 解析内容，再输出到 Elasticsearch。

配置示例（/etc/logstash/conf.d/nginx.conf）：

input {
  file {
    path => "/var/log/nginx/access.log"
    start_position => "end"
    sincedb_path => "/var/lib/logstash/sincedb_nginx"
    codec => "json"
  }
}
<p>filter {</p><div class="aritcle_card flexRow artxards">
											<div class="artcardd flexRow">
												<a class="aritcle_card_img" rel="nofollow" href="/xiazai/skill9290" title="Web Accessibility (WCAG 2 AA))"><img
														src="https://img.php.cn/upload/skill/000/000/081/179254634481418.jpg" alt="Web Accessibility (WCAG 2 AA))" onerror="this.onerror='';this.src='/static/lhimages/moren/morentu.png'" ></a>
												<div class="aritcle_card_info flexColumn">
													<a rel="nofollow" href="/xiazai/skill9290" title="Web Accessibility (WCAG 2 AA))" class="overflowclass">Web Accessibility (WCAG 2 AA))</a>
													<p class="overflowclass">将 WCAG 2 AA 无障碍标准应用于设计系统、UI 组件和网页——通过可运行的验证器进行对比度计算，采用设计 token 模式使颜色天生可访问，设定排版和焦点状态规则，并提供语义检查清单。适用于构建或审查 UI。</p>
												</div>
												<a rel="nofollow" href="/xiazai/skill9290" title="Web Accessibility (WCAG 2 AA))" class="aritcle_card_btn flexRow flexcenter"><b></b><span>下载</span>
												</a>
											</div>
										</div><h1>可选：将字符串型时间转为 Logstash 时间戳</h1><p>date {
match => ["time", "ISO8601"]
target => "@timestamp"
}</p><h1>可选：拆分 request 字段获取 method、path、protocol</h1><p>if [request] {
grok {
match => { "request" => "%{WORD:method} %{URIPATHPARAM:request_path} %{URIPROTO:protocol}" }
}
}
}</p><p>output {
elasticsearch {
hosts => ["<a href="https://www.php.cn/link/fb7850115a917d3ab720269da3e667de">https://www.php.cn/link/fb7850115a917d3ab720269da3e667de</a>"]
index => "nginx-access-%{+YYYY.MM.dd}"
}
}</p>

说明：codec => "json" 直接解析 JSON 行，比用 grok 匹配文本更高效准确；sincedb_path 确保重启后不重复读取；index 使用日期动态命名，便于按天管理索引。