大家讲道理2017-05-16 17:31:35
說一下我們的方案,流量1.9kw
1. 前台以 方式記錄傳輸日誌
2. ningx
单独记录 tj.html
的訪問日誌
3. syslog
定時 1分鐘分割一次
4. cronjob
定时1
分鐘 處理分析分割好的日誌
現在我們採用的是1分鐘更新一次mysql
数据库,正在打算将当天的数据存储方式放到redis上,而将历史记录放到mongodb
上
黄舟2017-05-16 17:31:35
只要定時做好日誌切割,每次處理的檔案不會很大。
然後自己寫個小程式統計,效率比較高。
如果有比較靈活的查詢需求,還可以把日誌資訊記錄到資料庫裡頭去,根據時間和必要的欄位建立好索引,用SQL直接查詢就好了。