首頁  >  文章  >  資料庫  >  Redis存放日誌及熱門文章

Redis存放日誌及熱門文章

齐天大圣
齐天大圣原創
2020-05-12 08:32:431966瀏覽

使用Redis的列表資料型別可以實作多種資料結構,可以將它看做php中的索引數組。它可以實作堆疊、佇列、訊息佇列的多種資料結構。今天,跟大家介紹下,如何使用redis來保存系統日誌及熱門文章清單。

存放日誌

大家知道,nginx日誌預設不會自動切割,它會一直存放一個檔案中,一直追加寫入,需要我們自己做切割日誌的操作。除了nginx外,很多地方都有用到日誌。出了問題後,日誌是我們是我們尋找線索的主要途徑之一。

我們現在打算將系統的日誌寫入到redis中,每天的日誌都會記錄到一個list清單中,可以防止單一日誌檔案過大。

基本想法是,每天的日誌訊息都寫入到單獨的list列表中,然後做定時任務,定時任務的功能是取出1個月前的日誌列表,將其持久化到文字檔案中,然後刪除redis中1個月前的日誌列表,防止redis佔用過多記憶體。

可以使用壓縮函數將日誌資訊壓縮,減少記憶體佔用。另外,再維護一個清單存日誌清單的鍵名,方便取出日誌清單鍵名。存放日誌的偽代碼如下:

$log = ... // 日志信息
// 日志列表键名
$key = 'log:'.strtotime(date('Y-m-d'));

// 维护一个键名列表
if (!$redis->exists($key)) {
 $listlogkey = 'log:key';
 $redis->rpush($listlogkey, $key);
}

// 日志信息存放到redis中
$redis->rpush($key, $log);

定時任務代碼如下:

$lastMonth = strtotime("-30 day");

while ($logkey =  $redis->lpop('log:key')) {
    $logTime = explode(':', $logkey)[1];
    
    if ($logTime < $lastMonth) {
        // 从日志列表里去日志信息,一次取50条
        for ($start = 0, $end = 49;true;$start +=50, $end+=50) {
            $logs = $redis->lrange($logkey, $start, $end);
            if (!$logs) break;
            // 将日志信息解压缩,然后追加写入文本文件中
             ……
             
            // 删除该日志列表
            $redis->del($logkey);
        }   
    } else {
        // 一个月之内的,重新push到左侧
        $redis->lpush(&#39;log:key&#39;, $logkey);
        exit;
    }
}

這裡有幾點需要注意,如果持久化日誌失敗後,或者是近一個月內的日誌,需要重新將日誌清單鍵名從左側push。另外,從日誌清單取日誌時,不要一次全部取出,這樣容易導致redis阻塞。每次,取一定數量(如50條),循環取出。

存放熱門新聞ID

這裡,就不貼程式碼了,主要講講思路。以前我弄個一個系統,有一個版單功能,有今日最熱、一週最熱、一月最熱。當時,我們的網站流量還蠻大的,過不了幾天,網站就掛了。原因是,mysql的慢查詢問題。因為,這塊的sql有分組、COUNT()、條件判斷等。

跟大家說說我們的解決方案:寫一個mysql的預存程序,定時呼叫預存程序。這個預存程序的作用是,篩選出今日、一週、一月最熱文章,分別取100條文章id,將其文章id存放到redis的隊列中。最熱文章,我們只展示前100條。這樣,我們的系統就沒有慢查詢了。

以上是Redis存放日誌及熱門文章的詳細內容。更多資訊請關注PHP中文網其他相關文章!

陳述:
本文內容由網友自願投稿,版權歸原作者所有。本站不承擔相應的法律責任。如發現涉嫌抄襲或侵權的內容,請聯絡admin@php.cn