1、前言
大家都知道,電腦的瓶頸之一就是IO,為了解決記憶體與磁碟速度不符的問題,產生了緩存,將一些熱點資料放在記憶體中,隨用隨取,降低連接到資料庫的請求連結,避免資料庫掛掉。要注意的是,無論是擊穿還是後面談到的穿透與雪崩,都是在高並發前提下,比如當緩存中某一個熱點key失效。
2、問題起因
有兩個主要原因:
1、Key過期;
2、Key被頁面置換淘汰。
對於第一個原因是因為在Redis中,Key有過期時間,如果某一個時刻(假如商城做活動,零點開始)key失效,那麼零點之後對某一個商品查詢請求將全都壓到資料庫上,導致資料庫崩。
對於第二個原因,因為記憶體是有限的,要時時刻刻緩存新的數據,淘汰舊的數據,所以在一定的頁面置換策略(常見頁面置換演算法圖解)中,淘汰數據,如果某些商品做活動前無人問津,勢必會被淘汰。
3、應對擊穿的處理思路
正常的處理請求如圖:
#由於key過期在所難免,高流量來到Redis時,根據Redis的單執行緒特性,可以認為任務是在佇列裡依序執行的,當請求到達Redis發現Key過期時,進行一個操作:設定鎖定。
這個流程大概如下:
請求到達Redis,發現Redis Key過期,查看有沒有鎖,沒有鎖的話回到佇列後面排隊
設定鎖,注意,這兒應該是setnx(),而不是set(),因為可能有其他執行緒已經設定鎖了
取得鎖,拿到鎖了就去資料庫取數據,請求返回後釋放鎖。
但是引出了一個新的問題,如果拿到鎖去拿資料的請求然後掛了怎麼辦?也就是鎖定沒有釋放,其他進程都在等鎖,解決辦法是:
對鎖設定一個過期時間,如果到達了過期時間還沒釋放就自動釋放,問題又來了,鎖掛了好說,但是如果是鎖超時呢?也就是在設定的時間裡資料沒有取出來,但是鎖由過期了,常見的思路是,鎖過期時間值遞增,但是想想不靠譜,因為第一個請求可能超時,如果後面的也超時呢,接連多次超時之後,鎖過期時間值勢必特別大了,這樣做弊端太多。
另一個想法是,再開啟一個線程,進行監控,如果取資料的線程沒有掛的話,就適當延遲鎖的過期時間。
4、穿透
穿透主要原因是許多請求都在存取資料庫不存在的數據,例如一個賣書的商城一直被請求查詢茶葉產品,由於Redis緩存主要是用來緩存熱點數據,對於數據庫都不存在的數據,是沒法緩存的,這種異常流量就會直接到達數據庫並且返回"沒有"的查詢結果。
應對這種要求,處理辦法是對存取請求加上一層過濾器,例如布隆過濾器、增強版布隆過濾器、布穀鳥過濾器。
除了布隆過濾器,可以增加一些參數檢驗,例如資料庫資料id一般都是遞增的,如果請求id = -10 這種參數,勢必繞過Redis,避免這種情況,可以對使用者真實性檢驗等操作。
5、雪崩
雪崩,和擊穿類似,不同的是擊穿是一個熱點Key某時刻失效,而雪崩是大量的熱點Key在一瞬間失效,網路上很多部落格都在強調解決雪崩的策略是隨機過期時間,這個非常不準確,舉個例子,銀行做活動,之前這個利息係數為2%,過了零點係數改為3%,這種情況能將用戶的對應的key改為隨機過期嗎?如果用的過去的數據叫髒數據。
明顯不可以,同樣存錢 f0c;你存到年底利息300萬,隔壁才200萬,這不得打架啊,開玩笑~
正確的思路是,首先要看看這個Key過期是不是時點性有關,時點性無關的話,可以隨機過期時間解決。
如果是時點性有關,例如剛剛說的銀行某一天改變某係數,那麼就要利用強依賴擊穿方案,策略是先過去的線程更新一下所有key。
在後台更新熱點key的同時,業務層將進來的請求延時一下,例如短暫的睡幾毫秒或秒,給後面的更新熱點key分散壓力。
以上是Redis擊穿穿透雪崩產生原因為何及怎麼解決的詳細內容。更多資訊請關注PHP中文網其他相關文章!

Redis的數據模型和結構包括五種主要類型:1.字符串(String):用於存儲文本或二進制數據,支持原子操作。 2.列表(List):有序元素集合,適合隊列和堆棧。 3.集合(Set):無序唯一元素集合,支持集合運算。 4.有序集合(SortedSet):帶分數的唯一元素集合,適用於排行榜。 5.哈希表(Hash):鍵值對集合,適合存儲對象。

Redis的數據庫方法包括內存數據庫和鍵值存儲。 1)Redis將數據存儲在內存中,讀寫速度快。 2)它使用鍵值對存儲數據,支持複雜數據結構,如列表、集合、哈希表和有序集合,適用於緩存和NoSQL數據庫。

Redis是一個強大的數據庫解決方案,因為它提供了極速性能、豐富的數據結構、高可用性和擴展性、持久化能力以及廣泛的生態系統支持。 1)極速性能:Redis的數據存儲在內存中,讀寫速度極快,適合高並發和低延遲應用。 2)豐富的數據結構:支持多種數據類型,如列表、集合等,適用於多種場景。 3)高可用性和擴展性:支持主從復制和集群模式,實現高可用性和水平擴展。 4)持久化和數據安全:通過RDB和AOF兩種方式實現數據持久化,確保數據的完整性和可靠性。 5)廣泛的生態系統和社區支持:擁有龐大的生態系統和活躍社區,

Redis的關鍵特性包括速度、靈活性和豐富的數據結構支持。 1)速度:Redis作為內存數據庫,讀寫操作幾乎瞬時,適用於緩存和會話管理。 2)靈活性:支持多種數據結構,如字符串、列表、集合等,適用於復雜數據處理。 3)數據結構支持:提供字符串、列表、集合、哈希表等,適合不同業務需求。

Redis的核心功能是高性能的內存數據存儲和處理系統。 1)高速數據訪問:Redis將數據存儲在內存中,提供微秒級別的讀寫速度。 2)豐富的數據結構:支持字符串、列表、集合等,適應多種應用場景。 3)持久化:通過RDB和AOF方式將數據持久化到磁盤。 4)發布訂閱:可用於消息隊列或實時通信系統。

Redis支持多種數據結構,具體包括:1.字符串(String),適合存儲單一值數據;2.列表(List),適用於隊列和棧;3.集合(Set),用於存儲不重複數據;4.有序集合(SortedSet),適用於排行榜和優先級隊列;5.哈希表(Hash),適合存儲對像或結構化數據。

Redis計數器是一種使用Redis鍵值對存儲來實現計數操作的機制,包含以下步驟:創建計數器鍵、增加計數、減少計數、重置計數和獲取計數。 Redis計數器的優勢包括速度快、高並發、持久性和簡單易用。它可用於用戶訪問計數、實時指標跟踪、遊戲分數和排名以及訂單處理計數等場景。

使用 Redis 命令行工具 (redis-cli) 可通過以下步驟管理和操作 Redis:連接到服務器,指定地址和端口。使用命令名稱和參數向服務器發送命令。使用 HELP 命令查看特定命令的幫助信息。使用 QUIT 命令退出命令行工具。


熱AI工具

Undresser.AI Undress
人工智慧驅動的應用程序,用於創建逼真的裸體照片

AI Clothes Remover
用於從照片中去除衣服的線上人工智慧工具。

Undress AI Tool
免費脫衣圖片

Clothoff.io
AI脫衣器

AI Hentai Generator
免費產生 AI 無盡。

熱門文章

熱工具

Dreamweaver Mac版
視覺化網頁開發工具

PhpStorm Mac 版本
最新(2018.2.1 )專業的PHP整合開發工具

SublimeText3 英文版
推薦:為Win版本,支援程式碼提示!

DVWA
Damn Vulnerable Web App (DVWA) 是一個PHP/MySQL的Web應用程序,非常容易受到攻擊。它的主要目標是成為安全專業人員在合法環境中測試自己的技能和工具的輔助工具,幫助Web開發人員更好地理解保護網路應用程式的過程,並幫助教師/學生在課堂環境中教授/學習Web應用程式安全性。 DVWA的目標是透過簡單直接的介面練習一些最常見的Web漏洞,難度各不相同。請注意,該軟體中

mPDF
mPDF是一個PHP庫,可以從UTF-8編碼的HTML產生PDF檔案。原作者Ian Back編寫mPDF以從他的網站上「即時」輸出PDF文件,並處理不同的語言。與原始腳本如HTML2FPDF相比,它的速度較慢,並且在使用Unicode字體時產生的檔案較大,但支援CSS樣式等,並進行了大量增強。支援幾乎所有語言,包括RTL(阿拉伯語和希伯來語)和CJK(中日韓)。支援嵌套的區塊級元素(如P、DIV),