搜尋
首頁資料庫Redisredis快取學習之一致性hash和hash槽

這篇文章為大家帶來了關於Redis的相關知識,其中主要介紹了一致性hash和hash槽的相關問題,如果發生擴容或節點丟失你就會遇到大量的資料遷移問題,一致性hash和hash槽就可以避免這種問題,希望對大家有幫助。

redis快取學習之一致性hash和hash槽

推薦學習:Redis學習教程

假如我們現在有x台快取設備,我們在決定把資料放到哪個快取設備上的時候可以key%x,但是如果發生擴容或節點遺失你就需要key%(x±y)這樣就會遇到大量的資料遷移問題,一致性hash和hash槽就可以避免這種問題。

一致性hash原理

普通的hash是對伺服器的數量取餘,一致性hash是對特定的數字取餘(2^32)不會因為伺服器的數量變化,首先我們對伺服器的ip或其他唯一識別取餘得到一個值這個值就是伺服器在hash環上的位置,然後對要放入伺服器的物件進行hash得到一個值,在hash換上找對應的伺服器如果值所在的位置沒有伺服器就看下一個位置是否伺服器知道找到可儲存的伺服器。

1、環形空間

依照常用的hash演算法將對應的key哈希到一個具有2的32 次方個節點的空間中,即0 ~ (2的32)-1的數位空間中。我們可以把這個東西想像成一個咬住尾巴的,形成了一個閉環。
redis快取學習之一致性hash和hash槽

2、伺服器hash到環上

#環有了我們現在需要把伺服器放到環上,可以依照伺服器的IP位址取得編號等唯一標識取hash後放到環上。
redis快取學習之一致性hash和hash槽服务器

3、資料儲存和取得

當我們需要把一個資料放到伺服器上的時候我們首先需要計算資料的hash值然後取餘,如果取餘後的值在環上有對應的伺服器那直接放進去如果沒有則向後查找。
redis快取學習之一致性hash和hash槽
所以最後data1在redis1裡面,data2在redis2裡面。當我們取得資料的時候也是執行相同的過程,計算key的hash值,然後根據相同的規則取得儲存的伺服器。

4、伺服器的刪除與新增

如果現在某個redis節點掛掉了,那麼其他節點裡面的資料是還在的,原來節點裡面的資料會被重新分配到下一個節點裡面。
如果在環境中新增一台伺服器RedisNeo,透過hash演算法將RedisNeo映射到環中,透過以順時針遷移的規則,那麼以前hash值在Redis2和RedisNeo之間的資料遷移到RedisNeo裡面(下圖中RedisNeo挨著Redis2),其它物件仍保持這原有的儲存位置。透過對節點的添加和刪除的分析,一致性哈希演算法在保持了單調性的同時,還是資料的遷移達到了最小,這樣的演算法對分散式叢集來說是非常合適的,避免了大量資料遷移,減小了伺服器的的壓力。
redis快取學習之一致性hash和hash槽
所以redisNeo加入後data3就到redisNeo裡面去了。

5、平衡

到目前為止一致性hash也可以算做完成了,但是有一個問題還需要解決,那就是平衡性。從下圖我們可以看出,當伺服器節點比較少的時候,會出現一個問題,就是此時必然造成大量資料集中到一個節點上面,例如你只有兩個節點一個在1另一個在10,那麼顯然1節點的壓力是無限大的,因為只有hash值在[2,10]之間的才會到10節點,其他的全到1節點上去了,為了解決這個資料傾斜問題,一致性哈希演算法引入了虛擬節點機制,即對每一個服務節點計算多個哈希,每個計算結果位置都放置一個此服務節點,稱為虛擬節點。具體做法可以先確定每個實體節點關聯的虛擬節點數量,然後在ip或主機名稱後面增加編號,同時資料定位演算法不變,只是多了一步虛擬節點到實際節點的對應。

hash槽

哈希槽是在redis cluster集群方案中採用的,redis cluster集群並沒有採用一致性哈希方案,而是採用資料分片中的哈希槽來進行資料儲存與讀取的。 redis cluster採用資料分片的雜湊槽來進行資料儲存和資料的讀取。 redis cluster一共有2^14(16384)個槽,所有的master節點都會有一個槽區例如0~1000,槽數是可以遷移的。 master節點的slave節點不分配槽,只擁有讀取權限。但注意在程式碼中redis cluster執行讀寫操作的都是master節點,並不是你想 的讀是從節點,寫是主節點。第一次新建redis cluster時,16384個插槽是被master節點均勻分佈的。
redis快取學習之一致性hash和hash槽
和一致性雜湊相比在擴容和縮容的時候需要手動手動分配hash槽,並且在刪除master節點的時候要把他的從節點和hash槽交給其他master節點;hash槽的是根據CRC-16(key) 384的值來判斷屬於哪個槽區。

推薦學習:Redis教學

以上是redis快取學習之一致性hash和hash槽的詳細內容。更多資訊請關注PHP中文網其他相關文章!

陳述
本文轉載於:CSDN。如有侵權,請聯絡admin@php.cn刪除
REDIS:它如何充當數據存儲和服務REDIS:它如何充當數據存儲和服務Apr 24, 2025 am 12:08 AM

REDISACTSASBOTHADATASTOREANDASERVICE.1)ASADATASTORE,ITUSESIN-MEMORYSTOOGATOFORFOFFASTESITION,支持VariousDatharptructuresLikeKey-valuepairsandsortedsetsetsetsetsetsetsets.2)asaservice,ItprovidespunctionslikeItionitionslikepunikeLikePublikePublikePlikePlikePlikeAndluikeAndluAascriptingiationsmpleplepleclexplectiations

REDIS與其他數據庫:比較分析REDIS與其他數據庫:比較分析Apr 23, 2025 am 12:16 AM

Redis與其他數據庫相比,具有以下獨特優勢:1)速度極快,讀寫操作通常在微秒級別;2)支持豐富的數據結構和操作;3)靈活的使用場景,如緩存、計數器和發布訂閱。選擇Redis還是其他數據庫需根據具體需求和場景,Redis在高性能、低延遲應用中表現出色。

REDIS的角色:探索數據存儲和管理功能REDIS的角色:探索數據存儲和管理功能Apr 22, 2025 am 12:10 AM

Redis在數據存儲和管理中扮演著關鍵角色,通過其多種數據結構和持久化機製成為現代應用的核心。 1)Redis支持字符串、列表、集合、有序集合和哈希表等數據結構,適用於緩存和復雜業務邏輯。 2)通過RDB和AOF兩種持久化方式,Redis確保數據的可靠存儲和快速恢復。

REDIS:了解NOSQL概念REDIS:了解NOSQL概念Apr 21, 2025 am 12:04 AM

Redis是一種NoSQL數據庫,適用於大規模數據的高效存儲和訪問。 1.Redis是開源的內存數據結構存儲系統,支持多種數據結構。 2.它提供極快的讀寫速度,適合緩存、會話管理等。 3.Redis支持持久化,通過RDB和AOF方式確保數據安全。 4.使用示例包括基本的鍵值對操作和高級的集合去重功能。 5.常見錯誤包括連接問題、數據類型不匹配和內存溢出,需注意調試。 6.性能優化建議包括選擇合適的數據結構和設置內存淘汰策略。

REDIS:現實世界的用例和示例REDIS:現實世界的用例和示例Apr 20, 2025 am 12:06 AM

Redis在現實世界中的應用包括:1.作為緩存系統加速數據庫查詢,2.存儲Web應用的會話數據,3.實現實時排行榜,4.作為消息隊列簡化消息傳遞。 Redis的多功能性和高性能使其在這些場景中大放異彩。

REDIS:探索其功能和功能REDIS:探索其功能和功能Apr 19, 2025 am 12:04 AM

Redis脫穎而出是因為其高速、多功能性和豐富的數據結構。 1)Redis支持字符串、列表、集合、散列和有序集合等數據結構。 2)它通過內存存儲數據,支持RDB和AOF持久化。 3)從Redis6.0開始引入多線程處理I/O操作,提升了高並發場景下的性能。

Redis是SQL還是NOSQL數據庫?答案解釋了Redis是SQL還是NOSQL數據庫?答案解釋了Apr 18, 2025 am 12:11 AM

RedisisclassifiedasaNoSQLdatabasebecauseitusesakey-valuedatamodelinsteadofthetraditionalrelationaldatabasemodel.Itoffersspeedandflexibility,makingitidealforreal-timeapplicationsandcaching,butitmaynotbesuitableforscenariosrequiringstrictdataintegrityo

REDIS:提高應用程序性能和可擴展性REDIS:提高應用程序性能和可擴展性Apr 17, 2025 am 12:16 AM

Redis通過緩存數據、實現分佈式鎖和數據持久化來提升應用性能和可擴展性。 1)緩存數據:使用Redis緩存頻繁訪問的數據,提高數據訪問速度。 2)分佈式鎖:利用Redis實現分佈式鎖,確保在分佈式環境中操作的安全性。 3)數據持久化:通過RDB和AOF機制保證數據安全性,防止數據丟失。

See all articles

熱AI工具

Undresser.AI Undress

Undresser.AI Undress

人工智慧驅動的應用程序,用於創建逼真的裸體照片

AI Clothes Remover

AI Clothes Remover

用於從照片中去除衣服的線上人工智慧工具。

Undress AI Tool

Undress AI Tool

免費脫衣圖片

Clothoff.io

Clothoff.io

AI脫衣器

Video Face Swap

Video Face Swap

使用我們完全免費的人工智慧換臉工具,輕鬆在任何影片中換臉!

熱工具

MantisBT

MantisBT

Mantis是一個易於部署的基於Web的缺陷追蹤工具,用於幫助產品缺陷追蹤。它需要PHP、MySQL和一個Web伺服器。請查看我們的演示和託管服務。

EditPlus 中文破解版

EditPlus 中文破解版

體積小,語法高亮,不支援程式碼提示功能

ZendStudio 13.5.1 Mac

ZendStudio 13.5.1 Mac

強大的PHP整合開發環境

Safe Exam Browser

Safe Exam Browser

Safe Exam Browser是一個安全的瀏覽器環境,安全地進行線上考試。該軟體將任何電腦變成一個安全的工作站。它控制對任何實用工具的訪問,並防止學生使用未經授權的資源。

SublimeText3 Mac版

SublimeText3 Mac版

神級程式碼編輯軟體(SublimeText3)