目錄
三個監控任務
info指令
向__sentinel__:hello頻道同步訊息
向資料節點做心跳探測
主觀下線和客觀下線
主觀下線
首頁 資料庫 Redis Redis高可用的兩種實作方案是什麼

Redis高可用的兩種實作方案是什麼

May 27, 2023 pm 07:42 PM
redis

Redis中為了實現高可用(High Availability,簡稱HA),採用如下兩個方式:

  • ##主從複製資料。

  • 採用哨兵監控資料節點的運作情況,一旦主節點出現問題由從節點頂繼續進行服務。

主從複製

Redis中主從節點複製資料有全量複製和部分複製之分。

舊版全量複製功能的實現

全量複製使用snyc指令來實現,其流程是:

  • 從伺服器向主伺服器發送sync命令。

  • 主伺服器在收到sync指令之後,呼叫bgsave指令產生***的rdb文件,將這個檔案同步給從伺服器,這樣從伺服器載入這個rdb檔案之後,狀態就會和主伺服器執行bgsave指令時候的一致。

  • 主伺服器將保存在命令緩衝區中的寫入命令同步給從伺服器,從伺服器執行這些命令,這樣從伺服器的狀態就跟主伺服器目前狀態一致了。

舊版全量複製功能,其***的問題是從伺服器斷線重連時,即便在從伺服器上已經有一部分資料了,也需要進行全量複製,這樣做的效率很低,於是新版的Redis在這部分做了改進。

新版全量複製功能的實作

Redis的最新版本採用psync指令取代了sync指令,psync指令不僅可以實現完全同步,還可以實作部分同步。

複製偏移

執行複製的雙方,主從伺服器,分別會維護一個複製偏移量:

  • 主伺服器每次向從伺服器同步了N位元組資料之後,將修改自己的複製偏移量N。

  • 從伺服器每次從主伺服器同步了N位元組資料之後,將修改自己的複製偏移 N。

複製積壓緩衝區

主伺服器內部維護了一個固定長度的先進先出隊列做為複製積壓緩衝區,其默認大小為1MB。

在主伺服器進行指令傳播時,不僅會將寫入指令同步到從伺服器,還會將寫入指令寫入複製積壓緩衝區。

伺服器運行ID

每個Redis伺服器,都有其運行ID,運行ID由伺服器在啟動時自動生成,主伺服器會將自己的運行ID傳送給從伺服器,而從伺服器會將主伺服器的運行ID保存起來。

從伺服器Redis斷線重連之後進行同步時,就是根據執行ID來判斷同步的進度:

  • 如果從伺服器上面儲存的主伺服器執行ID與目前主伺服器運行ID一致,則認為這次斷線重連連接的是先前複製的主伺服器,主伺服器可以繼續嘗試部分同步操作。

  • 否則,如果前後兩次主伺服器執行ID不相同,則認為是完成全同步流程。

psync指令流程

有了前面的準備,下面開始分析psync指令的流程:

  • 如果從伺服器之前沒有複製過任何主伺服器,或者之前執行過slaveof no one命令,那麼從伺服器就會向主伺服器發送psync ? -1命令,請求主伺服器進行資料的全量同步。

  • 否則,如果前面從伺服器已經同步過部分數據,那麼從伺服器向主伺服器發送psync 命令,其中runid是上一次主伺服器的運行id,offset是目前從伺服器的複製偏移量。

前面兩種情況主伺服器收到psync指令之後,會出現以下三種可能:

  • 主伺服器回傳fullresync 回复,表示主伺服器要求與從伺服器進行完整的資料全量同步操作。目前主伺服器的運行id為runid,複製偏移量為offset。

  • 如果主伺服器回應 continue,那麼表示主伺服器與從伺服器進行部分資料同步操作,將從伺服器缺少的資料同步過來即可。

  • 如果主伺服器回應-err,那麼表示主伺服器版本低於2.8,識別不了psync命令,此時從伺服器將向主伺服器發送sync命令,執行完整的全量數據同步。

哨兵機制概述

Redis使用哨兵機制來實作高可用(HA),其大概運作原理是:

  • Redis使用一組哨兵(sentinel)節點來監控主從redis服務的可用性。

  • 一旦發現Redis主節點失效,就會選出一個哨兵節點作為***(leader)。

  • 哨兵***再從剩餘的從Redis節點中選出一個Redis節點作為新的主Redis節點對外服務。

以上將Redis節點分成兩類:

  • 哨兵節點(sentinel):負責監控節點的運作。

  • 資料節點:即正常服務客戶端請求的Redis節點,有主從之分。

以上是大體的流程,這個流程需要解決以下幾個問題:

  • 如何監控Redis資料節點?

  • 如何確定一個Redis資料節點失效?

  • 如何選擇一個哨兵***節點?

  • 哨兵節點選擇新的主Redis節點的依據是什麼?

以下來逐一回答這些問題。

三個監控任務

哨兵節點透過三個定時監控任務監控Redis資料節點的服務可用性。

info指令

每隔10秒,每個哨兵節點都會向主、從Redis資料節點發送info指令,取得新的拓樸資訊。

Redis拓撲結構資訊包括了:

  • 本節點角色:主或從。

  • 主從節點的位址、連接埠資訊。

這樣,哨兵節點就能從info指令中自動獲取到從節點信息,因此那些後續才加入的從節點資訊不需要明確配置就能自動感知。

向__sentinel__:hello頻道同步訊息

每隔2秒,每個哨兵節點將會向Redis資料節點的__sentinel__:hello頻道同步自身得到的主節點資訊以及目前哨兵節點的訊息,由於其他哨兵節點也訂閱了這個頻道,因此實際上這個操作可以交換哨兵節點之間關於主節點以及哨兵節點的資訊。

這一操作實際上完成了兩件事: * 發現新的哨兵節點:如果有新的哨兵節點加入,此時保存下來這個新哨兵節點的信息,後續與該哨兵節點建立連接。用下列方式重寫: * 交換主節點的狀態訊息,以便後續客觀地判斷主節點是否已下線。

向資料節點做心跳探測

每隔1秒,每個哨兵節點都會向主、從資料節點以及其他sentinel節點發送ping指令做心跳偵測,這個心跳偵測是後續主觀判斷資料節點下線的依據。

主觀下線和客觀下線

主觀下線

##上面三個監控任務中的第三個探測心跳任務,如果在配置的down-after-milliseconds之後沒有收到有效回复,那麼就認為該數據節點「主觀下線(sdown)」。

為什麼稱為「主觀下線」?因為在一個分散式系統中,有多個機器在一起聯動工作,網路可能出現各種狀況,僅憑一個節點的判斷還不足以認為一個資料節點下線了,這就需要後面的「客觀下線」。

客觀下線

當一個哨兵節點認為主節點主觀下線時,該哨兵節點需要通過」sentinel is-master-down-by addr」指令向其他哨兵節點諮詢該主節點是否下線了,如果有超過半數的哨兵節點都回答了下線,此時認為主節點「客觀下線」。

選舉哨兵***

當主節點客觀下線時,需要選出一個哨兵節點做為哨兵***,以完成後續選出新的主節點的工作。

這個選舉的大致想法是:

  • 每個哨兵節點透過向其他哨兵節點發送」sentinel is-master-down-by addr」指令來申請成為哨兵***。

  • 而每個哨兵節點在收到一個」sentinel is-master-down-by addr」指令時,只允許給***個節點投票,其他節點的該指令都會被拒絕。

  • 如果一個哨兵節點收到了半數以上的同意票,則成為哨兵***。

  • 如果前面三步驟在一定時間內都沒有選出一個哨兵***,將會重新開始下一次選舉。

可以看到,這個選舉***的流程很像raft中選舉leader的流程。

選出新的主節點

在剩下的Redis從節點中,依照下列順序來選擇新的主節點:

  • #過濾掉「不健康」的資料節點:例如主觀下線、斷線的從節點、五秒內沒有回復過哨兵節點ping指令的節點、與主節點失聯的從節點。

  • 如果存在slave-priority(從節點優先權)***的從節點,則傳回該節點;否則繼續執行後續流程。

  • 選擇複製偏移量***的從節點,這表示這個從節點上面的資料最完整,如果存在則傳回不存在則繼續後面的流程。

  • 到了這裡,所有剩餘從節點的狀態都是一樣的,選擇runid最小的從節點。

提升新的主節點

選擇了新的主節點之後,還需要***的流程讓該節點成為新的主節點:

  • 哨兵***往上一步選出的從節點發出「slaveof no one」指令,讓該節點成為主節點。

  • 哨兵***向剩餘的從節點發送命令,讓它們成為新主節點的從節點。

  • 哨兵節點集合會將原來的主節點更新為從節點,當其復原之後命令它去複製新的主節點的資料。

#

以上是Redis高可用的兩種實作方案是什麼的詳細內容。更多資訊請關注PHP中文網其他相關文章!

本網站聲明
本文內容由網友自願投稿,版權歸原作者所有。本站不承擔相應的法律責任。如發現涉嫌抄襲或侵權的內容,請聯絡admin@php.cn

熱AI工具

Undresser.AI Undress

Undresser.AI Undress

人工智慧驅動的應用程序,用於創建逼真的裸體照片

AI Clothes Remover

AI Clothes Remover

用於從照片中去除衣服的線上人工智慧工具。

Undress AI Tool

Undress AI Tool

免費脫衣圖片

Clothoff.io

Clothoff.io

AI脫衣器

Video Face Swap

Video Face Swap

使用我們完全免費的人工智慧換臉工具,輕鬆在任何影片中換臉!

熱工具

記事本++7.3.1

記事本++7.3.1

好用且免費的程式碼編輯器

SublimeText3漢化版

SublimeText3漢化版

中文版,非常好用

禪工作室 13.0.1

禪工作室 13.0.1

強大的PHP整合開發環境

Dreamweaver CS6

Dreamweaver CS6

視覺化網頁開發工具

SublimeText3 Mac版

SublimeText3 Mac版

神級程式碼編輯軟體(SublimeText3)

熱門話題

Java教學
1657
14
CakePHP 教程
1415
52
Laravel 教程
1309
25
PHP教程
1257
29
C# 教程
1230
24
redis集群模式怎麼搭建 redis集群模式怎麼搭建 Apr 10, 2025 pm 10:15 PM

Redis集群模式通過分片將Redis實例部署到多個服務器,提高可擴展性和可用性。搭建步驟如下:創建奇數個Redis實例,端口不同;創建3個sentinel實例,監控Redis實例並進行故障轉移;配置sentinel配置文件,添加監控Redis實例信息和故障轉移設置;配置Redis實例配置文件,啟用集群模式並指定集群信息文件路徑;創建nodes.conf文件,包含各Redis實例的信息;啟動集群,執行create命令創建集群並指定副本數量;登錄集群執行CLUSTER INFO命令驗證集群狀態;使

redis數據怎麼清空 redis數據怎麼清空 Apr 10, 2025 pm 10:06 PM

如何清空 Redis 數據:使用 FLUSHALL 命令清除所有鍵值。使用 FLUSHDB 命令清除當前選定數據庫的鍵值。使用 SELECT 切換數據庫,再使用 FLUSHDB 清除多個數據庫。使用 DEL 命令刪除特定鍵。使用 redis-cli 工具清空數據。

redis怎麼讀取隊列 redis怎麼讀取隊列 Apr 10, 2025 pm 10:12 PM

要從 Redis 讀取隊列,需要獲取隊列名稱、使用 LPOP 命令讀取元素,並處理空隊列。具體步驟如下:獲取隊列名稱:以 "queue:" 前綴命名,如 "queue:my-queue"。使用 LPOP 命令:從隊列頭部彈出元素並返回其值,如 LPOP queue:my-queue。處理空隊列:如果隊列為空,LPOP 返回 nil,可先檢查隊列是否存在再讀取元素。

centos redis如何配置Lua腳本執行時間 centos redis如何配置Lua腳本執行時間 Apr 14, 2025 pm 02:12 PM

在CentOS系統上,您可以通過修改Redis配置文件或使用Redis命令來限制Lua腳本的執行時間,從而防止惡意腳本佔用過多資源。方法一:修改Redis配置文件定位Redis配置文件:Redis配置文件通常位於/etc/redis/redis.conf。編輯配置文件:使用文本編輯器(例如vi或nano)打開配置文件:sudovi/etc/redis/redis.conf設置Lua腳本執行時間限制:在配置文件中添加或修改以下行,設置Lua腳本的最大執行時間(單位:毫秒)

redis命令行怎麼用 redis命令行怎麼用 Apr 10, 2025 pm 10:18 PM

使用 Redis 命令行工具 (redis-cli) 可通過以下步驟管理和操作 Redis:連接到服務器,指定地址和端口。使用命令名稱和參數向服務器發送命令。使用 HELP 命令查看特定命令的幫助信息。使用 QUIT 命令退出命令行工具。

redis過期策略怎麼設置 redis過期策略怎麼設置 Apr 10, 2025 pm 10:03 PM

Redis數據過期策略有兩種:定期刪除:定期掃描刪除過期鍵,可通過 expired-time-cap-remove-count、expired-time-cap-remove-delay 參數設置。惰性刪除:僅在讀取或寫入鍵時檢查刪除過期鍵,可通過 lazyfree-lazy-eviction、lazyfree-lazy-expire、lazyfree-lazy-user-del 參數設置。

redis計數器怎麼實現 redis計數器怎麼實現 Apr 10, 2025 pm 10:21 PM

Redis計數器是一種使用Redis鍵值對存儲來實現計數操作的機制,包含以下步驟:創建計數器鍵、增加計數、減少計數、重置計數和獲取計數。 Redis計數器的優勢包括速度快、高並發、持久性和簡單易用。它可用於用戶訪問計數、實時指標跟踪、遊戲分數和排名以及訂單處理計數等場景。

如何優化debian readdir的性能 如何優化debian readdir的性能 Apr 13, 2025 am 08:48 AM

在Debian系統中,readdir系統調用用於讀取目錄內容。如果其性能表現不佳,可嘗試以下優化策略:精簡目錄文件數量:盡可能將大型目錄拆分成多個小型目錄,降低每次readdir調用處理的項目數量。啟用目錄內容緩存:構建緩存機制,定期或在目錄內容變更時更新緩存,減少對readdir的頻繁調用。內存緩存(如Memcached或Redis)或本地緩存(如文件或數據庫)均可考慮。採用高效數據結構:如果自行實現目錄遍歷,選擇更高效的數據結構(例如哈希表而非線性搜索)存儲和訪問目錄信

See all articles