淺談Redis中的RDB和AOF持久化模式缺陷
這篇文章跟大家介紹一下Redis 2種持久化模式(RDB和AOF)的缺陷。有一定的參考價值,有需要的朋友可以參考一下,希望對大家有幫助。
【相關推薦:Redis影片教學】
一、RDB持久化模式缺陷
1、問題描述:
並發200路,模擬不斷寫Redis,持續4小時後,介面呼叫開始出現大量失敗,錯誤訊息如下:
{"data":{"sendResult":null},"base":{"returncode":"99999","returndesc":"系统异常:MISCONF Redis is configured to save RDB snapshots, but is currently not able to persist on disk. Commands that may modify the data set are disabled. Please check Redis logs for details about the error."},"qrybase":{"total":0,"count":0,"start":0}}
2、原因分析:
解讀錯誤訊息,以為是磁碟不夠用引起,結果發現磁碟還剩餘42%,如下所示:
於是根據錯誤訊息提示開啟Redis日誌,繼續壓測,介面仍會報錯,但可從Redis日誌訊息中
Can't save in background: fork: Cannot allocate memory
#程式使用記憶體不當有關,查看Redis主進程佔用記憶體如下:佔用近55%*4G記憶體
#具體原因:Redis在儲存資料到硬碟時為了避免主進程假死,需要Fork一份主進程,然後在Fork進程內完成資料保存到硬碟的操作,如果主進程使用了2.2GB的內存,Fork子進程的時候需要額外的2.2GB,此時內存就不夠了,Fork失敗,進而數據保存硬碟也失敗了。
3、緩解方案(無法完全解決問題):
3.1 修改redis.conf檔案中設定項stop-writes-on-bgsave-error no (預設值為yes),即當bgsave快照操作出錯時停止寫資料到磁碟,這樣後面寫錯做都會失敗,為了不影響後續寫入操作,故需將該項值改為no
3.2 修改核心參數(如下3種方式),但需要root權限:
(1) 编辑/etc/sysctl.conf ,改vm.overcommit_memory=1,然后sysctl -p 使配置文件生效 (2)sysctl vm.overcommit_memory=1 (3)echo 1 > /proc/sys/vm/overcommit_memory
二、AOF持久化模式缺陷
1、問題1描述:
Redis主從節點皆開啟AOF模式,並發200路,模擬不斷寫Redis,持續15分鐘後,介面呼叫開始出現大量失敗,且Redis所在的Linux虛擬伺服器掛起。
介面報錯如下:
{"data":null,"base":{"returndesc":"系统异常","returncode":"999999"},"qrybase":null} Biz(dubbo)接口报错如下: 2015-06-05 11:28:28.760 [DubboServerHandler-X.X.X.X:20882-thread-173] ERROR - error while validate jedis! redis.clients.jedis.exceptions.JedisConnectionException: java.net.SocketTimeoutException: Read timed out
原因分析:
從dubbo介面報錯資訊來看,是因為介面API操作Redis逾時導致。從系統日誌與IO監控來看,均說明上述問題是由於IO瓶頸(系統IO過於繁忙)所致,如下所示:
#從系統日誌也能看出,IO阻塞時間超過了120秒,由於系統安全機制導致機器掛起。
總結######測試結果證明AOF模式有最明顯缺陷,即訪問壓力大時IO會成為效能瓶頸,進而導致服務不可用。 ######3、緩解方案(不能根本解決問題)######編輯/etc/sysctl.conf ,新增以下設定:###vm.dirty_background_ratio = 5 vm.dirty_ratio = 10
以上是淺談Redis中的RDB和AOF持久化模式缺陷的詳細內容。更多資訊請關注PHP中文網其他相關文章!

熱AI工具

Undresser.AI Undress
人工智慧驅動的應用程序,用於創建逼真的裸體照片

AI Clothes Remover
用於從照片中去除衣服的線上人工智慧工具。

Undress AI Tool
免費脫衣圖片

Clothoff.io
AI脫衣器

Video Face Swap
使用我們完全免費的人工智慧換臉工具,輕鬆在任何影片中換臉!

熱門文章

熱工具

記事本++7.3.1
好用且免費的程式碼編輯器

SublimeText3漢化版
中文版,非常好用

禪工作室 13.0.1
強大的PHP整合開發環境

Dreamweaver CS6
視覺化網頁開發工具

SublimeText3 Mac版
神級程式碼編輯軟體(SublimeText3)

Redis集群模式通過分片將Redis實例部署到多個服務器,提高可擴展性和可用性。搭建步驟如下:創建奇數個Redis實例,端口不同;創建3個sentinel實例,監控Redis實例並進行故障轉移;配置sentinel配置文件,添加監控Redis實例信息和故障轉移設置;配置Redis實例配置文件,啟用集群模式並指定集群信息文件路徑;創建nodes.conf文件,包含各Redis實例的信息;啟動集群,執行create命令創建集群並指定副本數量;登錄集群執行CLUSTER INFO命令驗證集群狀態;使

如何清空 Redis 數據:使用 FLUSHALL 命令清除所有鍵值。使用 FLUSHDB 命令清除當前選定數據庫的鍵值。使用 SELECT 切換數據庫,再使用 FLUSHDB 清除多個數據庫。使用 DEL 命令刪除特定鍵。使用 redis-cli 工具清空數據。

要從 Redis 讀取隊列,需要獲取隊列名稱、使用 LPOP 命令讀取元素,並處理空隊列。具體步驟如下:獲取隊列名稱:以 "queue:" 前綴命名,如 "queue:my-queue"。使用 LPOP 命令:從隊列頭部彈出元素並返回其值,如 LPOP queue:my-queue。處理空隊列:如果隊列為空,LPOP 返回 nil,可先檢查隊列是否存在再讀取元素。

在CentOS系統上,您可以通過修改Redis配置文件或使用Redis命令來限制Lua腳本的執行時間,從而防止惡意腳本佔用過多資源。方法一:修改Redis配置文件定位Redis配置文件:Redis配置文件通常位於/etc/redis/redis.conf。編輯配置文件:使用文本編輯器(例如vi或nano)打開配置文件:sudovi/etc/redis/redis.conf設置Lua腳本執行時間限制:在配置文件中添加或修改以下行,設置Lua腳本的最大執行時間(單位:毫秒)

使用 Redis 指令需要以下步驟:打開 Redis 客戶端。輸入指令(動詞 鍵 值)。提供所需參數(因指令而異)。按 Enter 執行指令。 Redis 返迴響應,指示操作結果(通常為 OK 或 -ERR)。

使用Redis進行鎖操作需要通過SETNX命令獲取鎖,然後使用EXPIRE命令設置過期時間。具體步驟為:(1) 使用SETNX命令嘗試設置一個鍵值對;(2) 使用EXPIRE命令為鎖設置過期時間;(3) 當不再需要鎖時,使用DEL命令刪除該鎖。

使用 Redis 命令行工具 (redis-cli) 可通過以下步驟管理和操作 Redis:連接到服務器,指定地址和端口。使用命令名稱和參數向服務器發送命令。使用 HELP 命令查看特定命令的幫助信息。使用 QUIT 命令退出命令行工具。

Redis數據過期策略有兩種:定期刪除:定期掃描刪除過期鍵,可通過 expired-time-cap-remove-count、expired-time-cap-remove-delay 參數設置。惰性刪除:僅在讀取或寫入鍵時檢查刪除過期鍵,可通過 lazyfree-lazy-eviction、lazyfree-lazy-expire、lazyfree-lazy-user-del 參數設置。
