目錄
一、序言
二、不同的聲音
1、操作的先後順序
2、處理快取的態度
三、執行緒並發分析
查詢資料
1、非並發環境
2、並發環境
更新資料
依賴環境
四、先資料庫後快取
資料一致性
1、問題描述
解決方式
特殊情況
首頁 Java java教程 Java並發程式設計的資料庫與快取資料一致性方案是什麼?

Java並發程式設計的資料庫與快取資料一致性方案是什麼?

Apr 24, 2023 am 08:28 AM
java 資料庫

一、序言

在分散式並發系統中,資料庫與快取資料一致性是一項富有挑戰性的技術困難。假設有完善的工業級分散式事務解決方案,那麼資料庫與快取資料一致性便迎刃而解,實際上,目前分散式交易尚未成熟。

二、不同的聲音

在資料庫與快取資料一致解決方式中,有各種聲音。

  • 先操作資料庫後快取還是先快取後資料庫

  • #快取是更新還是刪除

1、操作的先後順序

在並發系統中,資料庫與快取雙寫場景下,為了追求更大的並發量,操作資料庫與快取顯而易見不會同步進行。前者操作成功後者以非同步的方式進行。

關係型資料庫作為成熟的工業級資料儲存方案,有完善的事務處理機制,資料一旦落盤,不考慮硬體故障,可以負責任的說資料不會遺失。

所謂緩存,無非是儲存在記憶體中的數據,服務一旦重啟,快取資料全部遺失。既然稱之為緩存,那麼時刻做好了快取資料遺失的準備。儘管Redis有持久化機制,是否能確保百分之百持久化? Redis將資料非同步持久化到磁碟有不可,快取是緩存,資料庫是資料庫,兩個不同的東西。把緩存當資料庫使用是一件極度危險的事。

從資料安全的角度來講,先操作資料庫,然後以非同步的方式操作緩存,回應使用者請求。

2、處理快取的態度

快取是更新還是刪除,對應懶漢式和飽漢式,從處理執行緒安全實踐來講,刪除快取操作相對難度較低。如果在刪除快取的前提下滿足了查詢效能,那麼優先選擇刪除快取。

更新快取儘管能夠提高查詢效率,然後帶來的線程並發髒資料處理起來較麻煩,序言引入MQ等其它訊息中間件,因此非必要不推薦。

三、執行緒並發分析

理解執行緒並發所帶來問題的關鍵是先理解系統中斷,作業系統在任務調度時,中斷隨時都在發生,這是執行緒資料不一致產生的根源。以4和8線程CPU為例,同一時刻最多處理8個線程,然而操作系統管理的線程遠遠超過8個,因此線程們以一種看似並行的方式進行。

查詢資料

1、非並發環境

在非並發環境中,使用以下方式查詢資料並無不妥:先查詢緩存,如果快取資料不存在,查詢資料庫,更新緩存,返回結果。

public BuOrder getOrder(Long orderId) {
    String key = ORDER_KEY_PREFIX + orderId;
    BuOrder buOrder = RedisUtils.getObject(key, BuOrder.class);
    if (buOrder != null) {
        return buOrder;
    }
    BuOrder order = getById(orderId);
    RedisUtils.setObject(key, order, 5, TimeUnit.MINUTES);
    return order;
}
登入後複製

如果在高並發環境中有一個嚴重缺陷:當快取失效時,大量查詢請求湧入,瞬間全部打到DB上,輕則資料庫連線資源耗盡,用戶端回應500錯誤,重則資料庫壓力過大服務宕機。

2、並發環境

因此在並發環境中,需要對上述程式碼進行修改,使用分散式鎖定。當大量請求湧入時,獲得鎖的線程有機會存取資料庫查詢數據,其餘線程阻塞。當查詢完資料並更新緩存,然後釋放鎖定。等待的線程重新檢查緩存,發現能夠獲取到數據,直接將緩存數據響應。

這裡提到分散式鎖定,那麼使用表鎖還是行鎖呢?使用分散式行鎖提高並發量;使用二次檢查機制,確保等待取得鎖定的執行緒能夠快速返回結果

@Override
public BuOrder getOrder(Long orderId) {
    /* 如果缓存不存在,则添加分布式锁更新缓存 */
    String key = ORDER_KEY_PREFIX + orderId;
    BuOrder order = RedisUtils.getObject(key, BuOrder.class);
    if (order != null) {
        return order;
    }
    String orderLock = ORDER_LOCK + orderId;
    RLock lock = redissonClient.getLock(orderLock);
    if (lock.tryLock()) {
        order = RedisUtils.getObject(key, BuOrder.class);
        if (order != null) {
            LockOptional.ofNullable(lock).ifLocked(RLock::unlock);
            return order;
        }
        BuOrder buOrder = getById(orderId);
        RedisUtils.setObject(key, buOrder, 5, TimeUnit.MINUTES);
        LockOptional.ofNullable(lock).ifLocked(RLock::unlock);
    }
    return RedisUtils.getObject(key, BuOrder.class);
}
登入後複製

更新資料

1、非並發環境

非並發環境中,如下程式碼儘管可能會產生資料不一致問題(資料被覆蓋)。儘管使用資料庫層面樂觀鎖能夠解決資料被覆蓋問題,然而無效更新流量依舊會流向資料庫。

public Boolean editOrder(BuOrder order) {
    /* 更新数据库 */
    updateById(order);
    /* 删除缓存 */
    RedisUtils.deleteObject(OrderServiceImpl.ORDER_KEY_PREFIX + order.getOrderId());
    return true;
}
登入後複製
2、並發環境

上面分析中使用資料庫樂觀鎖定能夠解決並發更新中資料被覆蓋的問題,然而當同一行記錄被修改後,版本號發生改變,後續並發流向資料庫的請求為無效流量。減小資料庫壓力的首要策略是將無效流量攔截在資料庫之前。

使用分散式鎖能夠保證並發流量有序存取資料庫,考慮到資料庫層級已經使用了樂觀鎖,第二個及以後獲得鎖的執行緒操作資料庫為無效流量。

執行緒在取得鎖定時採用逾時退出的策略,等待取得鎖定的執行緒逾時快速退出,快速回應使用者請求,重試更新資料操作。

public Boolean editOrder(BuOrder order) {
    String orderLock = ORDER_LOCK + order.getOrderId();
    RLock lock = redissonClient.getLock(orderLock);
    try {
        /* 超时未获取到锁,快速失败,用户端重试 */
        if (lock.tryLock(1, TimeUnit.SECONDS)) {
            /* 更新数据库 */
            updateById(order);
            /* 删除缓存 */
            RedisUtils.deleteObject(OrderServiceImpl.ORDER_KEY_PREFIX + order.getOrderId());
            /* 释放锁 */
            LockOptional.ofNullable(lock).ifLocked(RLock::unlock);
            return true;
        }
    } catch (InterruptedException e) {
        e.printStackTrace();
    }
    return false;
}
登入後複製

依賴環境

上述程式碼使用了封裝鎖定的工具類別。

<dependency>
  <groupId>xin.altitude.cms</groupId>
  <artifactId>ucode-cms-common</artifactId>
  <version>1.4.3.2</version>
</dependency>
登入後複製

LockOptional根據鎖定的狀態執行後續操作。

四、先資料庫後快取

資料一致性

1、問題描述

接下來討論先更新資料庫,然後刪除快取是否存在並發問題。

(1)快取剛好失效
(2)請求A查詢資料庫,得一個舊值
(3)請求B將新值寫入資料庫
(4)請求B刪除快取
(5)請求A將查到的舊值寫入快取

上述並發問題出現的關鍵是第5步比第3、4步後發生,由作業系統中斷不確定因素可知,此種情況卻有發生的可能。

2、解決方式

從實際情況來看,將資料寫入Redis遠比將資料寫入資料庫耗時短,儘管發生的機率較低,但仍會發生。

  • (1)增加快取過期時間

#增加快取過期時間允許一定時間範圍內臟資料存在,直到下次並發更新出現,可能會出現髒數據。髒數據會週期性存在。

  • (2)更新與查詢共用一把行鎖

#更新與查詢共用一把行分散式鎖,上述問題不復存在。當讀取請求取得到鎖定時,寫入請求處於阻塞狀態(逾時會快速失敗返回),能夠保證步驟5在步驟3之前進行。

  • (3)延遲刪除緩存

使用RabbitMQ延遲刪除緩存,並移除步驟5的影響。使用非同步的方式進行,幾乎不影響效能。

特殊情況

資料庫有事務機制保證操作成功與否;Redis單一指令具有原子性,然後組合起來卻不具備原子特徵,具體來說是資料庫操作成功,然後應用異常掛掉,導致Redis快取未刪除。 Redis服務網路連線逾時出現此問題。

如果設定有快取過期時間,那麼在快取尚未過期前,髒資料一直存在。如果未設定過期時間,那麼直到下一次修改資料前,髒資料一直存在。 (資料庫資料已改變,快取尚未更新)

解決方式

在操作資料庫前,向RabbitMQ寫入延遲刪除快取的訊息,然後執行資料庫操作,執行快取刪除操作。不管程式碼層面快取是否刪除成功,MQ刪除快取作為保底操作。

以上是Java並發程式設計的資料庫與快取資料一致性方案是什麼?的詳細內容。更多資訊請關注PHP中文網其他相關文章!

本網站聲明
本文內容由網友自願投稿,版權歸原作者所有。本站不承擔相應的法律責任。如發現涉嫌抄襲或侵權的內容,請聯絡admin@php.cn

熱AI工具

Undresser.AI Undress

Undresser.AI Undress

人工智慧驅動的應用程序,用於創建逼真的裸體照片

AI Clothes Remover

AI Clothes Remover

用於從照片中去除衣服的線上人工智慧工具。

Undress AI Tool

Undress AI Tool

免費脫衣圖片

Clothoff.io

Clothoff.io

AI脫衣器

AI Hentai Generator

AI Hentai Generator

免費產生 AI 無盡。

熱門文章

R.E.P.O.能量晶體解釋及其做什麼(黃色晶體)
1 個月前 By 尊渡假赌尊渡假赌尊渡假赌
R.E.P.O.最佳圖形設置
1 個月前 By 尊渡假赌尊渡假赌尊渡假赌
R.E.P.O.如果您聽不到任何人,如何修復音頻
1 個月前 By 尊渡假赌尊渡假赌尊渡假赌
R.E.P.O.聊天命令以及如何使用它們
1 個月前 By 尊渡假赌尊渡假赌尊渡假赌

熱工具

記事本++7.3.1

記事本++7.3.1

好用且免費的程式碼編輯器

SublimeText3漢化版

SublimeText3漢化版

中文版,非常好用

禪工作室 13.0.1

禪工作室 13.0.1

強大的PHP整合開發環境

Dreamweaver CS6

Dreamweaver CS6

視覺化網頁開發工具

SublimeText3 Mac版

SublimeText3 Mac版

神級程式碼編輯軟體(SublimeText3)

Java Spring 面試題 Java Spring 面試題 Aug 30, 2024 pm 04:29 PM

在本文中,我們保留了最常被問到的 Java Spring 面試問題及其詳細答案。這樣你就可以順利通過面試。

突破或從Java 8流返回? 突破或從Java 8流返回? Feb 07, 2025 pm 12:09 PM

Java 8引入了Stream API,提供了一種強大且表達力豐富的處理數據集合的方式。然而,使用Stream時,一個常見問題是:如何從forEach操作中中斷或返回? 傳統循環允許提前中斷或返回,但Stream的forEach方法並不直接支持這種方式。本文將解釋原因,並探討在Stream處理系統中實現提前終止的替代方法。 延伸閱讀: Java Stream API改進 理解Stream forEach forEach方法是一個終端操作,它對Stream中的每個元素執行一個操作。它的設計意圖是處

Java程序查找膠囊的體積 Java程序查找膠囊的體積 Feb 07, 2025 am 11:37 AM

膠囊是一種三維幾何圖形,由一個圓柱體和兩端各一個半球體組成。膠囊的體積可以通過將圓柱體的體積和兩端半球體的體積相加來計算。本教程將討論如何使用不同的方法在Java中計算給定膠囊的體積。 膠囊體積公式 膠囊體積的公式如下: 膠囊體積 = 圓柱體體積 兩個半球體體積 其中, r: 半球體的半徑。 h: 圓柱體的高度(不包括半球體)。 例子 1 輸入 半徑 = 5 單位 高度 = 10 單位 輸出 體積 = 1570.8 立方單位 解釋 使用公式計算體積: 體積 = π × r2 × h (4

如何在Spring Tool Suite中運行第一個春季啟動應用程序? 如何在Spring Tool Suite中運行第一個春季啟動應用程序? Feb 07, 2025 pm 12:11 PM

Spring Boot簡化了可靠,可擴展和生產就緒的Java應用的創建,從而徹底改變了Java開發。 它的“慣例慣例”方法(春季生態系統固有的慣例),最小化手動設置

創造未來:零基礎的 Java 編程 創造未來:零基礎的 Java 編程 Oct 13, 2024 pm 01:32 PM

Java是熱門程式語言,適合初學者和經驗豐富的開發者學習。本教學從基礎概念出發,逐步深入解說進階主題。安裝Java開發工具包後,可透過建立簡單的「Hello,World!」程式來實踐程式設計。理解程式碼後,使用命令提示字元編譯並執行程序,控制台上將輸出「Hello,World!」。學習Java開啟了程式設計之旅,隨著掌握程度加深,可創建更複雜的應用程式。

Java 變得簡單:程式設計能力的初學者指南 Java 變得簡單:程式設計能力的初學者指南 Oct 11, 2024 pm 06:30 PM

JavaMadeSimple:ABeginner'sGuidetoProgrammingPower簡介Java是一種強大的程式語言,廣泛應用於從行動應用程式到企業級系統的各種領域。對於初學者來說,Java的文法簡潔易懂,是學習程式設計的理想選擇。基本語法Java使用基於類別的物件導向程式設計範式。類別是將相關資料和行為組織在一起的範本。以下是一個簡單的Java類別範例:publicclassPerson{privateStringname;privateintage;

mysql:簡單的概念,用於輕鬆學習 mysql:簡單的概念,用於輕鬆學習 Apr 10, 2025 am 09:29 AM

MySQL是一個開源的關係型數據庫管理系統。 1)創建數據庫和表:使用CREATEDATABASE和CREATETABLE命令。 2)基本操作:INSERT、UPDATE、DELETE和SELECT。 3)高級操作:JOIN、子查詢和事務處理。 4)調試技巧:檢查語法、數據類型和權限。 5)優化建議:使用索引、避免SELECT*和使用事務。

Java程序將元素插入堆棧的底部 Java程序將元素插入堆棧的底部 Feb 07, 2025 am 11:59 AM

堆棧是遵循LIFO(最後,首先)原理的數據結構。換句話說,我們添加到堆棧中的最後一個元素是第一個要刪除的元素。當我們將(或推)元素添加到堆棧中時,它們就會放在頂部;即最重要的

See all articles