目錄
MySQL binlog/redolog/undolog 的差別?
bin log
binlog刷盤時機
binlog日誌格式
ROW
binlog
redo log基本概念
undo log
首頁 資料庫 mysql教程 MySQL中binlog/redolog/undolog差別是什麼

MySQL中binlog/redolog/undolog差別是什麼

May 27, 2023 am 08:29 AM
mysql binlog redolog

MySQL binlog/redolog/undolog 的差別?

想跟大家聊聊InnoDB 中的鎖定機制,那麼不可避免的要牽涉到MySQL 的日誌系統,binlog、redo log、undo log 等,看到有小夥伴總結的這三個日誌還不錯,趕緊拿來和各位小夥伴分享。

日誌是mysql資料庫的重要組成部分,記錄著資料庫運作期間各種狀態資訊。 mysql日誌主要包括錯誤日誌、查詢日誌、慢查詢日誌、交易日誌、二進位日誌幾大類。

作為開發,我們重點需要關注的是二進位日誌(binlog)和交易日誌(包括redo logundo log),本文接下來會詳細介紹這三種日誌。

bin log

binlog用於記錄資料庫執行的寫入性操作(不包括查詢)信息,以二進位的形式保存在磁碟中。 binlogmysql的邏輯日誌,並且由Server層進行記錄,使用任何儲存引擎的mysql資料庫都會記錄 binlog日誌。

  • 邏輯日誌:可以理解為記錄的就是sql語句.

  • #物理日誌:mysql資料最終是保存在資料頁中的,實體日誌記錄的就是資料頁變更。

binlog是透過追加的方式進行寫入的,可以透過max_binlog_size參數設定每個binlog文件的大小,當檔案大小達到給定值之後,會產生新的檔案來保存日誌。

在實際應用中,binlog的主要使用場景有兩個,分別是主從複製和資料恢復。

  • 主從複製:在Master#端開啟binlog,然後將binlog傳送到各個Slave 端,Slave端重播binlog因此達到主從資料一致。

  • 資料恢復:透過使用mysqlbinlog工具來恢復資料。

binlog刷盤時機

對於InnoDB儲存引擎而言,只有在交易提交時才會記錄biglog ,此時記錄還在記憶體中,那麼biglog是什麼時候刷到磁碟中的呢?

mysql透過sync_binlog參數控制biglog的刷盤時機,取值範圍是0-N

  • 0:不強制要求,由系統自行判斷何時寫入磁碟;

  • 1:每次commit的時候都要將binlog寫入磁碟;

  • N:每N個事務,才會將binlog寫入磁碟。

從上面可以看出,sync_binlog最安全的是設定是1,這也是MySQL 5.7.7之後版本的預設值。但是設定一個大一些的值可以提升資料庫效能,因此實際情況下也可以將值適當調大,犧牲一定的一致性來獲得更好的效能。

binlog日誌格式

binlog日誌有三種格式,分別為STATMENTROWMIXED

MySQL 5.7.7之前,預設的格式是STATEMENTMySQL 5.7.7之後,預設值是ROW 。日誌格式透過binlog-format指定。

  • STATMENT:基於SQL 語句的複製( statement-based replication, SBR# ),每一條都會修改資料的sql語句會記錄到binlog 中 。

  • ROW:基於行的複製(row-based replication, RBR

    #ROW
  • :基於行的複製(
  • row-based replication, RBR

     ),不記錄每個sql語句的上下文訊息,僅需記錄哪一條數據被修改了。 MIXED:基於STATMENT 與 ROW 兩種模式的混合複製(mixed-based replication , MBR ),一般的複製使用STATEMENT# 模式保存 binlog ,對於 STATEMENT 模式無法複製的操作使用 

    ROW
  •  #STATEMENT
 模式無法複製的操作使用 

ROW

 模式模式保存 

binlog

redo log為什麼需要redo log

我們都知道,事務的四大特性裡面有一個是持久性,具體來說就是只要交易提交成功,那麼對資料庫做的修改就被永久保存下來了,不可能因為任何原因再回到原來的狀態。 ######那麼###mysql###是如何保證一致性的呢? ######簡單的方法是在每次提交事務時,將涉及修改的所有資料頁刷新到磁碟中。但這麼做會有嚴重的效能問題,主要體現在兩個方面:###
  • 因為Innodb是以為單位進行磁碟互動的,而一個交易很可能只修改一個資料頁裡面的幾個字節,這時候將完整的資料頁刷到磁碟的話,太浪費資源了!

  • 一個交易可能涉及修改多個資料頁,並且這些資料頁在物理上並不連續,使用隨機IO寫入效能太差!

因此mysql設計了redo log,具體來說就是只記錄交易對資料頁做了哪些修改,這樣就能完美地解決效能問題了(相對而言文件更小並且是順序IO)。

redo log基本概念

redo log包含兩個部分:一個是記憶體中的日誌緩衝(redo log buffer),另一個是磁碟上的日誌檔案(redo logfile)。

mysql每執行一條DML語句,先將記錄寫入redo log buffer,後續某個時間點再一次將多筆操作記錄寫到redo log file。這種先寫日誌,再寫磁碟的技術就是MySQL
裡常說到的WAL(Write-Ahead Logging)技術。

在電腦作業系統中,用戶空間(user space)下的緩衝區資料一般情況下是無法直接寫入磁碟的,中間必須經過作業系統核心空間(kernel space)緩衝區(OS Buffer)。

因此,redo log buffer寫入redo logfile其實是先寫入OS Buffer,然後再透過系統呼叫# fsync()將其刷到redo log file
中,流程如下:

MySQL中binlog/redolog/undolog差別是什麼

##mysql支持三種將redo log buffer寫入redo log file的時機,可以透過innodb_flush_log_at_trx_commit參數配置,各參數值意義如下:

MySQL中binlog/redolog/undolog差別是什麼

MySQL中binlog/redolog/undolog差別是什麼

redo log記錄形式

前面說過,

redo log實際上記錄資料頁的變更,而這種變更記錄是沒必要全部保存,因此redo log實作上採用了大小固定,循環寫入的方式,當寫到結尾時,會回到開頭循環寫日誌。如下圖:

MySQL中binlog/redolog/undolog差別是什麼

同時我們很容易得知, 在innodb中,既有

redo log需要刷盤,還有資料頁也需要刷盤,redo log存在的意義主要就是降低對資料頁刷盤的要求** 。

在上圖中,

write pos表示redo log目前記錄的LSN(邏輯序號)位置,check point 表示資料頁變更記錄刷盤後對應redo log所處的LSN(邏輯序號)位置。

write poscheck point之間的部分是redo log空著的部分,用來記錄新的記錄;check pointwrite pos之間是redo log待落盤的資料頁變更記錄。當write pos追上check point時,會先推check point向前移動,空出位置再記錄新的日誌。

啟動

innodb的時候,不管上次是正常關閉還是例外關閉,總是會進行復原操作。因為redo log記錄的是資料頁的物理變化,因此恢復的時候速度比邏輯日誌(如binlog)要快很多。

重啟

innodb時,首先會檢查磁碟中資料頁的LSN,如果資料頁的LSN小於日誌中的 LSN,則會從checkpoint開始恢復。

還有一種情況,在宕機前正處於

checkpoint的刷盤過程,且資料頁的刷盤進度超過了日誌頁的刷盤進度,此時會出現數據頁中記錄的LSN大於日誌中的LSN,這時超出日誌進度的部分將不會重做,因為這本身就表示已經做過的事情,無需再重做。

redo log與binlog區別

MySQL中binlog/redolog/undolog差別是什麼

binlogredo log的差異可知: binlog日誌只用於歸檔,只依賴binlog是沒有crash-safe能力的。

但只有redo log也不行,因為redo logInnoDB特有的,且日誌上的記錄落盤後會被覆寫掉。因此需要binlogredo log二者同時記錄,才能確保當資料庫發生宕機重新啟動時,資料不會遺失。

undo log

資料庫事務四大特性中有一個是原子性,具體來說就是原子性是指對資料庫的一系列操作,要麼全部成功,要麼全部失敗,不可能出現部分成功的情況。

實際上,原子性底層就是透過undo log來實現的。 undo log主要記錄了資料的邏輯變化,例如一條INSERT語句,對應一條DELETEundo log,對於每個UPDATE語句,對應一條相反的UPDATEundo log,這樣在發生錯誤時,就能回滾到交易之前的資料狀態。

同時,undo log也是MVCC(多重版本並發控制)實現的關鍵。

以上是MySQL中binlog/redolog/undolog差別是什麼的詳細內容。更多資訊請關注PHP中文網其他相關文章!

本網站聲明
本文內容由網友自願投稿,版權歸原作者所有。本站不承擔相應的法律責任。如發現涉嫌抄襲或侵權的內容,請聯絡admin@php.cn

熱AI工具

Undresser.AI Undress

Undresser.AI Undress

人工智慧驅動的應用程序,用於創建逼真的裸體照片

AI Clothes Remover

AI Clothes Remover

用於從照片中去除衣服的線上人工智慧工具。

Undress AI Tool

Undress AI Tool

免費脫衣圖片

Clothoff.io

Clothoff.io

AI脫衣器

AI Hentai Generator

AI Hentai Generator

免費產生 AI 無盡。

熱門文章

R.E.P.O.能量晶體解釋及其做什麼(黃色晶體)
1 個月前 By 尊渡假赌尊渡假赌尊渡假赌
R.E.P.O.最佳圖形設置
1 個月前 By 尊渡假赌尊渡假赌尊渡假赌
R.E.P.O.如果您聽不到任何人,如何修復音頻
1 個月前 By 尊渡假赌尊渡假赌尊渡假赌
R.E.P.O.聊天命令以及如何使用它們
1 個月前 By 尊渡假赌尊渡假赌尊渡假赌

熱工具

記事本++7.3.1

記事本++7.3.1

好用且免費的程式碼編輯器

SublimeText3漢化版

SublimeText3漢化版

中文版,非常好用

禪工作室 13.0.1

禪工作室 13.0.1

強大的PHP整合開發環境

Dreamweaver CS6

Dreamweaver CS6

視覺化網頁開發工具

SublimeText3 Mac版

SublimeText3 Mac版

神級程式碼編輯軟體(SublimeText3)

mysql:簡單的概念,用於輕鬆學習 mysql:簡單的概念,用於輕鬆學習 Apr 10, 2025 am 09:29 AM

MySQL是一個開源的關係型數據庫管理系統。 1)創建數據庫和表:使用CREATEDATABASE和CREATETABLE命令。 2)基本操作:INSERT、UPDATE、DELETE和SELECT。 3)高級操作:JOIN、子查詢和事務處理。 4)調試技巧:檢查語法、數據類型和權限。 5)優化建議:使用索引、避免SELECT*和使用事務。

phpmyadmin怎麼打開 phpmyadmin怎麼打開 Apr 10, 2025 pm 10:51 PM

可以通過以下步驟打開 phpMyAdmin:1. 登錄網站控制面板;2. 找到並點擊 phpMyAdmin 圖標;3. 輸入 MySQL 憑據;4. 點擊 "登錄"。

navicat premium怎麼創建 navicat premium怎麼創建 Apr 09, 2025 am 07:09 AM

使用 Navicat Premium 創建數據庫:連接到數據庫服務器並輸入連接參數。右鍵單擊服務器並選擇“創建數據庫”。輸入新數據庫的名稱和指定字符集和排序規則。連接到新數據庫並在“對象瀏覽器”中創建表。右鍵單擊表並選擇“插入數據”來插入數據。

MySQL:世界上最受歡迎的數據庫的簡介 MySQL:世界上最受歡迎的數據庫的簡介 Apr 12, 2025 am 12:18 AM

MySQL是一種開源的關係型數據庫管理系統,主要用於快速、可靠地存儲和檢索數據。其工作原理包括客戶端請求、查詢解析、執行查詢和返回結果。使用示例包括創建表、插入和查詢數據,以及高級功能如JOIN操作。常見錯誤涉及SQL語法、數據類型和權限問題,優化建議包括使用索引、優化查詢和分錶分區。

為什麼要使用mysql?利益和優勢 為什麼要使用mysql?利益和優勢 Apr 12, 2025 am 12:17 AM

選擇MySQL的原因是其性能、可靠性、易用性和社區支持。 1.MySQL提供高效的數據存儲和檢索功能,支持多種數據類型和高級查詢操作。 2.採用客戶端-服務器架構和多種存儲引擎,支持事務和查詢優化。 3.易於使用,支持多種操作系統和編程語言。 4.擁有強大的社區支持,提供豐富的資源和解決方案。

navicat怎麼新建連接mysql navicat怎麼新建連接mysql Apr 09, 2025 am 07:21 AM

可在 Navicat 中通過以下步驟新建 MySQL 連接:打開應用程序並選擇“新建連接”(Ctrl N)。選擇“MySQL”作為連接類型。輸入主機名/IP 地址、端口、用戶名和密碼。 (可選)配置高級選項。保存連接並輸入連接名稱。

redis怎麼使用單線程 redis怎麼使用單線程 Apr 10, 2025 pm 07:12 PM

Redis 使用單線程架構,以提供高性能、簡單性和一致性。它利用 I/O 多路復用、事件循環、非阻塞 I/O 和共享內存來提高並發性,但同時存在並發性受限、單點故障和不適合寫密集型工作負載的局限性。

MySQL和SQL:開發人員的基本技能 MySQL和SQL:開發人員的基本技能 Apr 10, 2025 am 09:30 AM

MySQL和SQL是開發者必備技能。 1.MySQL是開源的關係型數據庫管理系統,SQL是用於管理和操作數據庫的標準語言。 2.MySQL通過高效的數據存儲和檢索功能支持多種存儲引擎,SQL通過簡單語句完成複雜數據操作。 3.使用示例包括基本查詢和高級查詢,如按條件過濾和排序。 4.常見錯誤包括語法錯誤和性能問題,可通過檢查SQL語句和使用EXPLAIN命令優化。 5.性能優化技巧包括使用索引、避免全表掃描、優化JOIN操作和提升代碼可讀性。

See all articles