目錄
MySQL binlog/redolog/undolog 的差別?
bin log
binlog刷盤時機
binlog日誌格式
ROW
binlog
redo log基本概念
undo log
首頁 資料庫 mysql教程 MySQL中binlog/redolog/undolog差別是什麼

MySQL中binlog/redolog/undolog差別是什麼

May 27, 2023 am 08:29 AM
mysql binlog redolog

MySQL binlog/redolog/undolog 的差別?

想跟大家聊聊InnoDB 中的鎖定機制,那麼不可避免的要牽涉到MySQL 的日誌系統,binlog、redo log、undo log 等,看到有小夥伴總結的這三個日誌還不錯,趕緊拿來和各位小夥伴分享。

日誌是mysql資料庫的重要組成部分,記錄著資料庫運作期間各種狀態資訊。 mysql日誌主要包括錯誤日誌、查詢日誌、慢查詢日誌、交易日誌、二進位日誌幾大類。

作為開發,我們重點需要關注的是二進位日誌(binlog)和交易日誌(包括redo logundo log),本文接下來會詳細介紹這三種日誌。

bin log

binlog用於記錄資料庫執行的寫入性操作(不包括查詢)信息,以二進位的形式保存在磁碟中。 binlogmysql的邏輯日誌,並且由Server層進行記錄,使用任何儲存引擎的mysql資料庫都會記錄 binlog日誌。

  • 邏輯日誌:可以理解為記錄的就是sql語句.

  • #物理日誌:mysql資料最終是保存在資料頁中的,實體日誌記錄的就是資料頁變更。

binlog是透過追加的方式進行寫入的,可以透過max_binlog_size參數設定每個binlog文件的大小,當檔案大小達到給定值之後,會產生新的檔案來保存日誌。

在實際應用中,binlog的主要使用場景有兩個,分別是主從複製和資料恢復。

  • 主從複製:在Master#端開啟binlog,然後將binlog傳送到各個Slave 端,Slave端重播binlog因此達到主從資料一致。

  • 資料恢復:透過使用mysqlbinlog工具來恢復資料。

binlog刷盤時機

對於InnoDB儲存引擎而言,只有在交易提交時才會記錄biglog ,此時記錄還在記憶體中,那麼biglog是什麼時候刷到磁碟中的呢?

mysql透過sync_binlog參數控制biglog的刷盤時機,取值範圍是0-N

  • 0:不強制要求,由系統自行判斷何時寫入磁碟;

  • 1:每次commit的時候都要將binlog寫入磁碟;

  • N:每N個事務,才會將binlog寫入磁碟。

從上面可以看出,sync_binlog最安全的是設定是1,這也是MySQL 5.7.7之後版本的預設值。但是設定一個大一些的值可以提升資料庫效能,因此實際情況下也可以將值適當調大,犧牲一定的一致性來獲得更好的效能。

binlog日誌格式

binlog日誌有三種格式,分別為STATMENTROWMIXED

MySQL 5.7.7之前,預設的格式是STATEMENTMySQL 5.7.7之後,預設值是ROW 。日誌格式透過binlog-format指定。

  • STATMENT:基於SQL 語句的複製( statement-based replication, SBR# ),每一條都會修改資料的sql語句會記錄到binlog 中 。

  • ROW:基於行的複製(row-based replication, RBR

    #ROW
  • :基於行的複製(
  • row-based replication, RBR

     ),不記錄每個sql語句的上下文訊息,僅需記錄哪一條數據被修改了。 MIXED:基於STATMENT 與 ROW 兩種模式的混合複製(mixed-based replication , MBR ),一般的複製使用STATEMENT# 模式保存 binlog ,對於 STATEMENT 模式無法複製的操作使用 

    ROW
  •  #STATEMENT
 模式無法複製的操作使用 

ROW

 模式模式保存 

binlog

redo log為什麼需要redo log

我們都知道,事務的四大特性裡面有一個是持久性,具體來說就是只要交易提交成功,那麼對資料庫做的修改就被永久保存下來了,不可能因為任何原因再回到原來的狀態。 ######那麼###mysql###是如何保證一致性的呢? ######簡單的方法是在每次提交事務時,將涉及修改的所有資料頁刷新到磁碟中。但這麼做會有嚴重的效能問題,主要體現在兩個方面:###
  • 因為Innodb是以為單位進行磁碟互動的,而一個交易很可能只修改一個資料頁裡面的幾個字節,這時候將完整的資料頁刷到磁碟的話,太浪費資源了!

  • 一個交易可能涉及修改多個資料頁,並且這些資料頁在物理上並不連續,使用隨機IO寫入效能太差!

因此mysql設計了redo log,具體來說就是只記錄交易對資料頁做了哪些修改,這樣就能完美地解決效能問題了(相對而言文件更小並且是順序IO)。

redo log基本概念

redo log包含兩個部分:一個是記憶體中的日誌緩衝(redo log buffer),另一個是磁碟上的日誌檔案(redo logfile)。

mysql每執行一條DML語句,先將記錄寫入redo log buffer,後續某個時間點再一次將多筆操作記錄寫到redo log file。這種先寫日誌,再寫磁碟的技術就是MySQL
裡常說到的WAL(Write-Ahead Logging)技術。

在電腦作業系統中,用戶空間(user space)下的緩衝區資料一般情況下是無法直接寫入磁碟的,中間必須經過作業系統核心空間(kernel space)緩衝區(OS Buffer)。

因此,redo log buffer寫入redo logfile其實是先寫入OS Buffer,然後再透過系統呼叫# fsync()將其刷到redo log file
中,流程如下:

MySQL中binlog/redolog/undolog差別是什麼

##mysql支持三種將redo log buffer寫入redo log file的時機,可以透過innodb_flush_log_at_trx_commit參數配置,各參數值意義如下:

MySQL中binlog/redolog/undolog差別是什麼

MySQL中binlog/redolog/undolog差別是什麼

redo log記錄形式

前面說過,

redo log實際上記錄資料頁的變更,而這種變更記錄是沒必要全部保存,因此redo log實作上採用了大小固定,循環寫入的方式,當寫到結尾時,會回到開頭循環寫日誌。如下圖:

MySQL中binlog/redolog/undolog差別是什麼

同時我們很容易得知, 在innodb中,既有

redo log需要刷盤,還有資料頁也需要刷盤,redo log存在的意義主要就是降低對資料頁刷盤的要求** 。

在上圖中,

write pos表示redo log目前記錄的LSN(邏輯序號)位置,check point 表示資料頁變更記錄刷盤後對應redo log所處的LSN(邏輯序號)位置。

write poscheck point之間的部分是redo log空著的部分,用來記錄新的記錄;check pointwrite pos之間是redo log待落盤的資料頁變更記錄。當write pos追上check point時,會先推check point向前移動,空出位置再記錄新的日誌。

啟動

innodb的時候,不管上次是正常關閉還是例外關閉,總是會進行復原操作。因為redo log記錄的是資料頁的物理變化,因此恢復的時候速度比邏輯日誌(如binlog)要快很多。

重啟

innodb時,首先會檢查磁碟中資料頁的LSN,如果資料頁的LSN小於日誌中的 LSN,則會從checkpoint開始恢復。

還有一種情況,在宕機前正處於

checkpoint的刷盤過程,且資料頁的刷盤進度超過了日誌頁的刷盤進度,此時會出現數據頁中記錄的LSN大於日誌中的LSN,這時超出日誌進度的部分將不會重做,因為這本身就表示已經做過的事情,無需再重做。

redo log與binlog區別

MySQL中binlog/redolog/undolog差別是什麼

binlogredo log的差異可知: binlog日誌只用於歸檔,只依賴binlog是沒有crash-safe能力的。

但只有redo log也不行,因為redo logInnoDB特有的,且日誌上的記錄落盤後會被覆寫掉。因此需要binlogredo log二者同時記錄,才能確保當資料庫發生宕機重新啟動時,資料不會遺失。

undo log

資料庫事務四大特性中有一個是原子性,具體來說就是原子性是指對資料庫的一系列操作,要麼全部成功,要麼全部失敗,不可能出現部分成功的情況。

實際上,原子性底層就是透過undo log來實現的。 undo log主要記錄了資料的邏輯變化,例如一條INSERT語句,對應一條DELETEundo log,對於每個UPDATE語句,對應一條相反的UPDATEundo log,這樣在發生錯誤時,就能回滾到交易之前的資料狀態。

同時,undo log也是MVCC(多重版本並發控制)實現的關鍵。

以上是MySQL中binlog/redolog/undolog差別是什麼的詳細內容。更多資訊請關注PHP中文網其他相關文章!

本網站聲明
本文內容由網友自願投稿,版權歸原作者所有。本站不承擔相應的法律責任。如發現涉嫌抄襲或侵權的內容,請聯絡admin@php.cn

熱AI工具

Undresser.AI Undress

Undresser.AI Undress

人工智慧驅動的應用程序,用於創建逼真的裸體照片

AI Clothes Remover

AI Clothes Remover

用於從照片中去除衣服的線上人工智慧工具。

Undress AI Tool

Undress AI Tool

免費脫衣圖片

Clothoff.io

Clothoff.io

AI脫衣器

AI Hentai Generator

AI Hentai Generator

免費產生 AI 無盡。

熱門文章

R.E.P.O.能量晶體解釋及其做什麼(黃色晶體)
2 週前 By 尊渡假赌尊渡假赌尊渡假赌
倉庫:如何復興隊友
4 週前 By 尊渡假赌尊渡假赌尊渡假赌
Hello Kitty Island冒險:如何獲得巨型種子
3 週前 By 尊渡假赌尊渡假赌尊渡假赌

熱工具

記事本++7.3.1

記事本++7.3.1

好用且免費的程式碼編輯器

SublimeText3漢化版

SublimeText3漢化版

中文版,非常好用

禪工作室 13.0.1

禪工作室 13.0.1

強大的PHP整合開發環境

Dreamweaver CS6

Dreamweaver CS6

視覺化網頁開發工具

SublimeText3 Mac版

SublimeText3 Mac版

神級程式碼編輯軟體(SublimeText3)

PHP 的大數據結構處理技巧 PHP 的大數據結構處理技巧 May 08, 2024 am 10:24 AM

PHP 的大數據結構處理技巧

如何優化 PHP 中的 MySQL 查詢效能? 如何優化 PHP 中的 MySQL 查詢效能? Jun 03, 2024 pm 08:11 PM

如何優化 PHP 中的 MySQL 查詢效能?

如何在 PHP 中使用 MySQL 備份和還原? 如何在 PHP 中使用 MySQL 備份和還原? Jun 03, 2024 pm 12:19 PM

如何在 PHP 中使用 MySQL 備份和還原?

如何使用 PHP 插入資料到 MySQL 表? 如何使用 PHP 插入資料到 MySQL 表? Jun 02, 2024 pm 02:26 PM

如何使用 PHP 插入資料到 MySQL 表?

如何修復 MySQL 8.4 上的 mysql_native_password 未載入錯誤 如何修復 MySQL 8.4 上的 mysql_native_password 未載入錯誤 Dec 09, 2024 am 11:42 AM

如何修復 MySQL 8.4 上的 mysql_native_password 未載入錯誤

如何在 PHP 中使用 MySQL 預存程序? 如何在 PHP 中使用 MySQL 預存程序? Jun 02, 2024 pm 02:13 PM

如何在 PHP 中使用 MySQL 預存程序?

如何使用 PHP 建立 MySQL 表? 如何使用 PHP 建立 MySQL 表? Jun 04, 2024 pm 01:57 PM

如何使用 PHP 建立 MySQL 表?

oracle資料庫和mysql的區別 oracle資料庫和mysql的區別 May 10, 2024 am 01:54 AM

oracle資料庫和mysql的區別

See all articles