目錄
一、支援的儲存引擎
二、InnoDB引擎
1.Buffer Pool
2.Log Buffer
3.Adaptive Hash Index
4.Change Buffer
首頁 資料庫 mysql教程 MySQL儲存引擎詳解之InnoDB架構

MySQL儲存引擎詳解之InnoDB架構

Oct 10, 2022 pm 04:56 PM
mysql

這篇文章為大家帶來了關於mysql的相關知識,其中主要介紹了關於儲存引擎InnoDB架構的相關內容,InnoDB是MySQL的預設引擎,一個支援事務安全的儲存引擎,下面一起來看一下,希望對大家有幫助。

MySQL儲存引擎詳解之InnoDB架構

推薦學習:mysql影片教學

#目前MySQL8.x版本資料庫已經支援了很多儲存引擎了,但一般我們常用的就幾種,容易形成思維固化不會輕易採取其他儲存引擎,從而錯失很多優化儲存的功能。因此對現支援的九種資料庫儲存引擎的功能有個清楚的理解是值得學習的事情。本篇文章將這八種資料庫儲存引擎的功能和功能以及使用場景都講清楚。

這篇系列文章將被納入我的專欄一文速學SQL各類資料庫操作,基本上涵蓋到使用SQL處理日常業務以及常規的查詢建立庫分析以及複雜操作方方面面的問題。從基礎的建庫建表逐步入門到處理各類資料庫複雜操作,以及專業的SQL常用函數講解都花費了大量時間和心思創作,如果大家有需要從事數據分析或者數據開發的朋友推薦訂閱專欄,將在第一時間學習到最實用常用的知識。此篇部落格篇幅較長,值得細讀實作一番,我會將精華部分挑出細講實作。部落客會長期維護博文,有錯誤或懷疑可以在留言區指出,感謝大家的支持。

一、支援的儲存引擎

進入MySQL的資料庫檢視儲存引擎就可以看到MySQL資料庫所有支援的儲存引擎:

SHOW ENGINES
登入後複製

MySQL儲存引擎詳解之InnoDB架構

目前有一個引擎Federated不支持,我們只需要清楚其他八種資料庫儲存就好。

MySQL中常見的資料庫引擎有MyISAM、InnoDB、Memory。那我們就先清楚這三種引擎。

二、InnoDB引擎

InnoDB是MySQL的預設引擎,一個支援交易安全性的儲存引擎。 mysql中資料是儲存在實體磁碟上的,而真正的資料處理又是在記憶體中執行的。由於磁碟的讀寫速度非常慢,如果每次操作都對磁碟進行頻繁讀寫的話,那麼效能就會非常差。

為了上述問題,InnoDB將資料分割為若干頁,以頁作為磁碟與記憶體互動的基本單位,一般頁的大小為16KB。這樣的話,一次至少讀取1頁資料到記憶體中或將1頁資料寫入磁碟。透過減少記憶體與磁碟的互動次數,從而提升效能。

這本質上就是一種典型的快取設計思想,一般快取的設計基本上都是從時間維度或空間維度來考慮的:

  • 時間維度:如果一條資料正在使用,那麼在接下來一段時間內大機率還會再被使用。可以認為熱點資料快取都屬於這種思路的實作。

  • 空間維度:如果一條資料正在使用,那麼儲存在它附近的資料大機率也會很快被使用。 InnoDB的資料頁和作業系統的頁快取則是這種思路的體現。

以下是官方的InnoDB引擎結構圖,主要分為記憶體結構和磁碟結構兩大部分。

MySQL儲存引擎詳解之InnoDB架構

記憶體結構主要包括Buffer Pool、Change Buffer、Adaptive Hash Index和Log Buffer四大元件。

1.Buffer Pool

Buffer Pool由包含資料、索引、insert buffer ,adaptive hash index,lock 資訊及資料字典。緩衝池,簡稱BP。 BP以Page頁為單位,預設大小為16K,BP的底層採用鍊錶資料結構管理Page。在InnoDB存取表記錄和索引時會在Page頁中緩存,以後使用可以減少磁碟IO操作,提升效率。

緩衝池簡單來說就是一塊記憶體區域,透過記憶體的速度來彌補磁碟速度較慢對資料庫效能的影響。在資料庫中進行讀取頁的操作,首先將從磁碟所讀到的頁存放在緩衝池中,這個過程稱為將頁"FIX"在緩衝池中。下次再讀取相同的頁時,先判斷該頁是否在緩衝池中。若在緩衝池中,稱該頁在緩衝池中被命中。直接讀取該頁。否則讀取磁碟上的頁。對於資料庫中頁的修改操作,則先修改在緩衝池中的頁,然後再以一定的頻率刷新到磁碟上。這裡要注意的是,頁從緩衝池刷新回磁碟的操作並不是每次頁發生更新時觸發,而是透過稱為Checkpoint的機制刷新回磁碟。同樣這也是為了提高資料庫的整體效能。

傳統LUR演算法

緩衝池是透過LRU(Latest Recent Used,最近最少使用)演算法來進行管理的,即最頻繁使用的頁在LRU列表的最前段,而最少使用的頁在LRU列表的尾端,當緩衝池無法存放新讀取到的頁時,首先釋放LRU列表尾端的頁:

(1)頁已經在緩衝池裡,那就只做「移至」LRU頭部的動作,而沒有頁被淘汰;

(2)頁不在緩衝池裡,除了做「放入」LRU頭部的動作,還要做「淘汰」LRU尾部頁的動作;

但是InnoDB的LUR演算法並不是傳統的LUR演算法。

這裡有兩個問題:

(1)預讀失效;

(2)緩衝池污染;

我們先了解什麼是預讀;

預讀

磁碟讀寫,並不是按需讀取,而是按頁讀取,一次至少讀一頁資料(一般是4K),如果未來要讀取的資料就在頁中,就能夠省去後續的磁碟IO,提高效率。數據訪問,通常都遵循“集中讀寫”的原則,使用一些數據,大概率會使用附近的數據,這就是所謂的“局部性原理”,它表明提前加載是有效的,確實能夠減少磁碟IO。

預讀失效

由於預讀(Read-Ahead),提前把頁放入了緩衝池,但最終MySQL並沒有從頁中讀取數據,稱為預讀失效。

要最佳化預讀失效,想法是:

(1)讓預讀失敗的頁,停留在緩衝池LRU裡的時間盡可能短;

( 2)讓真正被讀取的頁,才挪到緩衝池LRU的頭部;

以保證,真正被讀取的熱數據留在緩衝池裡的時間盡可能長。

具體方法是:

(1)將LRU分成兩個部分:

    新生代(new sublist)

    老生代(old sublist )

(2)新老生代收尾相連,即:新生代的尾(tail)連接著老生代的頭(head);

(3)新頁(例如被預讀的頁面)加入緩衝池時,只加入老生代頭部:

    如果資料真正被讀取(預讀成功),才會加入到新生代的頭部

    如果資料沒有被讀取,則會比新生代裡的「熱資料頁」更早被淘汰出緩衝池

新老生代改良版LRU仍然解決不了緩衝池污染的問題。

2.Log Buffer

Log Buffer用來快取重做日誌。

InnoDB有兩個非常重要的日誌:undo log、redo log

(1)透過undo log可以看到資料較早版本,實作MVCC,或回溯交易等功能。

(2)透過redo log用來保證交易持久性。

MySQL儲存引擎詳解之InnoDB架構

redo日誌緩衝區是記憶體儲存區域,用於保存要寫入磁碟上的日誌檔案的資料。日誌緩衝區大小由innodb_log_buffer_size 變數定義,預設大小為16MB。

日誌緩衝區的內容定期刷新到磁碟。較大的日誌緩衝區可以運行大型事務,而無需在事務提交之前將重做日誌資料寫入磁碟。因此,如果有更新,插入或刪除許多行的事務,則增加日誌緩衝區的大小可以節省磁碟I/O。

innodb_flush_log_at_trx_commit :控制如何將日誌緩衝區的內容寫入並刷新到磁碟。

innodb_flush_log_at_timeout :控制日誌刷新頻率。

如果磁碟I/O導致效能問題,則需要觀察事務,例如涉及許多BLOB條目的事務。只要InnoDB日誌緩衝區已滿,便會將其刷新到磁碟,因此增加緩衝區大小可以減少I/O。

日誌檔案的預設數為兩個: ib_logfile0 和 ib_logfile1 。

日誌具有固定大小,預設大小取決於MySQL版本。

3.Adaptive Hash Index

Adaptive Hash Index自適應hash索引是一種鍵值對的儲存結構,儲存的是熱點頁所在的記錄。 InnoDB儲存引擎會自動根據存取的頻率和模式 來為某些頁面建立雜湊索引。

MySQL儲存引擎詳解之InnoDB架構

上面的圖就是要區分B 樹索引和自適應hash索引的差別。透過參數innodb_adaptive_hash_index來停用或啟動此特性,預設為開啟。

4.Change Buffer

Change Buffer:MySQL中資料分為記憶體和磁碟兩個部分;在buffer pool中快取熱的資料頁和索引頁,減少磁碟讀取;透過change buffer就是為了緩解磁碟寫的一種手段。

當需要更新一個資料頁時,如果資料頁在記憶體中就直接更新。如果資料頁不在記憶體中。在不影響資料一致性的前下,InooDB 會將這些更新操作緩存在 change buffer 中,這樣就不需要從磁碟中讀入這個資料頁了。在下次查詢需要存取這個資料頁的時候,將資料頁讀入內存,然後執行 change buffer 中與這個頁有關的操作。透過這種方式就能保證這個資料邏輯的正確性。

雖然名字叫做 change buffer,其實它是可以持久化的資料。也就是說,change buffer 在記憶體中有拷貝,也會被寫入到磁碟上(ibdata)。

 將 change buffer 中的操作合併到原始資料頁,得到最新結果的過程稱為 merge。以下情況會觸發merge:

  • 存取這個資料頁;

  • #後台master執行緒會定期merge;

  • 資料庫緩衝池不夠用時;

  • 當資料庫正常關閉時;

  • redo log寫滿時;

change buffer就是在非唯一普通索引頁不在buffer pool中時,對頁進行了寫操作的情況下,先將記錄變更緩衝,等未來資料被讀取時,再將change buffer中的操作merge到原始資料頁的技術。在MySQL5.5之前,叫插入緩衝(insert buffer),只針對insert做了優化;現在對delete和update也有效,叫做寫緩衝(change buffer)。

推薦學習:mysql影片教學

#

以上是MySQL儲存引擎詳解之InnoDB架構的詳細內容。更多資訊請關注PHP中文網其他相關文章!

本網站聲明
本文內容由網友自願投稿,版權歸原作者所有。本站不承擔相應的法律責任。如發現涉嫌抄襲或侵權的內容,請聯絡admin@php.cn

熱AI工具

Undresser.AI Undress

Undresser.AI Undress

人工智慧驅動的應用程序,用於創建逼真的裸體照片

AI Clothes Remover

AI Clothes Remover

用於從照片中去除衣服的線上人工智慧工具。

Undress AI Tool

Undress AI Tool

免費脫衣圖片

Clothoff.io

Clothoff.io

AI脫衣器

Video Face Swap

Video Face Swap

使用我們完全免費的人工智慧換臉工具,輕鬆在任何影片中換臉!

熱工具

記事本++7.3.1

記事本++7.3.1

好用且免費的程式碼編輯器

SublimeText3漢化版

SublimeText3漢化版

中文版,非常好用

禪工作室 13.0.1

禪工作室 13.0.1

強大的PHP整合開發環境

Dreamweaver CS6

Dreamweaver CS6

視覺化網頁開發工具

SublimeText3 Mac版

SublimeText3 Mac版

神級程式碼編輯軟體(SublimeText3)

MySQL:世界上最受歡迎的數據庫的簡介 MySQL:世界上最受歡迎的數據庫的簡介 Apr 12, 2025 am 12:18 AM

MySQL是一種開源的關係型數據庫管理系統,主要用於快速、可靠地存儲和檢索數據。其工作原理包括客戶端請求、查詢解析、執行查詢和返回結果。使用示例包括創建表、插入和查詢數據,以及高級功能如JOIN操作。常見錯誤涉及SQL語法、數據類型和權限問題,優化建議包括使用索引、優化查詢和分錶分區。

MySQL的位置:數據庫和編程 MySQL的位置:數據庫和編程 Apr 13, 2025 am 12:18 AM

MySQL在數據庫和編程中的地位非常重要,它是一個開源的關係型數據庫管理系統,廣泛應用於各種應用場景。 1)MySQL提供高效的數據存儲、組織和檢索功能,支持Web、移動和企業級系統。 2)它使用客戶端-服務器架構,支持多種存儲引擎和索引優化。 3)基本用法包括創建表和插入數據,高級用法涉及多表JOIN和復雜查詢。 4)常見問題如SQL語法錯誤和性能問題可以通過EXPLAIN命令和慢查詢日誌調試。 5)性能優化方法包括合理使用索引、優化查詢和使用緩存,最佳實踐包括使用事務和PreparedStatemen

為什麼要使用mysql?利益和優勢 為什麼要使用mysql?利益和優勢 Apr 12, 2025 am 12:17 AM

選擇MySQL的原因是其性能、可靠性、易用性和社區支持。 1.MySQL提供高效的數據存儲和檢索功能,支持多種數據類型和高級查詢操作。 2.採用客戶端-服務器架構和多種存儲引擎,支持事務和查詢優化。 3.易於使用,支持多種操作系統和編程語言。 4.擁有強大的社區支持,提供豐富的資源和解決方案。

apache怎麼連接數據庫 apache怎麼連接數據庫 Apr 13, 2025 pm 01:03 PM

Apache 連接數據庫需要以下步驟:安裝數據庫驅動程序。配置 web.xml 文件以創建連接池。創建 JDBC 數據源,指定連接設置。從 Java 代碼中使用 JDBC API 訪問數據庫,包括獲取連接、創建語句、綁定參數、執行查詢或更新以及處理結果。

docker怎麼啟動mysql docker怎麼啟動mysql Apr 15, 2025 pm 12:09 PM

在 Docker 中啟動 MySQL 的過程包含以下步驟:拉取 MySQL 鏡像創建並啟動容器,設置根用戶密碼並映射端口驗證連接創建數據庫和用戶授予對數據庫的所有權限

MySQL的角色:Web應用程序中的數據庫 MySQL的角色:Web應用程序中的數據庫 Apr 17, 2025 am 12:23 AM

MySQL在Web應用中的主要作用是存儲和管理數據。 1.MySQL高效處理用戶信息、產品目錄和交易記錄等數據。 2.通過SQL查詢,開發者能從數據庫提取信息生成動態內容。 3.MySQL基於客戶端-服務器模型工作,確保查詢速度可接受。

centos7如何安裝mysql centos7如何安裝mysql Apr 14, 2025 pm 08:30 PM

優雅安裝 MySQL 的關鍵在於添加 MySQL 官方倉庫。具體步驟如下:下載 MySQL 官方 GPG 密鑰,防止釣魚攻擊。添加 MySQL 倉庫文件:rpm -Uvh https://dev.mysql.com/get/mysql80-community-release-el7-3.noarch.rpm更新 yum 倉庫緩存:yum update安裝 MySQL:yum install mysql-server啟動 MySQL 服務:systemctl start mysqld設置開機自啟動

laravel入門實例 laravel入門實例 Apr 18, 2025 pm 12:45 PM

Laravel 是一款 PHP 框架,用於輕鬆構建 Web 應用程序。它提供一系列強大的功能,包括:安裝: 使用 Composer 全局安裝 Laravel CLI,並在項目目錄中創建應用程序。路由: 在 routes/web.php 中定義 URL 和處理函數之間的關係。視圖: 在 resources/views 中創建視圖以呈現應用程序的界面。數據庫集成: 提供與 MySQL 等數據庫的開箱即用集成,並使用遷移來創建和修改表。模型和控制器: 模型表示數據庫實體,控制器處理 HTTP 請求。

See all articles