目錄
1 直接連線
1.1 複製的讀寫分離
1.2 修改 DNS 位元
1.3 轉移 IP 位址
2 引入中間件
2.1 負載平衡器
2.2 負載平衡演算法
2.3 一主多備間的負載平衡
總結
首頁 資料庫 mysql教程 MySQL深入淺出負載平衡

MySQL深入淺出負載平衡

Apr 30, 2019 pm 02:12 PM
mysql 負載平衡

負載平衡的基本想法很簡單:在一個伺服器叢集中盡可能的平均負載量。基於這個思路,我們通常的做法是在伺服器前端設定一個負載平衡器。負載平衡器的作用是將請求的連線路由到最空閒的可用伺服器上。

如圖 1,顯示了一個大型網站負載平衡設定。其中一個負責 HTTP 流量,另一個用於 MySQL 存取。

图 1 典型的读密集型网站负载均衡架构

負載平衡有五個常見目的:

  1. #可擴充性。負載平衡對某些擴充很有幫助,例如讀寫分離時從備庫讀取資料。
  2. 高效率。負載平衡因為能夠控制請求被路由到何處,因此有助於更有效的使用資源。
  3. 可用性。靈活的負載平衡方案能夠大幅提高服務的可用性。
  4. 透明性。客戶端無需知道是否存在負載平衡器,也不需要關係在負載平衡器的背後有多少機器。呈現給客戶端看到的就是一個透明的伺服器。
  5. 一致性。如果應用程式是有狀態的(資料庫事務、網站會話等),那麼負載平衡器就可以將相關的查詢指向同一個伺服器,以防止狀態遺失。

而對於負載平衡的實現,一般有兩種方式:直接連接引入中間件

相關教學:mysql影片教學

1 直接連線

有些人認為負載平衡就是設定在應用程式和MySQL 伺服器直接東西,但實際上這並不是唯一的負載平衡方法。接下來我們就討論常見的應用直連的方法,及其相關注意事項。

1.1 複製的讀寫分離

此種方式下,容易出現一個最大的問題:髒資料。一個典型的例子是,當用戶評論了一篇博文,然後重新加載頁面,卻沒有看到新增的評論。

當然,我們也不能因為髒資料的問題,就將讀寫分開棄之不用。實際上,對於許多應用,可能對髒數據的容忍度比較高,此時就可以大膽的引入此種方式。

那麼對於髒資料的容忍度比較低的應用,如何進行讀寫分離呢?接下來,我們將讀寫分離再進一步區分,相信你總能找到適合自己的策略。

1) 基於查詢分離

如果應用程式只有少數數據不能容忍髒數據,我們可以將所有不能容忍髒數據的讀和寫都分配到master 上。其它的讀取查詢所分配的 slave 上。此策略很容易實現,但如果容忍髒資料的查詢比較少,很可能會出現無法有效使用備庫的情況。

2) 基於髒資料分離

這是基於查詢分離策略的小改進。需要做一些額外的工作,例如讓應用程式檢查複製延遲,以確定備庫資料是否最新。許多報表類應用程式都可以使用這個策略:只需要晚上載入的資料複製到備庫接口,並不關心是不是完全跟上了主庫。

3) 基於會話分離

這個策略比髒資料分離策略更深入 一些。它是判斷用戶是否修改了數據,用戶不需要看到其他用戶的最新數據,只需要看到自己的更新。

具體可以在會話層設定一個標記位,表示使用者是否做了更新,使用者一旦做了更新,就將該使用者的查詢在一段時間內指向主庫。

這種策略在簡單和有效性之間做了很好的妥協,是一種較推薦的策略。

當然,如果你的想法夠多,可以把基於會話的分離策略和複製延遲監控策略結合起來。如果使用者在 10 秒前更新了數據,而所有備庫延遲在 5 秒內,就可以大膽的從備庫中讀取數據。要注意的是,記得為整個會話選擇同一個備庫,否則一旦多個備庫的延遲不一致,就會給使用者造成困擾。

4) 基於全域版本 / 會話分離

透過記錄主庫日誌座標和備庫已複製的座標對比,確認備庫是否更新資料。當應用程式指向寫入操作時,在提交交易後,執行一次 SHOW MASTER STATUS 操作,然後將主庫日誌座標儲存在快取中,作為被修改物件或會話的版本號碼。當應用程式連接到備庫時,執行 SHOW SLAVE STATUS,並將備庫上的座標和快取中的版本號進行比較。如果備庫比主庫記錄點更新,表示備庫已更新對應數據,可放心的使用。

實際上,許多讀寫分離策略都需要監控複製延遲來決定讀取查詢的分配。不過要注意的是,SHOW SLAVE STATUS 得到的 Seconds_behind_master 欄位的值並不能精確的表示延遲。我們可以使用 Percona Toolkit 中的 pt-heartbeat 工具更好的監控延遲。

1.2 修改 DNS 位元

對於一些比較簡單的應用,可以為不同目的建立 DNS。最簡單的方法是唯讀伺服器擁有一個 DNS 名(read.mysql-db.com),給負責寫入作業的伺服器起另一個 DNS 名(write.mysql-db.com)。如果備庫能夠跟得上主庫,就把只讀 DNS 名指向到備庫,否則,就指向到主庫。

這種策略非常容易實現,但有一個很大的問題是:無法完全控制 DNS。

  • 修改 DNS 並不是立刻生效的,也不是原子性的。將 DNS 的變化傳遞到整個網路或網路間傳播都需要比較長的時間。
  • DNS 資料會在各個地方快取下,它的過期時間是建議性質,而非強制的。
  • 可能需要應用程式或伺服器重新啟動才能使修改後的 DNS 完全生效。

這種策略較為危險,即使可以透過修改 /etc/hosts 檔案來避免 DNS 無法完全控制的問題,但仍不失理想策略。

1.3 轉移 IP 位址

透過在伺服器間轉移虛擬位址,來實現負載平衡。是不是感覺和修改 DNS 很像?但實際上完全是兩碼事。轉移 IP 位址允許 DNS 名保持不變,我們可以透過 ARP 指令(不了解 ARP,看這裡)強制使 IP 位址的變更快速且原子性的通知到局域網路上。

一個比較方便的技術是為每個實體伺服器分配一個固定的 IP 位址。此 IP 位址固定在伺服器上,不再改變。然後可以為每個邏輯上的 「服務」(可以理解為容器)使用一個虛擬 IP 位址。

這樣,IP 就能夠很方便的在伺服器間轉移,無需重新配置應用,實作也更加容易。

2 引入中間件

上面的策略都是假定應用是和 MySQL 伺服器之間連接的,但是許多負載平衡都會引入一個中間件,作為網路通訊的代理。它一邊接受所有的通信,另一邊將這些請求分發的指定伺服器上,並將執行結果發送回請求機器。圖 2 展示了此種架構。
图 1:作为中间件的负载均衡器

2.1 負載平衡器

現在有許多負載平衡硬體和軟體,但很少有專門為 MySQL 伺服器設計的。 Web 伺服器通常更需要負載平衡,因此許多多用途的負載平衡設備都會支援 HTTP,而對其他用途則只有一些很少的基本特性。

MySQL 連線只是正常的 TCP/IP 連接,所以可以在 MySQL 上使用多用途負載平衡器。但由於缺少 MySQL 專有的特性,因此會多一些限制:

  • 分發請求是可能無法做到很好的負載平衡。
  • 對 MySQL 會話支援不足,可能不知道如何把所有從單一 HTTP 會話發送的連接請求 “固定” 到一個 MySQL 伺服器上。
  • 連線池和長連線可能會阻礙負載平衡器分送連線請求。
  • 不能很好的對 MySQL 伺服器做健康和負載檢查。

2.2 負載平衡演算法

有很多演算法用來決定哪個伺服器接受下一個連線。每個廠商都有各自不同的演算法,有以下常用方法:

  1. 隨機分配。從可用的伺服器集區中隨機選擇一個伺服器來處理請求。
  2. 輪詢。以循環順序傳送請求到伺服器,例如:A、B、C、A、B、C。
  3. 哈希。透過連接的來源 IP 位址進行哈希,將其對應到池中的同一個伺服器上。
  4. 最快回應。將連線分配給能夠最快處理請求的伺服器上。
  5. 最少連線數。將連線分配給擁有最少活躍連線的伺服器上。
  6. 權重。根據機器的性能等條件,給不同機器配置不同的權重,以便讓高效能的機器能處理更多的連接。

上述各種方法沒有最好,只有最適合的,這取決於特定的工作負載。

另外,我們只描述了即時處理的演算法。但有時候使用排隊演算法可能會更有效。例如,一個演算法可能只維護給定的資料庫伺服器並發數量,同一時刻只允許不超過 N 個活躍事務。如果有太多的活躍事務,就將新的請求放到一個佇列裡,然後讓可用伺服器清單來處理。

2.3 一主多備間的負載平衡

最常見的複製結構就是一個主函式庫加多個備庫。這種架構的擴展性較差,但我們可以透過一些方法結合負載平衡來獲得更好的效果。

  • 功能分割區。對於廠商的功能包括報表、分析、資料倉儲以及全文索引,配置一個或一組備庫來擴充單一功能的容量。
  • 保證備庫跟上主函式庫。備庫存在的問題就是髒數據。對於此,我們可以使用函數 MASTER_POS_WAIT() 來阻塞主庫的操作,直到備庫趕上了設定的主庫同步點。另外,我們也可以使用複製心跳來檢查延遲情況。

我們不能也不應該在應用的開始就想著把架構做成阿里那樣的架構。最好的方式是實現應用目前所明確需要的,並為可能的快速成長做好預先規劃

另外,為可擴展性制定一個數字目標是很有意義的,就像我們為效能製定了一個精確目標,滿足 10K 或 100K 並發一樣。這樣可以透過相關理論來避免諸如序列化或交互操作的開銷問題帶入到我們的應用中。

在 MySQL 擴展策略方面,典型的應用在成長到非常龐大時,通常先從單一伺服器轉移到向外擴展的擁有備庫的架構,再到資料分片或按功能分區。這裡要注意的是,我們不提倡諸如 “儘早分片,盡量分片” 的建議。實際上,分片很複雜,而且成本很高,最主要的是許多應用可能根本不需要。與其花大成本去分片,不如先去看看新的硬體和新版本的 MySQL 有哪些變化,也許這些新變化會帶給你驚喜。

總結

  • 直接連接重 "分離",均衡器和演算法有限制。
  • 為擴展性量化指標。

最後,希望這篇文章對你有幫助。

以上是MySQL深入淺出負載平衡的詳細內容。更多資訊請關注PHP中文網其他相關文章!

本網站聲明
本文內容由網友自願投稿,版權歸原作者所有。本站不承擔相應的法律責任。如發現涉嫌抄襲或侵權的內容,請聯絡admin@php.cn

熱AI工具

Undresser.AI Undress

Undresser.AI Undress

人工智慧驅動的應用程序,用於創建逼真的裸體照片

AI Clothes Remover

AI Clothes Remover

用於從照片中去除衣服的線上人工智慧工具。

Undress AI Tool

Undress AI Tool

免費脫衣圖片

Clothoff.io

Clothoff.io

AI脫衣器

Video Face Swap

Video Face Swap

使用我們完全免費的人工智慧換臉工具,輕鬆在任何影片中換臉!

熱工具

記事本++7.3.1

記事本++7.3.1

好用且免費的程式碼編輯器

SublimeText3漢化版

SublimeText3漢化版

中文版,非常好用

禪工作室 13.0.1

禪工作室 13.0.1

強大的PHP整合開發環境

Dreamweaver CS6

Dreamweaver CS6

視覺化網頁開發工具

SublimeText3 Mac版

SublimeText3 Mac版

神級程式碼編輯軟體(SublimeText3)

熱門話題

Java教學
1654
14
CakePHP 教程
1413
52
Laravel 教程
1306
25
PHP教程
1252
29
C# 教程
1225
24
MySQL的角色:Web應用程序中的數據庫 MySQL的角色:Web應用程序中的數據庫 Apr 17, 2025 am 12:23 AM

MySQL在Web應用中的主要作用是存儲和管理數據。 1.MySQL高效處理用戶信息、產品目錄和交易記錄等數據。 2.通過SQL查詢,開發者能從數據庫提取信息生成動態內容。 3.MySQL基於客戶端-服務器模型工作,確保查詢速度可接受。

docker怎麼啟動mysql docker怎麼啟動mysql Apr 15, 2025 pm 12:09 PM

在 Docker 中啟動 MySQL 的過程包含以下步驟:拉取 MySQL 鏡像創建並啟動容器,設置根用戶密碼並映射端口驗證連接創建數據庫和用戶授予對數據庫的所有權限

laravel入門實例 laravel入門實例 Apr 18, 2025 pm 12:45 PM

Laravel 是一款 PHP 框架,用於輕鬆構建 Web 應用程序。它提供一系列強大的功能,包括:安裝: 使用 Composer 全局安裝 Laravel CLI,並在項目目錄中創建應用程序。路由: 在 routes/web.php 中定義 URL 和處理函數之間的關係。視圖: 在 resources/views 中創建視圖以呈現應用程序的界面。數據庫集成: 提供與 MySQL 等數據庫的開箱即用集成,並使用遷移來創建和修改表。模型和控制器: 模型表示數據庫實體,控制器處理 HTTP 請求。

解決數據庫連接問題:使用minii/db庫的實際案例 解決數據庫連接問題:使用minii/db庫的實際案例 Apr 18, 2025 am 07:09 AM

在開發一個小型應用時,我遇到了一個棘手的問題:需要快速集成一個輕量級的數據庫操作庫。嘗試了多個庫後,我發現它們要么功能過多,要么兼容性不佳。最終,我找到了minii/db,這是一個基於Yii2的簡化版本,完美地解決了我的問題。

laravel框架安裝方法 laravel框架安裝方法 Apr 18, 2025 pm 12:54 PM

文章摘要:本文提供了詳細分步說明,指導讀者如何輕鬆安裝 Laravel 框架。 Laravel 是一個功能強大的 PHP 框架,它 упростил 和加快了 web 應用程序的開發過程。本教程涵蓋了從系統要求到配置數據庫和設置路由等各個方面的安裝過程。通過遵循這些步驟,讀者可以快速高效地為他們的 Laravel 項目打下堅實的基礎。

MySQL和PhpMyAdmin:核心功能和功能 MySQL和PhpMyAdmin:核心功能和功能 Apr 22, 2025 am 12:12 AM

MySQL和phpMyAdmin是強大的數據庫管理工具。 1)MySQL用於創建數據庫和表、執行DML和SQL查詢。 2)phpMyAdmin提供直觀界面進行數據庫管理、表結構管理、數據操作和用戶權限管理。

MySQL與其他編程語言:一種比較 MySQL與其他編程語言:一種比較 Apr 19, 2025 am 12:22 AM

MySQL与其他编程语言相比,主要用于存储和管理数据,而其他语言如Python、Java、C 则用于逻辑处理和应用开发。MySQL以其高性能、可扩展性和跨平台支持著称,适合数据管理需求,而其他语言在各自领域如数据分析、企业应用和系统编程中各有优势。

MySQL與其他數據庫:比較選項 MySQL與其他數據庫:比較選項 Apr 15, 2025 am 12:08 AM

MySQL適合Web應用和內容管理系統,因其開源、高性能和易用性而受歡迎。 1)與PostgreSQL相比,MySQL在簡單查詢和高並發讀操作上表現更好。 2)相較Oracle,MySQL因開源和低成本更受中小企業青睞。 3)對比MicrosoftSQLServer,MySQL更適合跨平台應用。 4)與MongoDB不同,MySQL更適用於結構化數據和事務處理。

See all articles