首頁 資料庫 mysql教程 mysql在大型網站的應用架構演變

mysql在大型網站的應用架構演變

Nov 24, 2016 am 11:09 AM
mysql

本文主要描述在網站的不同的並發訪問量級下,Mysql架構的演變

  可擴展性

  架構的可擴展性往往和並發是息息相關,沒有並發的增長,也沒有必要做高可擴展性的架構,這裡對可擴展性進行簡單介紹一下,常用的擴展手段有以下兩種

  Scale-up :  縱向擴展,透過替換為更好的機器和資源來實現伸縮,提升服務能力

  Scale -out : 橫向擴展,  透過加節點(機器)來實現伸縮,提升服務能力

  對於互聯網的高並發應用來說,無疑Scale out才是出路,透過縱向的買更高端的機器一直是我們所避諱的問題,也不是長久之計,在scale out的理論下,可擴展性的理想狀態是什麼?

  可擴展性的理想狀態

  一個服務,當面臨更高的並發的時候,能夠透過簡單增加機器來提升服務支撐的並發度,且增加機器過程中對線上服務無影響(no down time ),這就是可擴展性的理想狀態!

 架構的演變

  V1.0  簡單網站架構

  一個簡單的小型網站或者應用背後的架構可以非常簡單,  資料儲存只需要一個sqlmy instance資料備份的實例了),處於這個時間段的網站,一般會把所有的資訊存到一個database instance裡面。

mysql在大型網站的應用架構演變

在這樣的架構下,我們來看看資料儲存的瓶頸是什麼?

  1.資料量的總大小  一個機器放不下時

  2.資料的索引(B+ Tree)一個機器的內存放不下時

㟎  3.只有當以上3件事情任何一件或多件滿足時,我們才需要考慮往下一級演進。 從此我們可以看出,事實上對於許多小公司小應用,這種架構已經足夠滿足他們的需求了,初期資料量的準確評估是杜絕過度設計很重要的一環,畢竟沒有人願意為不可能發生的事情而浪費自己的經驗。

  這裡簡單舉個我的例子,對於用戶資訊這類表(3個索引),16G內存能放下大概2000W行數據的索引,簡單的讀和寫混合訪問量3000/s左右沒有問題,你的應用場景是否

  V2.0 垂直分割

  一般當V1.0 遇到瓶頸時,首先最簡單的拆分方法就是垂直拆分,何謂垂直?就是從業務角度來看,將關聯性不強的資料拆分到不同的instance上,以達到消除瓶頸的目標。以圖中的為例,將使用者資訊數據,和業務數據拆分到不同的三個實例上。對於重複讀取類型比較多的場景,我們也可以加一層cache,來減少對DB的壓力。

在這樣的架構下,我們來看看資料儲存的瓶頸是什麼? mysql在大型網站的應用架構演變

  1.單一實例單業務依然存在V1.0所述瓶頸

  遇到瓶頸時可以考慮往本文更高V版本升級, 若是讀取請求導致達到性能瓶頸可以考慮往V3.0升級, 其他瓶頸考慮往V4.0升級

  V3.0  主從架構

  此類架構主要解決V2.0架構下的讀取問題,透過給Instance掛資料即時備份的思路來遷移讀取的壓力,在Mysql的場景下就是透過主從結構,主庫抗寫壓力,透過從函式庫來分擔讀取壓力,對於寫少讀多的應用,V3.0主從架構完全能夠勝任

mysql在大型網站的應用架構演變

 在這樣的架構下,我們來看看資料儲存的瓶頸是什麼?

  1.寫入量主庫不能承受

  V4.0  水平分割

  對於V2.0 V3.0方案遇到瓶頸時,都可以透過水平分割來解決,水平分割和垂直分割來解決,水平分割和垂直分割有較大差異,垂直拆分拆完的結果,在一個實例上是擁有全量數據的,而水平拆分之後,任何實例都只有全量的1/n的數據,以下圖Userinfo的拆分為例,將userinfo拆分為3個cluster,每個cluster持有總量的1/3數據,3個cluster數據的總和等於一份完整數據(註:這裡不再叫單一實例而是叫一個cluster 代表包含主從的一個小mysql叢集)

mysql在大型網站的應用架構演變

 資料如何路由?

  1.Range拆分

  sharding key按連續區間段路由,一般用在有嚴格自增ID需求的場景上,如Userid, Userid Range的小例子:以userid 3000W 為Rangecluster userid 1-3000W  2號cluster  userid   3001W-6000W

  2.Listid   3001W-6000W

  2.Listid   3001W-6000W

  2.List

  Listuster與Range分離方法,List主要用來做sharding key不是連續區間的序列落到一個cluster的情況🎜🎜🎜🎜
本網站聲明
本文內容由網友自願投稿,版權歸原作者所有。本站不承擔相應的法律責任。如發現涉嫌抄襲或侵權的內容,請聯絡admin@php.cn

熱AI工具

Undresser.AI Undress

Undresser.AI Undress

人工智慧驅動的應用程序,用於創建逼真的裸體照片

AI Clothes Remover

AI Clothes Remover

用於從照片中去除衣服的線上人工智慧工具。

Undress AI Tool

Undress AI Tool

免費脫衣圖片

Clothoff.io

Clothoff.io

AI脫衣器

Video Face Swap

Video Face Swap

使用我們完全免費的人工智慧換臉工具,輕鬆在任何影片中換臉!

熱工具

記事本++7.3.1

記事本++7.3.1

好用且免費的程式碼編輯器

SublimeText3漢化版

SublimeText3漢化版

中文版,非常好用

禪工作室 13.0.1

禪工作室 13.0.1

強大的PHP整合開發環境

Dreamweaver CS6

Dreamweaver CS6

視覺化網頁開發工具

SublimeText3 Mac版

SublimeText3 Mac版

神級程式碼編輯軟體(SublimeText3)

apache怎麼連接數據庫 apache怎麼連接數據庫 Apr 13, 2025 pm 01:03 PM

Apache 連接數據庫需要以下步驟:安裝數據庫驅動程序。配置 web.xml 文件以創建連接池。創建 JDBC 數據源,指定連接設置。從 Java 代碼中使用 JDBC API 訪問數據庫,包括獲取連接、創建語句、綁定參數、執行查詢或更新以及處理結果。

MySQL:世界上最受歡迎的數據庫的簡介 MySQL:世界上最受歡迎的數據庫的簡介 Apr 12, 2025 am 12:18 AM

MySQL是一種開源的關係型數據庫管理系統,主要用於快速、可靠地存儲和檢索數據。其工作原理包括客戶端請求、查詢解析、執行查詢和返回結果。使用示例包括創建表、插入和查詢數據,以及高級功能如JOIN操作。常見錯誤涉及SQL語法、數據類型和權限問題,優化建議包括使用索引、優化查詢和分錶分區。

MySQL的位置:數據庫和編程 MySQL的位置:數據庫和編程 Apr 13, 2025 am 12:18 AM

MySQL在數據庫和編程中的地位非常重要,它是一個開源的關係型數據庫管理系統,廣泛應用於各種應用場景。 1)MySQL提供高效的數據存儲、組織和檢索功能,支持Web、移動和企業級系統。 2)它使用客戶端-服務器架構,支持多種存儲引擎和索引優化。 3)基本用法包括創建表和插入數據,高級用法涉及多表JOIN和復雜查詢。 4)常見問題如SQL語法錯誤和性能問題可以通過EXPLAIN命令和慢查詢日誌調試。 5)性能優化方法包括合理使用索引、優化查詢和使用緩存,最佳實踐包括使用事務和PreparedStatemen

為什麼要使用mysql?利益和優勢 為什麼要使用mysql?利益和優勢 Apr 12, 2025 am 12:17 AM

選擇MySQL的原因是其性能、可靠性、易用性和社區支持。 1.MySQL提供高效的數據存儲和檢索功能,支持多種數據類型和高級查詢操作。 2.採用客戶端-服務器架構和多種存儲引擎,支持事務和查詢優化。 3.易於使用,支持多種操作系統和編程語言。 4.擁有強大的社區支持,提供豐富的資源和解決方案。

MySQL的角色:Web應用程序中的數據庫 MySQL的角色:Web應用程序中的數據庫 Apr 17, 2025 am 12:23 AM

MySQL在Web應用中的主要作用是存儲和管理數據。 1.MySQL高效處理用戶信息、產品目錄和交易記錄等數據。 2.通過SQL查詢,開發者能從數據庫提取信息生成動態內容。 3.MySQL基於客戶端-服務器模型工作,確保查詢速度可接受。

docker怎麼啟動mysql docker怎麼啟動mysql Apr 15, 2025 pm 12:09 PM

在 Docker 中啟動 MySQL 的過程包含以下步驟:拉取 MySQL 鏡像創建並啟動容器,設置根用戶密碼並映射端口驗證連接創建數據庫和用戶授予對數據庫的所有權限

laravel入門實例 laravel入門實例 Apr 18, 2025 pm 12:45 PM

Laravel 是一款 PHP 框架,用於輕鬆構建 Web 應用程序。它提供一系列強大的功能,包括:安裝: 使用 Composer 全局安裝 Laravel CLI,並在項目目錄中創建應用程序。路由: 在 routes/web.php 中定義 URL 和處理函數之間的關係。視圖: 在 resources/views 中創建視圖以呈現應用程序的界面。數據庫集成: 提供與 MySQL 等數據庫的開箱即用集成,並使用遷移來創建和修改表。模型和控制器: 模型表示數據庫實體,控制器處理 HTTP 請求。

解決數據庫連接問題:使用minii/db庫的實際案例 解決數據庫連接問題:使用minii/db庫的實際案例 Apr 18, 2025 am 07:09 AM

在開發一個小型應用時,我遇到了一個棘手的問題:需要快速集成一個輕量級的數據庫操作庫。嘗試了多個庫後,我發現它們要么功能過多,要么兼容性不佳。最終,我找到了minii/db,這是一個基於Yii2的簡化版本,完美地解決了我的問題。

See all articles