首頁 資料庫 mysql教程 MySQL分散式叢集之MyCAT(一)簡單介紹

MySQL分散式叢集之MyCAT(一)簡單介紹

Mar 11, 2017 pm 02:17 PM

隔了好久,才想起來更新博客,最近倒騰的資料庫從Oracle換成了MySQL,研究了一段時間,感覺社群版的MySQL在各個方面都遜色於Oracle,Oracle真的好方便!
好了,不廢話,這次準備記錄一些關於MySQL分散式叢集搭建的一個東東,MyCAT,我把他理解為一個MySQL代理。
----------------------------------------------- ------------------重要的TIPs----------------------- ------------------------------------------------
MyCAT的團隊已經發布了1.4Alpha版本,這其中修復了不少的bug,也添加了新功能,
博主這邊測試用的是1.3的版本,所以和最新版本的測試結果可能出現不一致!


-------------------------------------------------- -----------------------------背景介紹------------- -------------------------------------------------- ---

MyCAT的背景介紹直接略過,沒啥用,當然,這是一個由JAVA開發的東東,這一點需要了解~。

-------------------------------------------- ---------------------MyCAT的前身-------------------- --------------------------------------------

MyCAT的前身,是阿里巴巴於2012年6月19日,正式對外開源的資料庫中間件Cobar,Cobar的#前身是早已經開源的Amoeba,不過其作者陳思儒離職去盛大之後,阿里巴巴內部考慮到Amoeba的穩定性、性能和功能支持,以及其他因素,重新設立了一個項目組並且更換名稱為Cobar。 Cobar是由 Alibaba 開源的 MySQL 分散式處理中間件,它可以在分散式的環境下看起來像傳統資料庫一樣提供大量資料服務。

Cobar自誕生之日起, 就受到廣大程式設計師的追捧,但是自2013年後,幾乎沒有後續更新。在此情況下,MyCAT應運而生,它基於阿里開源的Cobar產品而研發,Cobar的穩定性、可靠性、優秀的架構和性能,以及眾多成熟的使用案例使得MyCAT一開始就擁有一個很好的起點,站在巨人的肩膀上,MyCAT能看到更遠。

-------------------------------- ------------------------MyCAT的重要特性--------------- -------------------------------------------------- ---
支援SQL 92標準;
支援MySQL集群,可以作為Proxy使用;
支援JDBC連接ORACLE、DB2 、SQL Server,將其模擬為MySQL Server使用;
支援galera for mysql集群,percona-cluster或mariadb cluster,提供高可用性資料分片集群;
自動故障切換,高可用性;
支援讀寫分離,支援MySQL雙主多從,以及一主多從的模式;
支援全域表,資料自動分片到多個節點,用於高效表關聯查詢;
#支援獨有的基於E-R 關係的分片策略,實現了高效的表關聯查詢;
多平台支持,部署和實施簡單。

-------------------------------------------------- ----------------------MyCAT的體系結構------------------ ----------------------------------------------

#整體上分成三個部分,最前端的是連接器,執行緒管理使用了資源池,並且預設採用了AIO的方式(這些基本資訊可以再啟動日誌裡面看到);
中間層在圖中已經描述的很清楚了,SQL解析器+SQL路由,SQL Executor需要具體看源碼才能了解,因為透過這段時間對MyCAT的測試,沒有感覺到SQL Executor的存在,更多的感覺是一個SQL process的東西,DataNode和心跳偵測算是中間層實現的兩個元件,一個是和MySQL的函式庫(注意,不是實例)相關,一個是常見的監測機制的功能模組;
最下層的儲存就是是MySQL的叢集了~怎麼玩MySQL的集群,由我們自己決定╰(?? ▽ ??)╯


-------------------------------------------- ------------------怎麼使用MyCAT----------------------- ----------------------------------- 
MyCAT目前透過設定檔的方式定義邏輯庫和相關配置,主要是包括三個檔案:
MYCAT_HOME/conf/schema.xml中定義邏輯庫,表、分片節點等內容;
 MYCAT_HOME/conf/rule.xml中定義分片規則;
MYCAT_HOME/conf/server.xml中定義使用者以及系統相關變量,如連接埠等。

 不急,這篇簡單介紹這幾個設定檔的作用和一些參數的意義。
一個一個來,先看schema.xml,這是從網路上摘抄的一個範例範本                

  1. <?xml version="1.0"?>
    <!DOCTYPE mycat:schema SYSTEM "schema.dtd">
    <mycat:schema xmlns:mycat="http://org.opencloudb/">
        <schema name="weixin" checkSQLschema="false" sqlMaxLimit="100" dataNode="weixin" >
            
        
        <schema name="yixin" checkSQLschema="false" sqlMaxLimit="100" dataNode="yixin" />
            
        
        <dataNode name="dn1" dataHost="localhost0" database="weixin" />
        <dataNode name="dn2" dataHost="localhost0" database="yixin" />
        <dataHost name="localhost0" maxCon="450" minCon="10" balance="1"
           writeType="0" dbType="mysql" dbDriver="native">
           <heartbeat>select user()</heartbeat>
           <!-- can have multi write hosts -->
           <writeHost host="hostM1" url="localhost:3306" user="root" password="123456" />
               <readHost host="hostS1" url="localhost:3307" user="test" password="123456" />
        </dataHost>
    </mycat:schema>
    登入後複製

##首先是schema name = "weixin
首先是schema name = "weixin"項目配置以後的效果就是,當MySQL客戶端連接MyCAT時,透過Show DATABASE指令,能看到的資料庫的,名字,
例如在這個設定檔裡面,就配置了兩個資料庫,weixin和yixin,這兩個函式庫各自包含一張user表。
注意:MyCAT對外端顯示出來的資料庫,和資料庫裡面的表,全部在schema裡面配置,沒有寫在這個裡面的表或函式庫,即使後端的MySQL裡面存在,也無法透過MyCAT去訪問,不過MyCAT不會去定義具體表格的結構。
然後是datanode,這個屬性指定了schema的表,具體存放在哪個資料庫,例如這個配置裡面,指定了dn1的資料節點位於localhost0,這個資料庫實例的名稱為weixin的資料庫,dn2同理。
datahost列出了實際的後端MySQL叢集的具體訊息,writehost是負責寫入資料的MySQL實例,writehost是負責讀取的MySQL實例,如果兩個實例的具體資訊寫成一樣,那就意味著後端使用單一實例,如果配置成不同的實例,那麼就在兩個實例之間配置主從同步,然後透過MyCAT實現讀寫分離對資料庫進行垂直切分,主要由schema.xml來完成,以後再詳細介紹。

  1. rule.xml如範例


<?xml version="1.0" encoding="UTF-8"?>
<!DOCTYPE mycat:rule SYSTEM "rule.dtd">
<mycat:rule xmlns:mycat="http://org.opencloudb/"> 
 <tableRule name="rule">
    <rule>
      <columns>user_id</columns>
      <algorithm>func1</algorithm>
    </rule>
 </tableRule>
 <function name="func1" class="org.opencloudb.route.function.PartitionByLong">
    <property name="partitionCount">2</property>
    <property name="partitionLength">512</property>
 </function>
</mycat:rule>
登入後複製

                rule.xml裡面的配置主要用於對錶的水平切分,MyCAt本身提供了很多種水平切分的策略,這個範例顯示的是取模分片,總共分成四片, user_id對1024取模,再分成兩片,每一片512個。
其他的切分策略以後再詳細介紹

server.xml如範例

############################################################################### ######
<!DOCTYPE mycat:server SYSTEM "server.dtd">
<mycat:server xmlns:mycat="http://org.opencloudb/">
    <system>
        <property name="sequnceHandlerType">0</property> 
    </system>
    <user name="test">
       <property name="password">test</property>
       <property name="schemas">weixin,yixin</property>
    </user>
</mycat:server>
登入後複製


server.xml里面配置MyCAT的逻辑库参数,如示例,配置的就是逻辑库weixin和yixin的登录用户名和密码
这个XML里面其实还有一些有关于MyCAT性能调整的参数,不过略去了,东西太多,以后再详细介绍

----------------------------------------------------------------------华丽的分割线-------------------------------------------------------------

简单的MyCAT搭建大致上就包括这些内容,现在讲讲使用一段时间以后,对MyCAT的一些总结;
1.MyCAT的性能表现还是不错的,这几天一直对MyCAT的各方面进行测试,发现MyCAT作为一个代理,虽然是在JAVA虚拟机上面运行,但是面对接近9K的QPS的峰值的时候,本身并没有出现无响应或者丢失连接的问题
2.MyCAT对前端显示的所有的库,表,全部由schema来配置,但是本身不定义表结构,这使得后端的表结构如果出现不一致,MyCAT前端是察觉不到的,不太方便吧;
3.第二点的不方便,也反映了一点,没有配置到schema的表,完全无法通过MyCAT去操作,这也算是安全性良好的一个表现吧;
4.之前说SQL Executor没感觉到,也是因为在一些测试中,发现MyCAT更像一个提供转发和结果合并功能的代理,只是对SQL和结果进行了process,不过这个需要去看源代码才知晓细节了。



以上是MySQL分散式叢集之MyCAT(一)簡單介紹的詳細內容。更多資訊請關注PHP中文網其他相關文章!

本網站聲明
本文內容由網友自願投稿,版權歸原作者所有。本站不承擔相應的法律責任。如發現涉嫌抄襲或侵權的內容,請聯絡admin@php.cn

熱AI工具

Undresser.AI Undress

Undresser.AI Undress

人工智慧驅動的應用程序,用於創建逼真的裸體照片

AI Clothes Remover

AI Clothes Remover

用於從照片中去除衣服的線上人工智慧工具。

Undress AI Tool

Undress AI Tool

免費脫衣圖片

Clothoff.io

Clothoff.io

AI脫衣器

Video Face Swap

Video Face Swap

使用我們完全免費的人工智慧換臉工具,輕鬆在任何影片中換臉!

熱工具

記事本++7.3.1

記事本++7.3.1

好用且免費的程式碼編輯器

SublimeText3漢化版

SublimeText3漢化版

中文版,非常好用

禪工作室 13.0.1

禪工作室 13.0.1

強大的PHP整合開發環境

Dreamweaver CS6

Dreamweaver CS6

視覺化網頁開發工具

SublimeText3 Mac版

SublimeText3 Mac版

神級程式碼編輯軟體(SublimeText3)

MySQL的角色:Web應用程序中的數據庫 MySQL的角色:Web應用程序中的數據庫 Apr 17, 2025 am 12:23 AM

MySQL在Web應用中的主要作用是存儲和管理數據。 1.MySQL高效處理用戶信息、產品目錄和交易記錄等數據。 2.通過SQL查詢,開發者能從數據庫提取信息生成動態內容。 3.MySQL基於客戶端-服務器模型工作,確保查詢速度可接受。

docker怎麼啟動mysql docker怎麼啟動mysql Apr 15, 2025 pm 12:09 PM

在 Docker 中啟動 MySQL 的過程包含以下步驟:拉取 MySQL 鏡像創建並啟動容器,設置根用戶密碼並映射端口驗證連接創建數據庫和用戶授予對數據庫的所有權限

laravel入門實例 laravel入門實例 Apr 18, 2025 pm 12:45 PM

Laravel 是一款 PHP 框架,用於輕鬆構建 Web 應用程序。它提供一系列強大的功能,包括:安裝: 使用 Composer 全局安裝 Laravel CLI,並在項目目錄中創建應用程序。路由: 在 routes/web.php 中定義 URL 和處理函數之間的關係。視圖: 在 resources/views 中創建視圖以呈現應用程序的界面。數據庫集成: 提供與 MySQL 等數據庫的開箱即用集成,並使用遷移來創建和修改表。模型和控制器: 模型表示數據庫實體,控制器處理 HTTP 請求。

解決數據庫連接問題:使用minii/db庫的實際案例 解決數據庫連接問題:使用minii/db庫的實際案例 Apr 18, 2025 am 07:09 AM

在開發一個小型應用時,我遇到了一個棘手的問題:需要快速集成一個輕量級的數據庫操作庫。嘗試了多個庫後,我發現它們要么功能過多,要么兼容性不佳。最終,我找到了minii/db,這是一個基於Yii2的簡化版本,完美地解決了我的問題。

centos7如何安裝mysql centos7如何安裝mysql Apr 14, 2025 pm 08:30 PM

優雅安裝 MySQL 的關鍵在於添加 MySQL 官方倉庫。具體步驟如下:下載 MySQL 官方 GPG 密鑰,防止釣魚攻擊。添加 MySQL 倉庫文件:rpm -Uvh https://dev.mysql.com/get/mysql80-community-release-el7-3.noarch.rpm更新 yum 倉庫緩存:yum update安裝 MySQL:yum install mysql-server啟動 MySQL 服務:systemctl start mysqld設置開機自啟動

centos安裝mysql centos安裝mysql Apr 14, 2025 pm 08:09 PM

在 CentOS 上安裝 MySQL 涉及以下步驟:添加合適的 MySQL yum 源。執行 yum install mysql-server 命令以安裝 MySQL 服務器。使用 mysql_secure_installation 命令進行安全設置,例如設置 root 用戶密碼。根據需要自定義 MySQL 配置文件。調整 MySQL 參數和優化數據庫以提升性能。

laravel框架安裝方法 laravel框架安裝方法 Apr 18, 2025 pm 12:54 PM

文章摘要:本文提供了詳細分步說明,指導讀者如何輕鬆安裝 Laravel 框架。 Laravel 是一個功能強大的 PHP 框架,它 упростил 和加快了 web 應用程序的開發過程。本教程涵蓋了從系統要求到配置數據庫和設置路由等各個方面的安裝過程。通過遵循這些步驟,讀者可以快速高效地為他們的 Laravel 項目打下堅實的基礎。

MySQL和PhpMyAdmin:核心功能和功能 MySQL和PhpMyAdmin:核心功能和功能 Apr 22, 2025 am 12:12 AM

MySQL和phpMyAdmin是強大的數據庫管理工具。 1)MySQL用於創建數據庫和表、執行DML和SQL查詢。 2)phpMyAdmin提供直觀界面進行數據庫管理、表結構管理、數據操作和用戶權限管理。

See all articles