pt-table-checksum校驗與pt-table-sync修復數據

巴扎黑
發布: 2017-06-23 15:06:09
原創
1418 人瀏覽過
1:下載工具包
登入網站下載對應的工具包
2:安裝
#(1)yum安裝:
sudo yum install http://www.percona.com/downloads/percona-release/redhat/0.1-4/percona-release-0.1-4.noarch.rpm
yum list | grep percona-toolkit
登入後複製

結果集顯示以下證明安裝成功:

percona-toolkit.noarch 3.0.0-rc percona-release-noarch
登入後複製

接著進行安裝

sudo yum install percona-toolkit
登入後複製

(2)解壓縮安裝套件:

[root@localhost home]# cd toolkit/[root@localhost toolkit]# ls
percona-toolkit-2.2.19.tar.gz[root@localhost toolkit]# tar -xvf percona-toolkit.tar.gz
登入後複製

#至此來說已經安裝了percona 的toolKit工具包,下面主要測一下pt-table-checksum校驗與pt-table-sync,前者主要用於數據的校驗,驗證主從是否一致,後者主要用來修復數據,兩者一般情況結合起來用可以修復數據不一致的問題。

pt-table-checksum是percona公司提供的一款驗證主從資料一致性的工具,我們指向主庫,判斷從庫的結果集會回饋給我們,當有捕獲到不一致問題的時候,就會回傳一個非0的結果。但他只能找出資料的不一致,如果要修復資料問題就要使用pt-table-sync。
pt-table-checksum在運作的時候是基於statement複製格式的,如果我們是ROW格式,需要在執行的時候加上--no-check-binlog-format參數。
3:pt-table-checksum的實踐,裝完以後我們就可以直接使用了,我這是使用的是第二種方式
[root@localhost bin]# /home/toolkit/percona-toolkit-2.2.19/bin/pt-table-checksum --nocheck-replication-filters --replicate=rep_test.checksums --no-check-binlog-format h=172.16.16.35,u=root,p=123456,P=3306TS ERRORS DIFFS ROWS CHUNKS SKIPPED TIME TABLE06-07T10:55:49 0 0 1 1 0 1.331 MAXIANGQIAN.MAXIANGQIAN06-07T10:55:54 0 0 1 1 0 5.524 maxiangqian.test06-07T10:55:56 0 0 4 1 0 1.208 maxiangqian.test0106-07T10:55:57 0 0 0 1 0 1.164 mysql.columns_priv06-07T10:55:58 0 0 5 1 0 1.216 mysql.db06-07T10:55:59 0 0 2 1 0 1.176 mysql.engine_cost06-07T10:56:00 0 0 0 1 0 1.178 mysql.event06-07T10:56:01 0 0 0 1 0 1.160 mysql.func06-07T10:56:03 0 0 1 1 0 1.154 mysql.gtid_executed06-07T10:56:08 0 0 40 4 0 5.015 mysql.help_category06-07T10:56:13 0 0 679 5 0 5.806 mysql.help_keyword06-07T10:56:18 0 0 1334 4 0 4.572 mysql.help_relation06-07T10:56:19 0 0 635 1 0 1.169 mysql.help_topic06-07T10:56:20 0 0 0 1 0 1.163 mysql.ndb_binlog_index06-07T10:56:22 0 0 0 1 0 1.157 mysql.plugin06-07T10:56:23 0 1 48 1 0 1.236 mysql.proc06-07T10:56:24 0 0 0 1 0 1.197 mysql.procs_priv06-07T10:56:25 0 0 1 1 0 1.235 mysql.proxies_priv06-07T10:56:26 0 0 6 1 0 1.188 mysql.server_cost06-07T10:56:28 0 0 0 1 0 1.154 mysql.servers06-07T10:56:34 0 0 1 1 0 6.184 mysql.tables_priv06-07T10:56:35 0 0 0 1 0 1.198 mysql.time_zone06-07T10:56:36 0 0 0 1 0 1.121 mysql.time_zone_leap_second06-07T10:56:37 0 0 0 1 0 1.148 mysql.time_zone_name06-07T10:56:38 0 0 0 1 0 1.147 mysql.time_zone_transition06-07T10:56:40 0 0 0 1 0 1.138 mysql.time_zone_transition_type06-07T10:56:41 0 0 8 1 0 1.336 mysql.user06-07T10:56:42 0 0 0 1 0 1.164 open_api.ma06-07T10:57:01 0 0 1000000 13 0 18.707 sbtest.sbtest06-07T10:57:02 0 0 6 1 0 1.263 sys.sys_config
登入後複製

我們也可以單獨檢查某一個函式庫,這樣來縮小檢查範圍:

#
[root@localhost bin]# /home/toolkit/percona-toolkit-2.2.19/bin/pt-table-checksum --nocheck-replication-filters --replicate=rep_test.checksums --no-check-binlog-format --databases=maxiangqian h=172.16.16.35,u=root,p=123456,P=3306
登入後複製

得到的結果如上,看一下描述:

TS :完成檢查的時間。 ERRORS :檢查時候發生錯誤和警告的數量。 DIFFS :0表示一致,1表示不一致。當指定--no-replicate-check時,會一直為0,當指定--replicate-check-only會顯示不同的資訊。 ROWS :表格的行數。 CHUNKS :被分割到表中的區塊的數目。 SKIPPED :因錯誤或警告或過大,則跳過區塊的數目。 TIME :執行的時間。 TABLE :被檢查的表名。
然後看一下這個主要的參數:
--nocheck-replication-filters :不检查复制过滤器,建议启用。后面可以用--databases来指定需要检查的数据库。--no-check-binlog-format : 不检查复制的binlog模式,要是binlog模式是ROW,则会报错。--replicate-check-only :只显示不同步的信息。 --replicate= :把checksum的信息写入到指定表中,建议直接写到被检查的数据库当中。 --databases= :指定需要被检查的数据库,多个则用逗号隔开。--tables= :指定需要被检查的表,多个用逗号隔开 h=127.0.0.1 :Master的地址
u=root :用户名
p=123456 :密码
P=3306 :端口
登入後複製

#透過指定--replicate=rep_test.checksums 參數,會自動產生一個資料庫.把檢查訊息都寫到了checksums表中。

進入SLAVE對應的庫中查看checksums表的信息,可以透過以下語句查看不一致的信息:
mysql> select * from checksums where this_cnt<>master_cnt;
登入後複製

透過上面的this_crc <> master_crc 更能清楚的看出他們的不一致了,透過chunk知道是這個張表的哪個區塊上的記錄出現不一致。

4:檢測資料不一致的情況使用pt-table-sync進行修復
#我們看一下上一節我們透過以下的語句偵測到有資料是不一致的:
[root@localhost bin]# /home/toolkit/percona-toolkit-2.2.19/bin/pt-table-checksum --nocheck-replication-filters --replicate=rep_test.checksums --no-check-binlog-format --databases=maxiangqian h=172.16.16.35,u=root,p=123456,P=3306TS ERRORS DIFFS ROWS CHUNKS SKIPPED TIME TABLE06-07T11:13:18 0 0 1 1 0 1.220 MAXIANGQIAN.MAXIANGQIAN06-07T11:13:19 0 1 1 1 0 1.135 maxiangqian.test06-07T11:13:21 0 0 4 1 0 1.197 maxiangqian.test01
登入後複製

恢復不一致資料:

[root@localhost bin]# clear[root@localhost bin]# ./pt-table-sync --execute h=172.16.16.35,P=3306,D=maxiangqian,t=test,u=root,p=123456 h=172.16.16.34,P=3306,u=root,p=123456 --no-check-slave --print[root@localhost bin]# /home/toolkit/percona-toolkit-2.2.19/bin/pt-table-checksum --nocheck-replication-filters --replicate=rep_test.checksums --no-check-binlog-format --databases=maxiangqian h=172.16.16.35,u=root,p=123456,P=3306TS ERRORS DIFFS ROWS CHUNKS SKIPPED TIME TABLE06-07T11:18:09 0 0 1 1 0 1.172 MAXIANGQIAN.MAXIANGQIAN06-07T11:18:10 0 0 1 1 0 1.144 maxiangqian.test06-07T11:18:11 0 0 4 1 0 1.282 maxiangqian.test01
登入後複製

本身來說test這張表少了一行資料,執行以後主體和副本的資料將會一致:

接下來我們再看一下pt-table-sync的一些使用案例:
(1)將host1上的資料同步到host2,只同步db.tbl表
pt-table-sync --execute h=host1,D=db,t=tbl h=host2[root@localhost bin]# ./pt-table-sync --execute h=172.16.16.35,P=3306,D=maxiangqian,t=test,u=root,p=123456 h=172.16.16.34,P=3306,u=root,p=123456 --no-check-slave --print
登入後複製

(2)將host1 上的所有資料同步到host2和host3

#
pt-table-sync --execute host1 host2 host3[root@localhost bin]# ./pt-table-sync --execute h=172.16.16.35,P=3306,D=maxiangqian,t=test,u=root,p=123456 h=172.16.16.34,P=3306,u=root,p=123456 h=172.16.16.35,P=3307,u=root,p=123456 --no-check-slave --print
登入後複製

(3)確保slave1上的所有資料和主庫是同步的

pt-table-sync --execute --sync-to-master slave1[root@localhost bin]# ./pt-table-sync --execute --sync-to-master h=172.16.16.34,P=3306,u=root,p=123456 --no-check-slave --print
登入後複製

這個要求所檢查的表是必須有主鍵或說唯一索引的。我們也可以按照下面指定單庫的單表

[root@localhost bin]# ./pt-table-sync --execute --sync-to-master h=172.16.16.34,P=3306,D=maxiangqian,t=test01,u=root,p=123456 --no-check-slave --print
登入後複製

#(4)按照檢查生成的rep_test.checksums恢復所有的從庫

#
pt-table-sync --execute --replicate test.checksum master1
登入後複製

也就是下面的範例:

[root@localhost bin]# ./pt-table-sync --execute --replicate rep_test.checksums h=172.16.16.35,P=3306,u=root,p=123456
登入後複製

(5)只修正slave1的資料

/pt-table-sync --execute --replicate rep_test.checksums --sync-to-master slave1
登入後複製

(6)雙主模式master2修正自身資料:

pt-table-sync --execute --sync-to-master h=master2,D=db,t=tbl
登入後複製

由於雙主模式有很多問題,一個修改可能會傳給另外的資料庫,所以說我們千萬不能在雙主的模式下執行以下的操作:

##
pt-table-sync --execute h=master1,D=db,t=tbl master2
登入後複製

 

以上是pt-table-checksum校驗與pt-table-sync修復數據的詳細內容。更多資訊請關注PHP中文網其他相關文章!

相關標籤:
來源:php.cn
本網站聲明
本文內容由網友自願投稿,版權歸原作者所有。本站不承擔相應的法律責任。如發現涉嫌抄襲或侵權的內容,請聯絡admin@php.cn
熱門教學
更多>
最新下載
更多>
網站特效
網站源碼
網站素材
前端模板
關於我們 免責聲明 Sitemap
PHP中文網:公益線上PHP培訓,幫助PHP學習者快速成長!