MySQL誤操作後快速復原資料的方法

黄舟
發布: 2017-01-18 11:11:43
原創
1093 人瀏覽過

Mysql關係型資料庫管理系統

MySQL是一個開放式原始碼的小型關聯式資料庫管理系統,開發者為瑞典MySQL AB公司。 MySQL被廣泛地應用在Internet上的中小型網站。由於其體積小、速度快、整體擁有成本低,尤其是開放原始碼這一特點,許多中小型網站為了降低網站總體擁有成本而選擇了MySQL作為網站資料庫。


這篇文章主要介紹了MySQL誤操作後快速恢復資料的方法,需要的朋友可以參考下

摘要: 利用binlog閃回誤操作資料。
基本上每個跟資料庫打交道的程式設計師(當然也可能是你同事)都會碰一個問題,MySQL誤操作後如何快速回滾?例如,delete一張表,忘加限制條件,整張表沒了。假如這還是線上環境核心業務數據,那這事就鬧大了。誤操作後,能快速回滾資料是非常重要的。

傳統解法

用全量備份重搭實例,再利用增量binlog備份,恢復到誤操作之前的狀態。然後跳過誤操作的SQL,再繼續套用binlog。此法費時費力,不值得再推薦。

利用binlog2sql快速閃回

首先,確認你的MySQL server開啟了binlog,設定了以下參數:

[mysqld]
server-id = 1
log_bin = /var/log/mysql/mysql-bin.log
max_binlog_size = 100M
binlog-format = row
登入後複製

如果沒有開啟binlog,也沒有預先產生回滾SQL,那真的無法快速回滾了。對存放重要業務資料的MySQL,強烈建議開啟binlog。

隨後,安裝開源工具binlog2sql。 binlog2sql是一款簡單好用的binlog解析工具,其中一個功能就是產生回溯SQL。

shell> git clone https://github.com/danfengcao/binlog2sql.git
shell> pip install -r requirements.txt
登入後複製

然後,我們就可以產生回滾SQL了。

背景:小明在20點多時誤刪了test庫tbl表整張表的數據,需要緊急回溯。

test库tbl表原有数据
mysql> select * from tbl;
+----+--------+---------------------+
| id | name  | addtime       |
+----+--------+---------------------+
| 1 | 小赵  | 2016-12-10 00:04:33 |
| 2 | 小钱  | 2016-12-10 00:04:48 |
| 3 | 小孙  | 2016-12-13 20:25:00 |
| 4 | 小李  | 2016-12-12 00:00:00 |
+----+--------+---------------------+
4 rows in set (0.00 sec)

mysql> delete from tbl;
Query OK, 4 rows affected (0.00 sec)

20:28时,tbl表误操作被清空
mysql> select * from tbl;
Empty set (0.00 sec)
登入後複製

恢復資料步驟:

1、登入mysql,查看目前的binlog檔案

mysql> show master status;
+------------------+-----------+
| Log_name     | File_size |
+------------------+-----------+
| mysql-bin.000051 |    967 |
| mysql-bin.000052 |    965 |
+------------------+-----------+
登入後複製

2、最新的binlog檔案是mysql-bin.000052,我們再定位誤操作SQL的binlog位置。誤操作人只能知道大致的誤操作時間,我們根據大致時間過濾資料。

shell> python binlog2sql/binlog2sql.py -h127.0.0.1 -P3306 -uadmin -p'admin' -dtest -ttbl --start-file='mysql-bin.000052' --start-datetime='2016-12-13 20:25:00'
 --stop-datetime='2016-12-13 20:30:00'
输出:
INSERT INTO `test`.`tbl`(`addtime`, `id`, `name`) VALUES ('2016-12-13 20:25:00', 3, '小孙'); #start 4 end 290 time 2016-12-13 20:25:46
INSERT INTO `test`.`tbl`(`addtime`, `id`, `name`) VALUES ('2016-12-13 20:26:00', 4, '小李'); #start 317 end 487 time 2016-12-13 20:26:26
UPDATE `test`.`tbl` SET `addtime`='2016-12-12 00:00:00', `id`=4, `name`='小李' WHERE `addtime`='2016-12-13 20:26:00' AND `id`=4 AND `name`='小李' LIMIT 1; 
#start 514 end 701 time 2016-12-13 20:27:07
DELETE FROM `test`.`tbl` WHERE `addtime`='2016-12-10 00:04:33' AND `id`=1 AND `name`='小赵' LIMIT 1; #start 728 end 938 time 2016-12-13 20:28:05
DELETE FROM `test`.`tbl` WHERE `addtime`='2016-12-10 00:04:48' AND `id`=2 AND `name`='小钱' LIMIT 1; #start 728 end 938 time 2016-12-13 20:28:05
DELETE FROM `test`.`tbl` WHERE `addtime`='2016-12-13 20:25:00' AND `id`=3 AND `name`='小孙' LIMIT 1; #start 728 end 938 time 2016-12-13 20:28:05
DELETE FROM `test`.`tbl` WHERE `addtime`='2016-12-12 00:00:00' AND `id`=4 AND `name`='小李' LIMIT 1; #start 728 end 938 time 2016-12-13 20:28:05
登入後複製

3、我們得到了誤操作sql的準確位置在728-938之間,再根據位置進一步過濾,使用flashback模式產生回滾sql,檢查回滾sql是否正確

shell> python binlog2sql/binlog2sql.py -h127.0.0.1 -P3306 -uadmin -p'admin' -dtest -ttbl --start-file='mysql-bin.000052' --start-pos=3346 --end-pos=3556 -B
输出:
INSERT INTO `test`.`tbl`(`addtime`, `id`, `name`) VALUES ('2016-12-12 00:00:00', 4, '小李'); #start 728 end 938 time 2016-12-13 20:28:05
INSERT INTO `test`.`tbl`(`addtime`, `id`, `name`) VALUES ('2016-12-13 20:25:00', 3, '小孙'); #start 728 end 938 time 2016-12-13 20:28:05
INSERT INTO `test`.`tbl`(`addtime`, `id`, `name`) VALUES ('2016-12-10 00:04:48', 2, '小钱'); #start 728 end 938 time 2016-12-13 20:28:05
INSERT INTO `test`.`tbl`(`addtime`, `id`, `name`) VALUES ('2016-12-10 00:04:33', 1, '小赵'); #start 728 end 938 time 2016-12-13 20:28:05
登入後複製

確認回滾sql正確,執行回滾語句。登入mysql確認,資料回滾成功。

shell> python binlog2sql.py -h127.0.0.1 -P3306 -uadmin -p'admin' -dtest -ttbl --start-file='mysql-bin.000052'
 --start-pos=3346 --end-pos=3556 -B | mysql -h127.0.0.1 -P3306 -uadmin -p'admin'

mysql> select * from tbl;
+----+--------+---------------------+
| id | name  | addtime       |
+----+--------+---------------------+
| 1 | 小赵  | 2016-12-10 00:04:33 |
| 2 | 小钱  | 2016-12-10 00:04:48 |
| 3 | 小孙  | 2016-12-13 20:25:00 |
| 4 | 小李  | 2016-12-12 00:00:00 |
+----+--------+---------------------+
登入後複製

至此,不用再擔心被炒魷魚了。

常見問題

有人會問,我DDL誤操作了怎麼快速回滾?比如drop了一張大表。

很難做到。因為即使在row模式下,DDL操作也不會把每行資料的變化記錄到binlog,所以DDL無法透過binlog回滾。實作DDL回滾,必須在執行DDL前先備份舊資料。確實有人透過修改mysql server原始碼實現了DDL的快速回滾,我找到阿里的xiaobin lin提交了一個patch。但據我所知,國內很少網路公司應用了這個特性。原因的話,我認為最主要還是懶的去折騰,沒必要搞這個低頻功能,次要原因是會增加一些額外儲存。

所以,DDL誤操作的話通常只能透過備份來恢復。如果公司連備份也不能用了,那真的建議去買機票了。幹啥?跑唄

mysql除了binlog2sql,是否還有其他回溯工具?

當然有。阿里彭立勳對mysqlbinlog增加了flashback的特性,這應該是mysql最早有的flashback功能,彭解決的是DML的回滾,並說明了利用binlog進行DML閃回的設計思路。 DDL回滾特性也是由阿里團隊提出並實現的。這兩個功能是有創新精神的,此後出現的閃回工具基本上都是對上面兩者的模仿。另外,去哪裡開源的Inception是一套MySQL自動化運維工具,這個就比較重了,支援DML回滾,還不是從binlog回滾的,是從備份回滾的,也支援DDL回滾表結構,資料是回滾不了滴~ 還有一種做法叫slave延時備份,搞台不加業務流量的slave,故意延遲一段時間,這其實是在傳統辦法的基礎上去除了實例恢復這一步。此法會額外消耗一台機器,我們不建議這麼做。

如有mysql回滾相關的優秀工具優良文章遺漏,煩請告知。

以上就是MySQL誤操作後快速恢復資料的方法的內容,更多相關內容請關注PHP中文網(www.php.cn)!


相關標籤:
來源:php.cn
本網站聲明
本文內容由網友自願投稿,版權歸原作者所有。本站不承擔相應的法律責任。如發現涉嫌抄襲或侵權的內容,請聯絡admin@php.cn
熱門教學
更多>
最新下載
更多>
網站特效
網站源碼
網站素材
前端模板