主頁(yè) > 知識(shí)庫(kù) > MySQL誤操作后快速恢復(fù)數(shù)據(jù)的方法

MySQL誤操作后快速恢復(fù)數(shù)據(jù)的方法

熱門標(biāo)簽:外呼系統(tǒng)怎樣才能不封號(hào) 西藏地圖標(biāo)注改進(jìn)點(diǎn) 地圖標(biāo)注百度競(jìng)價(jià) 地圖標(biāo)注專員入駐 神行者百貨商場(chǎng)地圖標(biāo)注 地圖標(biāo)注什么軟件好用 如何辦理400客服電話 安陽(yáng)手機(jī)自動(dòng)外呼系統(tǒng)原理是什么 外呼系統(tǒng)線路經(jīng)常出問(wèn)題嗎

摘要: 利用binlog閃回誤操作數(shù)據(jù)。
基本上每個(gè)跟數(shù)據(jù)庫(kù)打交道的程序員(當(dāng)然也可能是你同事)都會(huì)碰一個(gè)問(wèn)題,MySQL誤操作后如何快速回滾?比如,delete一張表,忘加限制條件,整張表沒(méi)了。假如這還是線上環(huán)境核心業(yè)務(wù)數(shù)據(jù),那這事就鬧大了。誤操作后,能快速回滾數(shù)據(jù)是非常重要的。

傳統(tǒng)解法

用全量備份重搭實(shí)例,再利用增量binlog備份,恢復(fù)到誤操作之前的狀態(tài)。然后跳過(guò)誤操作的SQL,再繼續(xù)應(yīng)用binlog。此法費(fèi)時(shí)費(fèi)力,不值得再推薦。

利用binlog2sql快速閃回

首先,確認(rèn)你的MySQL server開(kāi)啟了binlog,設(shè)置了以下參數(shù):

[mysqld]
server-id = 1
log_bin = /var/log/mysql/mysql-bin.log
max_binlog_size = 100M
binlog-format = row

如果沒(méi)有開(kāi)啟binlog,也沒(méi)有預(yù)先生成回滾SQL,那真的無(wú)法快速回滾了。對(duì)存放重要業(yè)務(wù)數(shù)據(jù)的MySQL,強(qiáng)烈建議開(kāi)啟binlog。

隨后,安裝開(kāi)源工具binlog2sql。binlog2sql是一款簡(jiǎn)單易用的binlog解析工具,其中一個(gè)功能就是生成回滾SQL。

shell> git clone https://github.com/danfengcao/binlog2sql.git
shell> pip install -r requirements.txt

然后,我們就可以生成回滾SQL了。

背景:小明在20點(diǎn)多時(shí)誤刪了test庫(kù)tbl表整張表的數(shù)據(jù),需要緊急回滾。

test庫(kù)tbl表原有數(shù)據(jù)
mysql> select * from tbl;
+----+--------+---------------------+
| id | name  | addtime       |
+----+--------+---------------------+
| 1 | 小趙  | 2016-12-10 00:04:33 |
| 2 | 小錢  | 2016-12-10 00:04:48 |
| 3 | 小孫  | 2016-12-13 20:25:00 |
| 4 | 小李  | 2016-12-12 00:00:00 |
+----+--------+---------------------+
4 rows in set (0.00 sec)

mysql> delete from tbl;
Query OK, 4 rows affected (0.00 sec)

20:28時(shí),tbl表誤操作被清空
mysql> select * from tbl;
Empty set (0.00 sec)

恢復(fù)數(shù)據(jù)步驟:

1、登錄mysql,查看目前的binlog文件

mysql> show master status;
+------------------+-----------+
| Log_name     | File_size |
+------------------+-----------+
| mysql-bin.000051 |    967 |
| mysql-bin.000052 |    965 |
+------------------+-----------+

2、最新的binlog文件是mysql-bin.000052,我們?cè)俣ㄎ徽`操作SQL的binlog位置。誤操作人只能知道大致的誤操作時(shí)間,我們根據(jù)大致時(shí)間過(guò)濾數(shù)據(jù)。

shell> python binlog2sql/binlog2sql.py -h127.0.0.1 -P3306 -uadmin -p'admin' -dtest -ttbl --start-file='mysql-bin.000052' --start-datetime='2016-12-13 20:25:00' --stop-datetime='2016-12-13 20:30:00'
輸出:
INSERT INTO `test`.`tbl`(`addtime`, `id`, `name`) VALUES ('2016-12-13 20:25:00', 3, '小孫'); #start 4 end 290 time 2016-12-13 20:25:46
INSERT INTO `test`.`tbl`(`addtime`, `id`, `name`) VALUES ('2016-12-13 20:26:00', 4, '小李'); #start 317 end 487 time 2016-12-13 20:26:26
UPDATE `test`.`tbl` SET `addtime`='2016-12-12 00:00:00', `id`=4, `name`='小李' WHERE `addtime`='2016-12-13 20:26:00' AND `id`=4 AND `name`='小李' LIMIT 1; #start 514 end 701 time 2016-12-13 20:27:07
DELETE FROM `test`.`tbl` WHERE `addtime`='2016-12-10 00:04:33' AND `id`=1 AND `name`='小趙' LIMIT 1; #start 728 end 938 time 2016-12-13 20:28:05
DELETE FROM `test`.`tbl` WHERE `addtime`='2016-12-10 00:04:48' AND `id`=2 AND `name`='小錢' LIMIT 1; #start 728 end 938 time 2016-12-13 20:28:05
DELETE FROM `test`.`tbl` WHERE `addtime`='2016-12-13 20:25:00' AND `id`=3 AND `name`='小孫' LIMIT 1; #start 728 end 938 time 2016-12-13 20:28:05
DELETE FROM `test`.`tbl` WHERE `addtime`='2016-12-12 00:00:00' AND `id`=4 AND `name`='小李' LIMIT 1; #start 728 end 938 time 2016-12-13 20:28:05

3、我們得到了誤操作sql的準(zhǔn)確位置在728-938之間,再根據(jù)位置進(jìn)一步過(guò)濾,使用flashback模式生成回滾sql,檢查回滾sql是否正確

shell> python binlog2sql/binlog2sql.py -h127.0.0.1 -P3306 -uadmin -p'admin' -dtest -ttbl --start-file='mysql-bin.000052' --start-pos=3346 --end-pos=3556 -B
輸出:
INSERT INTO `test`.`tbl`(`addtime`, `id`, `name`) VALUES ('2016-12-12 00:00:00', 4, '小李'); #start 728 end 938 time 2016-12-13 20:28:05
INSERT INTO `test`.`tbl`(`addtime`, `id`, `name`) VALUES ('2016-12-13 20:25:00', 3, '小孫'); #start 728 end 938 time 2016-12-13 20:28:05
INSERT INTO `test`.`tbl`(`addtime`, `id`, `name`) VALUES ('2016-12-10 00:04:48', 2, '小錢'); #start 728 end 938 time 2016-12-13 20:28:05
INSERT INTO `test`.`tbl`(`addtime`, `id`, `name`) VALUES ('2016-12-10 00:04:33', 1, '小趙'); #start 728 end 938 time 2016-12-13 20:28:05

確認(rèn)回滾sql正確,執(zhí)行回滾語(yǔ)句。登錄mysql確認(rèn),數(shù)據(jù)回滾成功。

shell> python binlog2sql.py -h127.0.0.1 -P3306 -uadmin -p'admin' -dtest -ttbl --start-file='mysql-bin.000052' --start-pos=3346 --end-pos=3556 -B | mysql -h127.0.0.1 -P3306 -uadmin -p'admin'

mysql> select * from tbl;
+----+--------+---------------------+
| id | name  | addtime       |
+----+--------+---------------------+
| 1 | 小趙  | 2016-12-10 00:04:33 |
| 2 | 小錢  | 2016-12-10 00:04:48 |
| 3 | 小孫  | 2016-12-13 20:25:00 |
| 4 | 小李  | 2016-12-12 00:00:00 |
+----+--------+---------------------+

至此,不用再擔(dān)心被炒魷魚了。

常見(jiàn)問(wèn)題

有人會(huì)問(wèn),我DDL誤操作了怎么快速回滾?比如drop了一張大表。

很難做到。因?yàn)榧词乖谠趓ow模式下,DDL操作也不會(huì)把每行數(shù)據(jù)的變化記錄到binlog,所以DDL無(wú)法通過(guò)binlog回滾。實(shí)現(xiàn)DDL回滾,必須要在執(zhí)行DDL前先備份老數(shù)據(jù)。確實(shí)有人通過(guò)修改mysql server源碼實(shí)現(xiàn)了DDL的快速回滾,我找到阿里的xiaobin lin提交了一個(gè)patch。但據(jù)我所知,國(guó)內(nèi)很少有互聯(lián)網(wǎng)公司應(yīng)用了這個(gè)特性。原因的話,我認(rèn)為最主要還是懶的去折騰,沒(méi)必要搞這個(gè)低頻功能,次要原因是會(huì)增加一些額外存儲(chǔ)。

所以,DDL誤操作的話一般只能通過(guò)備份來(lái)恢復(fù)。如果公司連備份也不能用了,那真的建議去買張飛機(jī)票了。干啥?跑唄

mysql除了binlog2sql,是否還有其他回滾工具?

當(dāng)然有。阿里彭立勛對(duì)mysqlbinlog增加了flashback的特性,這應(yīng)該是mysql最早有的flashback功能,彭解決的是DML的回滾,并說(shuō)明了利用binlog進(jìn)行DML閃回的設(shè)計(jì)思路。DDL回滾特性也是由阿里團(tuán)隊(duì)提出并實(shí)現(xiàn)的。這兩個(gè)功能是有創(chuàng)新精神的,此后出現(xiàn)的閃回工具基本都是對(duì)上面兩者的模仿。另外,去哪兒開(kāi)源的Inception是一套MySQL自動(dòng)化運(yùn)維工具,這個(gè)就比較重了,支持DML回滾,還不是從binlog回滾的,是從備份回滾的,也支持DDL回滾表結(jié)構(gòu),數(shù)據(jù)是回滾不了滴~ 還有一種做法叫slave延時(shí)備份,搞臺(tái)不加業(yè)務(wù)流量的slave,故意延遲一段時(shí)間,這其實(shí)是在傳統(tǒng)辦法的基礎(chǔ)上去除了實(shí)例恢復(fù)這步。此法會(huì)額外消耗一臺(tái)機(jī)器,我們不推薦這么做。

如有mysql回滾相關(guān)的優(yōu)秀工具優(yōu)秀文章遺漏,煩請(qǐng)告知。

我的郵箱 danfengcao.info@gmail.com

參考資料

[1] 彭立勛, MySQL下實(shí)現(xiàn)閃回的設(shè)計(jì)思路

[2] Lixun Peng, Provide the flashback feature by binlog

[3] 丁奇, MySQL閃回方案討論及實(shí)現(xiàn)

[4] xiaobin lin, flashback from binlog for MySQL

[5] 王竹峰, 去哪兒inception

[6] danfengcao, binlog2sql: Parse MySQL binlog to SQL you want

您可能感興趣的文章:
  • MySQL數(shù)據(jù)庫(kù)備份與恢復(fù)方法
  • MySQL數(shù)據(jù)庫(kù)恢復(fù)(使用mysqlbinlog命令)
  • 詳解Mysql自動(dòng)備份與恢復(fù)的幾種方法(圖文教程)
  • 如何恢復(fù)Mysql數(shù)據(jù)庫(kù)的詳細(xì)介紹
  • mysql備份與恢復(fù)詳解
  • 詳解MySQL誤操作后怎樣進(jìn)行數(shù)據(jù)恢復(fù)
  • 利用Xtrabackup工具備份及恢復(fù)(MySQL DBA的必備工具)
  • MySQL備份與恢復(fù)之冷備(1)
  • MySQL備份與恢復(fù)之熱備(3)
  • Mysql大型SQL文件快速恢復(fù)方案分享

標(biāo)簽:貴港 張掖 AXB 衡水 雞西 萍鄉(xiāng) 酒泉 阜陽(yáng)

巨人網(wǎng)絡(luò)通訊聲明:本文標(biāo)題《MySQL誤操作后快速恢復(fù)數(shù)據(jù)的方法》,本文關(guān)鍵詞  MySQL,誤,操作,后,快速,恢復(fù),;如發(fā)現(xiàn)本文內(nèi)容存在版權(quán)問(wèn)題,煩請(qǐng)?zhí)峁┫嚓P(guān)信息告之我們,我們將及時(shí)溝通與處理。本站內(nèi)容系統(tǒng)采集于網(wǎng)絡(luò),涉及言論、版權(quán)與本站無(wú)關(guān)。
  • 相關(guān)文章
  • 下面列出與本文章《MySQL誤操作后快速恢復(fù)數(shù)據(jù)的方法》相關(guān)的同類信息!
  • 本頁(yè)收集關(guān)于MySQL誤操作后快速恢復(fù)數(shù)據(jù)的方法的相關(guān)信息資訊供網(wǎng)民參考!
  • 推薦文章