《Mysql實例MySQL誤操作后快速恢復數據的方法》要點:
本文介紹了Mysql實例MySQL誤操作后快速恢復數據的方法,希望對您有用。如果有疑問,可以聯系我們。
MYSQL學習摘要: 利用binlog閃回誤操作數據.
基本上每個跟數據庫打交道的程序員(當然也可能是你同事)都會碰一個問題,MySQL誤操作后如何快速回滾?好比,delete一張表,忘加限制條件,整張表沒了.假如這還是線上環境核心業務數據,那這事就鬧大了.誤操作后,能快速回滾數據是非常重要的.
MYSQL進修傳統解法
MYSQL學習用全量備份重搭實例,再利用增量binlog備份,恢復到誤操作之前的狀態.然后跳過誤操作的SQL,再繼續應用binlog.此法費時費力,不值得再保舉.
MYSQL學習應用binlog2sql快速閃回
MYSQL學習起首,確認你的MySQL server開啟了binlog,設置了以下參數:
MYSQL學習
[mysqld]
server-id = 1
log_bin = /var/log/mysql/mysql-bin.log
max_binlog_size = 100M
binlog-format = row
MYSQL學習如果沒有開啟binlog,也沒有預先生成回滾SQL,那真的無法快速回滾了.對寄存重要業務數據的MySQL,強烈建議開啟binlog.
MYSQL學習隨后,安裝開源工具binlog2sql.binlog2sql是一款簡單易用的binlog解析工具,其中一個功能便是生成回滾SQL.
MYSQL學習
shell> git clone https://github.com/danfengcao/binlog2sql.git
shell> pip install -r requirements.txt
MYSQL學習然后,我們就可以天生回滾SQL了.
MYSQL學習配景:小明在20點多時誤刪了test庫tbl表整張表的數據,需要緊急回滾.
MYSQL學習
test庫tbl表原有數據
mysql> select * from tbl;
+----+--------+---------------------+
| id | name | addtime |
+----+--------+---------------------+
| 1 | 小趙 | 2016-12-10 00:04:33 |
| 2 | 小錢 | 2016-12-10 00:04:48 |
| 3 | 小孫 | 2016-12-13 20:25:00 |
| 4 | 小李 | 2016-12-12 00:00:00 |
+----+--------+---------------------+
4 rows in set (0.00 sec)
mysql> delete from tbl;
Query OK, 4 rows affected (0.00 sec)
20:28時,tbl表誤操作被清空
mysql> select * from tbl;
Empty set (0.00 sec)
MYSQL學習恢復數據步調:
MYSQL學習1、登錄mysql,查看今朝的binlog文件
MYSQL學習
mysql> show master status;
+------------------+-----------+
| Log_name | File_size |
+------------------+-----------+
| mysql-bin.000051 | 967 |
| mysql-bin.000052 | 965 |
+------------------+-----------+
MYSQL學習2、最新的binlog文件是mysql-bin.000052,我們再定位誤操作SQL的binlog位置.誤操作人只能知道年夜致的誤操作時間,我們根據年夜致時間過濾數據.
MYSQL學習
shell> python binlog2sql/binlog2sql.py -h127.0.0.1 -P3306 -uadmin -p'admin' -dtest -ttbl --start-file='mysql-bin.000052' --start-datetime='2016-12-13 20:25:00' --stop-datetime='2016-12-13 20:30:00'
輸出:
INSERT INTO `test`.`tbl`(`addtime`, `id`, `name`) VALUES ('2016-12-13 20:25:00', 3, '小孫'); #start 4 end 290 time 2016-12-13 20:25:46
INSERT INTO `test`.`tbl`(`addtime`, `id`, `name`) VALUES ('2016-12-13 20:26:00', 4, '小李'); #start 317 end 487 time 2016-12-13 20:26:26
UPDATE `test`.`tbl` SET `addtime`='2016-12-12 00:00:00', `id`=4, `name`='小李' WHERE `addtime`='2016-12-13 20:26:00' AND `id`=4 AND `name`='小李' LIMIT 1; #start 514 end 701 time 2016-12-13 20:27:07
DELETE FROM `test`.`tbl` WHERE `addtime`='2016-12-10 00:04:33' AND `id`=1 AND `name`='小趙' LIMIT 1; #start 728 end 938 time 2016-12-13 20:28:05
DELETE FROM `test`.`tbl` WHERE `addtime`='2016-12-10 00:04:48' AND `id`=2 AND `name`='小錢' LIMIT 1; #start 728 end 938 time 2016-12-13 20:28:05
DELETE FROM `test`.`tbl` WHERE `addtime`='2016-12-13 20:25:00' AND `id`=3 AND `name`='小孫' LIMIT 1; #start 728 end 938 time 2016-12-13 20:28:05
DELETE FROM `test`.`tbl` WHERE `addtime`='2016-12-12 00:00:00' AND `id`=4 AND `name`='小李' LIMIT 1; #start 728 end 938 time 2016-12-13 20:28:05
MYSQL學習3、我們獲得了誤操作sql的準確位置在728-938之間,再根據位置進一步過濾,使用flashback模式生成回滾sql,檢查回滾sql是否正確
MYSQL學習
shell> python binlog2sql/binlog2sql.py -h127.0.0.1 -P3306 -uadmin -p'admin' -dtest -ttbl --start-file='mysql-bin.000052' --start-pos=3346 --end-pos=3556 -B
輸出:
INSERT INTO `test`.`tbl`(`addtime`, `id`, `name`) VALUES ('2016-12-12 00:00:00', 4, '小李'); #start 728 end 938 time 2016-12-13 20:28:05
INSERT INTO `test`.`tbl`(`addtime`, `id`, `name`) VALUES ('2016-12-13 20:25:00', 3, '小孫'); #start 728 end 938 time 2016-12-13 20:28:05
INSERT INTO `test`.`tbl`(`addtime`, `id`, `name`) VALUES ('2016-12-10 00:04:48', 2, '小錢'); #start 728 end 938 time 2016-12-13 20:28:05
INSERT INTO `test`.`tbl`(`addtime`, `id`, `name`) VALUES ('2016-12-10 00:04:33', 1, '小趙'); #start 728 end 938 time 2016-12-13 20:28:05
MYSQL學習確認回滾sql正確,執行回滾語句.登錄mysql確認,數據回滾勝利.
MYSQL學習
shell> python binlog2sql.py -h127.0.0.1 -P3306 -uadmin -p'admin' -dtest -ttbl --start-file='mysql-bin.000052' --start-pos=3346 --end-pos=3556 -B | mysql -h127.0.0.1 -P3306 -uadmin -p'admin'
mysql> select * from tbl;
+----+--------+---------------------+
| id | name | addtime |
+----+--------+---------------------+
| 1 | 小趙 | 2016-12-10 00:04:33 |
| 2 | 小錢 | 2016-12-10 00:04:48 |
| 3 | 小孫 | 2016-12-13 20:25:00 |
| 4 | 小李 | 2016-12-12 00:00:00 |
+----+--------+---------------------+
MYSQL學習至此,不消再擔心被炒魷魚了.
MYSQL進修常見問題
MYSQL學習有人會問,我DDL誤操作了怎么快速回滾?好比drop了一張大表.
MYSQL學習很難做到.因為即使在在row模式下,DDL操作也不會把每行數據的變化記錄到binlog,所以DDL無法通過binlog回滾.實現DDL回滾,必需要在執行DDL前先備份老數據.確實有人通過修改mysql server源碼實現了DDL的快速回滾,我找到阿里的xiaobin lin提交了一個patch.但據我所知,國內很少有互聯網公司應用了這個特性.原因的話,我認為最主要還是懶的去折騰,沒必要搞這個低頻功能,次要原因是會增加一些額外存儲.
MYSQL學習所以,DDL誤操作的話一般只能通過備份來恢復.如果公司連備份也不克不及用了,那真的建議去買張飛機票了.干啥?跑唄
MYSQL學習mysql除了binlog2sql,是否還有其他回滾對象?
MYSQL學習當然有.阿里彭立勛對mysqlbinlog增加了flashback的特性,這應該是mysql最早有的flashback功能,彭解決的是DML的回滾,并說明了利用binlog進行DML閃回的設計思路.DDL回滾特性也是由阿里團隊提出并實現的.這兩個功能是有創新精神的,此后出現的閃回工具基本都是對上面兩者的模仿.另外,去哪兒開源的Inception是一套MySQL自動化運維工具,這個就比較重了,支持DML回滾,還不是從binlog回滾的,是從備份回滾的,也支持DDL回滾表結構,數據是回滾不了滴~ 還有一種做法叫slave延時備份,搞臺不加業務流量的slave,故意延遲一段時間,這其實是在傳統方法的基礎上去除了實例恢復這步.此法會額外消耗一臺機器,我們不推薦這么做.
MYSQL學習如有mysql回滾相關的優秀對象優秀文章遺漏,煩請告知.
MYSQL進修我的郵箱 danfengcao.info@gmail.com
MYSQL學習[1] 彭立勛, MySQL下實現閃回的設計思路
MYSQL進修[2] Lixun Peng, Provide the flashback feature by binlog
MYSQL學習[3] 丁奇, MySQL閃回計劃討論及實現
MYSQL進修[4] xiaobin lin, flashback from binlog for MySQL
MYSQL進修[5] 王竹峰, 去哪兒inception
MYSQL進修[6] danfengcao, binlog2sql: Parse MySQL binlog to SQL you want
維易PHP培訓學院每天發布《Mysql實例MySQL誤操作后快速恢復數據的方法》等實戰技能,PHP、MYSQL、LINUX、APP、JS,CSS全面培養人才。