刪庫一定要跑路嗎?教你如何恢復MySQL數據庫
瀏覽量: 次 發布日期:2023-08-17 21:48:41
刪庫一定要跑路嗎?教你如何恢復MySQL數據庫
點擊關注上方“SQL數據庫開發”,
設為“置頂或星標”,第一時間送達干貨SQL專欄SQL基礎知識第二版SQL高級知識第二版
來源:程淇銘
segmentfault.com/a/1190000020116271
日常工作中,總會有因手抖、寫錯條件、寫錯表名、錯連生產庫造成的誤刪庫表和數據的事情發生。那么,如果連數據都恢復不了,還要什么 DBA。
數據恢復的前提的做好備份,且開啟 binlog,格式為 row。如果沒有備份文件,那么刪掉庫表后就真的刪掉了,lsof 中還有記錄的話,有可能恢復一部分文件。但若剛好數據庫沒有打開這個表文件,那就只能跑路了。如果沒有開啟 binlog,那么恢復數據后,從備份時間點開始的數據都沒了。如果 binlog 格式不為 row,那么在誤操作數據后就沒有辦法做閃回操作,只能老老實實地走備份恢復流程。
直接恢復是使用備份文件做全量恢復,這是最常見的場景。
使用 mysqldump 文件恢復數據非常簡單,直接解壓了執行:
恢復過程:
基于時間點的恢復依賴的是 binlog 日志,需要從 binlog 中找過從備份點到恢復點的所有日志,然后應用。我們測試一下。
新建測試表:
每秒插入一條數據:
備份:
找出備份時的日志位置:
假設要恢復到 2019-08-09 11:01:54 這個時間點,我們從 binlog 中查找從 39654 到 019-08-09 11:01:54 的日志。
當前數據條目數:
然后執行恢復:
檢查數據:
已經恢復到 2019-08-09 11:01:54 這個時間點。
假設要恢復的表是 mytest.mytest:
假設 http://mp.weixin.qq.com/backup_xtra_full 目錄為解壓后應用過日志的備份文件。
假設從備份文件中恢復表 mytest.t_myisam。從備份文件中找到 t_myisam.frm, t_myisam.MYD, t_myisam.MYI 這 3 個文件,復制到對應的數據目錄中,并授權 進入 MySQL。檢查表情況:
假設從備份文件中恢復表 mytest.t_innodb,恢復前提是設置了 :起一個新實例;在實例上建一個和原來一模一樣的表;執行 ; 刪除表空間,這個操作會把t_innodb.ibd 刪除;從備份文件中找到 這個文件,復制到對應的數據目錄,并授權;執行 ; 加載表空間;執行 ; 檢查表;使用 導出數據,然后再導入到要恢復的數據庫。
注意:在新實例上恢復再 dump 出來是為了避免風險,如果是測試,可以直接在原庫上操作步驟 2-6;只在 8.0 以前的版本有效。
跳過誤操作 SQL 一般用于執行了無法閃回的操作比如 drop table\database。
使用備份文件恢復的步驟和基于時間點恢復的操作差不多,區別在于多一個查找 binlog 操作。舉個例子,我這里建立了兩個表 a 和 b,每分鐘插入一條數據,然后做全量備份,再刪除表 b,現在要跳過這條 SQL。
刪除表 b 后的數據庫狀態:
1. 找出備份時的日志位置
2. 找出執行了 drop table 語句的 pos 位置
從結果中我們可以看到 drop 所在語句的開始位置是 120629,結束位置是 120747。
3. 從 binglog 中提取跳過這條語句的其他記錄
4. 恢復備份文件
全量恢復后狀態:
5. 恢復增量數據
恢復后狀態,可以看到已經跳過了 drop 語句:
使用 GTID 可以直接跳過錯誤的 SQL:
找出備份時的日志位置;
找出執行了 drop table 語句的 GTID 值;
導出備份時日志位置到最新的 binglog 日志;
恢復備份文件;
跳過這個 GTID;
應用步驟 3 得到的增量 binlog 日志。
使用延遲庫恢復的關鍵操作在于 。我在測試環境搭建了兩個 MySQL 節點,節點二延遲600秒,新建 a,b 兩個表,每秒插入一條數據模擬業務數據插入。
當前節點二狀態:
當前節點二表:
在節點一刪除表 b:
接下來就是跳過這條 SQL 的操作步驟。
1. 延遲庫停止同步
找出執行了 drop table 語句的前一句的 pos 位置
從結果中我們可以看到 drop 所在語句的前一句開始位置是 35134,所以我們同步到 35134(這個可別選錯了)。
3. 延遲庫同步到要跳過的 SQL 前一條
查看狀態看到已經同步到對應節點:
4. 跳過一條 SQL 后開始同步
查看同步狀態,刪除表 b 的語句已經被跳過:
使用 GTID 跳過的步驟會簡單很多,只要執行一條和要跳過的 SQL 的 GTID 相同的事務就可以跳過了。
停止同步;
找出執行了 drop table 語句的 GTID;
執行這個 GTID 的事務;
繼續同步;
閃回。
閃回操作就是反向操作,比如執行了 ,閃回就會執行對應的插入操作 ,用于誤操作數據,只對 DML 語句有效,且要求 binlog 格式設為 ROW。本章介紹兩個比較好用的開源工具。
binlog2sql 是大眾點評開源的一款用于解析 binlog 的工具,可以用于生成閃回語句,項目地址 binlog2sql。
MyFlash 是由美團點評公司技術工程部開發維護的一個回滾 DML 操作的工具,項目鏈接 MyFlash。
限制:binlog 格式必須為 row,且 binlog_row_image=full;僅支持5.6與5.7;只能回滾 DML(增、刪、改)。
生成回滾語句:
執行后會生成 binlog_output_base.flashback 文件,需要用 mysqlbinlog 解析出來再使用:
最后給大家分享我寫的SQL兩件套:《SQL基礎知識第二版》和《SQL高級知識第二版》的PDF電子版。里面有各個語法的解釋、大量的實例講解和批注等等,非常通俗易懂,方便大家跟著一起來實操。有需要的可以下載學習,只需要在下面的公眾號「數據前線」(非本號),后臺回復關鍵字:SQL,就行
數據前線
南京兆柏數據恢復中心