「北亞服務(wù)器數(shù)據(jù)恢復(fù)」存儲Raid5硬盤損壞熱備盤未激活數(shù)據(jù)恢復(fù)

北亞數(shù)據(jù)恢復(fù)——raid數(shù)據(jù)恢復(fù)

服務(wù)器數(shù)據(jù)恢復(fù)環(huán)境：

EMC存儲；

stat硬盤組成raid5，兩塊熱備盤。

故障：

2塊硬盤出現(xiàn)故障，只有一塊熱備盤被激活，raid崩潰。服務(wù)器管理員聯(lián)系北亞數(shù)據(jù)恢復(fù)中心進(jìn)行數(shù)據(jù)恢復(fù)。

服務(wù)器故障檢測：

北亞數(shù)據(jù)恢復(fù)工程師前往現(xiàn)場對服務(wù)器設(shè)備進(jìn)行了簡單排查，確認(rèn)raid5癱瘓，上層lun無法正常使用，2塊熱備盤中的1塊已經(jīng)啟動。數(shù)據(jù)恢復(fù)工程師對掉線硬盤進(jìn)行物理故障排查，兩塊硬盤均無物理故障。

服務(wù)器數(shù)據(jù)恢復(fù)過程：

1、raid5數(shù)據(jù)備份。

數(shù)據(jù)恢復(fù)工程師將服務(wù)器上的所有數(shù)據(jù)進(jìn)行鏡像備份，將所有硬盤連接到數(shù)據(jù)恢復(fù)中心的數(shù)據(jù)恢復(fù)專用存儲池中，對所有硬盤進(jìn)行了扇區(qū)級鏡像備份。

2、分析該服務(wù)器raid組結(jié)構(gòu)。

服務(wù)器數(shù)據(jù)恢復(fù)通常都是基于復(fù)原raid陣列來進(jìn)行數(shù)據(jù)恢復(fù)的。數(shù)據(jù)恢復(fù)工程師對raid陣列基礎(chǔ)信息進(jìn)行分析，基于獲取到的raid信息重組raid陣列。

經(jīng)過數(shù)據(jù)恢復(fù)工程師對每塊硬盤的分析發(fā)現(xiàn)：原服務(wù)器內(nèi)的兩塊熱備盤內(nèi)全部沒有數(shù)據(jù)，也就是說即使被激活的熱備盤也同樣沒有同步到任何數(shù)據(jù)，兩塊熱備盤沒有起到任何作用。數(shù)據(jù)恢復(fù)工程師只能通過原raid5中的其他硬盤的數(shù)據(jù)來重組raid5。

3、分析RAID組掉線盤信息。

基于第2步中的數(shù)據(jù)恢復(fù)思路，北亞服務(wù)器數(shù)據(jù)恢復(fù)工程師使用自主研發(fā)的數(shù)據(jù)恢復(fù)工具解析出這組raid5的基礎(chǔ)信息，并虛擬重組出了raid5磁盤陣列。在正常服務(wù)器數(shù)據(jù)恢復(fù)流程下，數(shù)據(jù)恢復(fù)工程師會將有多塊硬盤掉線的陣列中最早掉線的硬盤從陣列中剔除，比對每塊硬盤在同一個(gè)條帶上的數(shù)據(jù)是否一致，將明顯不同的硬盤剔除后進(jìn)行條帶校驗(yàn)，直至找到數(shù)據(jù)恢復(fù)的最佳狀態(tài)為止。

4、分析RAID組中的LUN信息。

成功重組出raid5陣列后，北亞數(shù)據(jù)恢復(fù)工程師開始對lun信息進(jìn)行分析，然后使用北亞開發(fā)的raid數(shù)據(jù)恢復(fù)程序?qū)un數(shù)據(jù)的map進(jìn)行解析和導(dǎo)出。

5、ZFS文件系統(tǒng)解析并修復(fù)。

使用北亞研發(fā)數(shù)據(jù)恢復(fù)工具對上層的文件系統(tǒng)進(jìn)行解析和恢復(fù)。本案例故障服務(wù)器上層采用zfs文件系統(tǒng)，對文件系統(tǒng)解析時(shí)發(fā)現(xiàn)部分文件系統(tǒng)元文件報(bào)錯，于是北亞工程師對現(xiàn)有的數(shù)據(jù)恢復(fù)工具進(jìn)行debug調(diào)試讓程序適應(yīng)本次數(shù)據(jù)恢復(fù)的實(shí)際情況。

經(jīng)過調(diào)試發(fā)現(xiàn)zfs文件系統(tǒng)解析報(bào)錯的原因是：故障服務(wù)器突然癱瘓導(dǎo)致文件系統(tǒng)中某些元文件被損壞。北亞數(shù)據(jù)恢復(fù)工程師針對損壞的元文件進(jìn)行了人工修復(fù)，修復(fù)完成后zfs文件系統(tǒng)可以被正常解析。

北亞數(shù)據(jù)恢復(fù)——raid數(shù)據(jù)恢復(fù)

6、導(dǎo)出raid5陣列內(nèi)所有數(shù)據(jù)。

ZFS文件系統(tǒng)解析完成后，北亞數(shù)據(jù)恢復(fù)工程師最終將raid陣列內(nèi)的數(shù)據(jù)完整導(dǎo)出。由服務(wù)器管理員配合搭建數(shù)據(jù)驗(yàn)證環(huán)境，對恢復(fù)出來的所有數(shù)據(jù)進(jìn)行驗(yàn)證。經(jīng)過驗(yàn)證，原服務(wù)器內(nèi)的所有數(shù)據(jù)均恢復(fù)正常。