服務(wù)器存儲(chǔ)數(shù)據(jù)恢復(fù)環(huán)境：
某品牌MSA2000服務(wù)器存儲(chǔ)中有一組由8塊SAS硬盤(pán)組建的raid5磁盤(pán)陣列，其中包含一塊熱備盤(pán)。分配了6個(gè)LUN，均分配給HP-Unix小機(jī)使用。磁盤(pán)分區(qū)由LVM進(jìn)行管理，存放的數(shù)據(jù)主要為Oracle數(shù)據(jù)庫(kù)及OA服務(wù)端。

服務(wù)器存儲(chǔ)故障：
服務(wù)器存儲(chǔ)raid5陣列中有兩塊硬盤(pán)先后離線(xiàn)，服務(wù)器癱瘓，無(wú)法正常訪(fǎng)問(wèn)lun。

服務(wù)器存儲(chǔ)數(shù)據(jù)恢復(fù)過(guò)程：
1、將所有磁盤(pán)編號(hào)標(biāo)記后取出故障服務(wù)器存儲(chǔ)，硬件工程師分別對(duì)服務(wù)器中所有磁盤(pán)進(jìn)行物理故障檢測(cè)和壞道檢測(cè)，均無(wú)異常。
將所有磁盤(pán)以只讀方式鏡像成文件，鏡像完成后將所有磁盤(pán)按照編號(hào)還原到故障存儲(chǔ)中。后續(xù)的數(shù)據(jù)分析和數(shù)據(jù)恢復(fù)操作都基于鏡像文件進(jìn)行，避免對(duì)原始磁盤(pán)數(shù)據(jù)造成二次破壞。
備份完成的部分?jǐn)?shù)據(jù)：

北亞企安數(shù)據(jù)恢復(fù)——raid5數(shù)據(jù)恢復(fù)

2、MSA2000存儲(chǔ)中一旦某些磁盤(pán)讀寫(xiě)性能不穩(wěn)定，該存儲(chǔ)中的raid控制器會(huì)將這些磁盤(pán)識(shí)別為壞盤(pán)并踢出RAID。一旦RAID中掉線(xiàn)的盤(pán)數(shù)到達(dá)到采用的RAID級(jí)別所允許掉盤(pán)的極限，RAID不可用，服務(wù)器癱瘓。
3、存儲(chǔ)中的LUN都是基于RAID的，要想恢復(fù)數(shù)據(jù)就需要先將原始RAID重組出來(lái)。分析Oracle數(shù)據(jù)庫(kù)頁(yè)在每個(gè)磁盤(pán)中分布的情況，并根據(jù)數(shù)據(jù)分布的情況獲取RAID條帶大小，盤(pán)序、數(shù)據(jù)走向等重組RAID所需要的信息。
4、根據(jù)分析出來(lái)的RAID信息重組原始RAID。重組完成后分析LUN在RAID中的分配情況，以及LUN分配的數(shù)據(jù)塊MAP。由于有6個(gè)LUN，因此只需要將每一個(gè)LUN的數(shù)據(jù)塊分布MAP提取出來(lái)。北亞企安數(shù)據(jù)恢復(fù)工程師根據(jù)這些信息編寫(xiě)相應(yīng)的程序，解析所有LUN的數(shù)據(jù)MAP，然后根據(jù)數(shù)據(jù)MAP導(dǎo)出所有LUN的數(shù)據(jù)。
導(dǎo)出的部分?jǐn)?shù)據(jù)：

北亞企安數(shù)據(jù)恢復(fù)——raid5數(shù)據(jù)恢復(fù)

5、分析所有LUN，發(fā)現(xiàn)所有LUN中均包含LVM邏輯卷信息。嘗試解析每個(gè)LUN中的LVM信息，發(fā)現(xiàn)其中一共有三套LVM：第一個(gè)LVM中劃分了一個(gè)LV，存放OA服務(wù)器端的數(shù)據(jù)；第二個(gè)LVM中劃分了一個(gè)LV，存放臨時(shí)備份數(shù)據(jù)；剩下的4個(gè)LUN組成一個(gè)LVM，劃分了一個(gè)LV，存放Oracle數(shù)據(jù)庫(kù)文件。北亞企安數(shù)據(jù)恢復(fù)工程師編寫(xiě)LVM解釋程序，嘗試解釋每套LVM中的LV卷，但是在解釋過(guò)程中出錯(cuò)。
6、開(kāi)發(fā)工程師debug程序出錯(cuò)的位置，分析程序報(bào)錯(cuò)原因，由文件系統(tǒng)工程師對(duì)恢復(fù)出來(lái)的LUN做檢測(cè)，檢測(cè)LVM信息是否會(huì)因?yàn)榇鎯?chǔ)癱瘓而導(dǎo)致LMV邏輯卷的信息損壞。經(jīng)過(guò)檢測(cè)發(fā)現(xiàn)LVM信息確實(shí)被破壞。北亞企安數(shù)據(jù)恢復(fù)工程師嘗試人工修復(fù)損壞的區(qū)域，并同步修改程序重新解析LVM邏輯卷。
7、搭建HP-Unix環(huán)境，將解釋出來(lái)的LV卷映射到HP-Unix。嘗試Mount文件系統(tǒng)，結(jié)果Mount文件系統(tǒng)出錯(cuò)。嘗試使用“fsck –F vxfs” 命令修復(fù)vxfs文件系統(tǒng)，修復(fù)完成還是不能掛載。懷疑vxfs文件系統(tǒng)元數(shù)據(jù)被破壞。
8、仔細(xì)分析解析出來(lái)的LV，根據(jù)VXFS文件系統(tǒng)的底層結(jié)構(gòu)校驗(yàn)此文件系統(tǒng)的完整性。分析發(fā)現(xiàn)VXFS文件系統(tǒng)確實(shí)存在問(wèn)題，存儲(chǔ)癱瘓的同時(shí)此文件系統(tǒng)正在執(zhí)行IO操作，因此部分文件系統(tǒng)元文件損壞。人工修復(fù)這些損壞的元文件，直到能夠正常解析VXFS文件系統(tǒng)。再次將修復(fù)好的LV卷掛載到HP-Unix小機(jī)上，嘗試Mount文件系統(tǒng)，這回文件系統(tǒng)沒(méi)有報(bào)錯(cuò)，成功掛載。
9、在HP-Unix機(jī)器上mount文件系統(tǒng)后，將所有用戶(hù)數(shù)據(jù)備份至指定空間。
部分文件目錄：

北亞企安數(shù)據(jù)恢復(fù)——raid5數(shù)據(jù)恢復(fù)

10、使用Oracle數(shù)據(jù)庫(kù)文件檢測(cè)工具“dbv”檢測(cè)每個(gè)數(shù)據(jù)庫(kù)文件是否完整，沒(méi)有發(fā)現(xiàn)錯(cuò)誤。使用北亞企安自主研發(fā)的Oracle數(shù)據(jù)庫(kù)檢測(cè)工具進(jìn)行檢測(cè)，發(fā)現(xiàn)有部分?jǐn)?shù)據(jù)庫(kù)文件和日志文件校驗(yàn)不一致。由數(shù)據(jù)庫(kù)工程師修復(fù)此類(lèi)文件并校驗(yàn)，直到所有文件均通過(guò)校驗(yàn)。
11、將恢復(fù)出來(lái)的Oracle數(shù)據(jù)庫(kù)附加到原始生產(chǎn)環(huán)境的HP-Unix服務(wù)器中，嘗試啟動(dòng)Oracle數(shù)據(jù)庫(kù)，Oracle數(shù)據(jù)庫(kù)啟動(dòng)成功。

北亞企安數(shù)據(jù)恢復(fù)——raid5數(shù)據(jù)恢復(fù)

12、啟動(dòng)Oracle數(shù)據(jù)庫(kù)和OA服務(wù)端，通過(guò)OA客戶(hù)端對(duì)最新的數(shù)據(jù)記錄以及歷史數(shù)據(jù)記錄進(jìn)行驗(yàn)證，并且安排不同部門(mén)人員進(jìn)行遠(yuǎn)程驗(yàn)證。經(jīng)過(guò)仔細(xì)驗(yàn)證，確認(rèn)數(shù)據(jù)完整有效。本次數(shù)據(jù)恢復(fù)工作完成。

審核編輯 黃宇