服務(wù)器存儲(chǔ)數(shù)據(jù)恢復(fù)環(huán)境：
華為S5300存儲(chǔ)中有12塊FC硬盤(pán)，其中11塊硬盤(pán)作為數(shù)據(jù)盤(pán)組建了一組RAID5陣列，剩下的1塊硬盤(pán)作為熱備盤(pán)使用?；赗AID的LUN分配給linux操作系統(tǒng)使用，存放的數(shù)據(jù)主要是Oracle數(shù)據(jù)庫(kù)。

服務(wù)器存儲(chǔ)故障：
RAID5陣列中1塊硬盤(pán)出現(xiàn)故障離線，熱備盤(pán)自動(dòng)激活開(kāi)始同步數(shù)據(jù)，在同步數(shù)據(jù)的過(guò)程中又一塊硬盤(pán)離線，RAID5陣列癱瘓，上層LUN無(wú)法使用。

服務(wù)器存儲(chǔ)數(shù)據(jù)恢復(fù)過(guò)程：
1、將故障存儲(chǔ)中所有磁盤(pán)做好標(biāo)記后取出。硬件工程師對(duì)所有磁盤(pán)做物理故障檢測(cè)，沒(méi)有發(fā)現(xiàn)有硬盤(pán)存在硬件故障，都可以正常讀取。將所有磁盤(pán)以只讀方式進(jìn)行扇區(qū)級(jí)全盤(pán)鏡像，在鏡像過(guò)程中沒(méi)有發(fā)現(xiàn)有磁盤(pán)存在大量壞道。鏡像完成后將所有磁盤(pán)按照原樣還原到原存儲(chǔ)中，后續(xù)的數(shù)據(jù)分析和數(shù)據(jù)恢復(fù)操作都基于鏡像文件進(jìn)行，避免對(duì)原始磁盤(pán)數(shù)據(jù)造成二次破壞。由于沒(méi)有檢測(cè)到有磁盤(pán)存在物理故障或者大量壞道，基本上可以判斷某些硬盤(pán)離線的原因就是磁盤(pán)讀寫(xiě)不穩(wěn)定。故障存儲(chǔ)raid控制器通常會(huì)將性能不穩(wěn)定的磁盤(pán)識(shí)別為壞盤(pán)，并踢出RAID。一旦RAID中掉線的磁盤(pán)數(shù)據(jù)超過(guò)該RAID級(jí)別所允許掉盤(pán)的最大數(shù)量，該RAID將不可用，基于RAID的LUN也不可用。
2、基于鏡像文件分析所有硬盤(pán)底層數(shù)據(jù)。分析底層RAID相關(guān)信息，根據(jù)分析獲取到的raid信息重組RAID。RAID重建完成后，分析Oracle數(shù)據(jù)庫(kù)頁(yè)在每個(gè)磁盤(pán)中分布的情況。
3、由于RAID中有兩塊盤(pán)掉線且有一塊硬盤(pán)數(shù)據(jù)被同步破壞。分析每一塊硬盤(pán)中的數(shù)據(jù)，發(fā)現(xiàn)有一塊硬盤(pán)在同一個(gè)條帶上的數(shù)據(jù)和其他硬盤(pán)明顯不一樣，初步判斷此硬盤(pán)可能是被同步破壞的硬盤(pán)。通過(guò)北亞企安自主開(kāi)發(fā)的RAID校驗(yàn)程序?qū)@個(gè)條帶做校驗(yàn)，確認(rèn)該盤(pán)就是被同步損壞的盤(pán)。
4、分析LUN在RAID中的分配情況以及LUN分配的數(shù)據(jù)塊MAP。將LUN的數(shù)據(jù)塊MAP提取出來(lái)，北亞企安數(shù)據(jù)恢復(fù)工程師編寫(xiě)相應(yīng)程序解析LUN的數(shù)據(jù)塊MAP，然后根據(jù)數(shù)據(jù)塊MAP導(dǎo)出LUN的數(shù)據(jù)。
5、由于是使用熱備盤(pán)重組RAID，EXT3文件系統(tǒng)無(wú)法正常掛載，所以只能先提取oracle數(shù)據(jù)庫(kù)文件，利用北亞企安自主開(kāi)發(fā)的文件系統(tǒng)解析程序?qū)ζ溥M(jìn)行文件系統(tǒng)解析，導(dǎo)出oracle數(shù)據(jù)庫(kù)文件。
6、使用Oracle數(shù)據(jù)庫(kù)文件檢測(cè)工具檢測(cè)每個(gè)數(shù)據(jù)庫(kù)文件的完整性，經(jīng)過(guò)檢測(cè)發(fā)現(xiàn)有錯(cuò)誤。使用北亞企安自主研發(fā)的Oracle數(shù)據(jù)庫(kù)檢測(cè)工具檢測(cè)。經(jīng)過(guò)檢測(cè)發(fā)現(xiàn)部分?jǐn)?shù)據(jù)庫(kù)文件和日志文件錯(cuò)誤：system和sysaux表空間存在上百個(gè)壞塊，3個(gè)控制文件存在大量壞塊，eschoolspace表空間的3個(gè)文件中的壞塊多達(dá)上千個(gè)，undotbs02.dbf丟失。北亞企安數(shù)據(jù)庫(kù)工程師對(duì)這些損壞的文件進(jìn)行修復(fù)。

北亞企安數(shù)據(jù)恢復(fù)—RAID5數(shù)據(jù)恢復(fù) 北亞企安數(shù)據(jù)恢復(fù)—RAID5數(shù)據(jù)恢復(fù)

7、創(chuàng)建控制文件和undo表空間，啟動(dòng)數(shù)據(jù)庫(kù)到mount。system數(shù)據(jù)文件壞塊導(dǎo)致數(shù)據(jù)庫(kù)無(wú)法打開(kāi)，各種隱含參數(shù)也不能繞過(guò)system的壞塊。搭建數(shù)據(jù)庫(kù)環(huán)境，使用dmp文件還原數(shù)據(jù)庫(kù)，但是某個(gè)日期之后的數(shù)據(jù)導(dǎo)入報(bào)錯(cuò)，只能導(dǎo)入這個(gè)日期之前的數(shù)據(jù)。

北亞企安數(shù)據(jù)恢復(fù)—RAID5數(shù)據(jù)恢復(fù)

由于故障發(fā)生后又對(duì)RAID進(jìn)行了重建，導(dǎo)致一塊盤(pán)的數(shù)據(jù)被同步破壞。在第二塊盤(pán)離線之前，熱備盤(pán)已經(jīng)同步了一段時(shí)間，已經(jīng)寫(xiě)入了部分?jǐn)?shù)據(jù)，所以使用熱備盤(pán)中的數(shù)據(jù)只能恢復(fù)某個(gè)日期之前的數(shù)據(jù)。
8、在用戶方的配合下啟動(dòng)Oracle數(shù)據(jù)庫(kù)。在本地虛擬機(jī)安裝OA客戶端，通過(guò)OA客戶端對(duì)數(shù)據(jù)記錄進(jìn)行驗(yàn)證，并且安排不同部門(mén)人員進(jìn)行遠(yuǎn)程驗(yàn)證。
9、經(jīng)過(guò)用戶方驗(yàn)證，確認(rèn)恢復(fù)出來(lái)的數(shù)據(jù)有效，認(rèn)可數(shù)據(jù)恢復(fù)結(jié)果。沒(méi)有恢復(fù)出來(lái)的數(shù)據(jù)量比較少，可以通過(guò)其他方式人工補(bǔ)回來(lái)。

審核編輯 黃宇