服務(wù)器數(shù)據(jù)恢復(fù)環(huán)境：
1臺(tái)某品牌EVA4400控制器+3臺(tái)EVA4400擴(kuò)展柜+28塊FC硬盤。

服務(wù)器故障：
由于兩塊磁盤掉線導(dǎo)致存儲(chǔ)中某些LUN不可用，某些LUN丟失，導(dǎo)致存儲(chǔ)崩潰。

服務(wù)器數(shù)據(jù)恢復(fù)過(guò)程：
1、由于EVA4400存儲(chǔ)故障是某些磁盤掉線導(dǎo)致的，因此收到故障存儲(chǔ)中的所有磁盤后，硬件工程師先對(duì)所有磁盤做物理故障檢測(cè)，檢測(cè)完成后發(fā)現(xiàn)所有磁盤均不存在明顯物理故障。使用壞道檢測(cè)工具檢測(cè)也沒(méi)有發(fā)現(xiàn)壞道。
磁盤壞道檢測(cè)日志截圖：

將所有磁盤以只讀方式進(jìn)行扇區(qū)級(jí)全盤鏡像，鏡像完成后將所有磁盤還給用戶方。后續(xù)的數(shù)據(jù)分析和數(shù)據(jù)恢復(fù)操作都基于鏡像文件進(jìn)行，避免對(duì)原始磁盤數(shù)據(jù)造成二次破壞。
備份完部分?jǐn)?shù)據(jù)截圖：

由于沒(méi)有檢測(cè)到磁盤存在物理故障或者壞道，可以初步判斷磁盤掉線是由于某些磁盤讀寫不穩(wěn)定導(dǎo)致的。EVA控制器檢查磁盤策略比較嚴(yán)格，EVA控制器通常將性能不穩(wěn)定的磁盤識(shí)別為壞盤并踢出磁盤組。一旦某個(gè)LUN的同一個(gè)條帶中掉線的盤到達(dá)極限，這個(gè)LUN將不可用。如果EVA存儲(chǔ)中所有LUN都包含這些掉線的盤，所有LUN都會(huì)受影響。所以兩塊盤掉線導(dǎo)致整個(gè)EVA存儲(chǔ)的LUN都不可用的情況是有可能發(fā)生的。故障EVA存儲(chǔ)目前的情況就是8個(gè)LUN正常，7個(gè)LUN損壞，6個(gè)LUN丟失。需要恢復(fù)所有LUN的數(shù)據(jù)。
2、基于鏡像文件分析所有硬盤的底層數(shù)據(jù)。EVA存儲(chǔ)中的LUN都是以RAID條目的形式存儲(chǔ)數(shù)據(jù)的，EVA存儲(chǔ)將每個(gè)磁盤的不同塊組成一個(gè)RAID條目。RAID條目的類型有很多種，首先需要分析出組成LUN的RAID條目類型以及這個(gè)RAID條目是由哪些盤的哪些塊組成。這些信息都存放在LUN_MAP中，每個(gè)LUN都有一份LUN_MAP。EVA將LUN_MAP分別存放在不同的磁盤中，使用一個(gè)索引來(lái)指定其位置，因此在每個(gè)磁盤中找這個(gè)指向LUN_MAP的索引就可以找到現(xiàn)存LUN的信息了。
3、雖然磁盤中記錄了指向LUN_MAP的索引，但是它只記錄現(xiàn)存的LUN，丟失的LUN是不會(huì)記錄索引的。EVA存儲(chǔ)中刪除一個(gè)LUN只會(huì)清除這個(gè)LUN的索引，而不會(huì)清除這個(gè)LUN的LUN_MAP。掃描所有磁盤找到所有符合LUN_MAP的數(shù)據(jù)塊，然后排除掉現(xiàn)有的LUN_MAP，剩下的LUN_MAP也不一定全是刪除的，也有一些是以前舊的。只能將所有LUN_MAP的數(shù)據(jù)都恢復(fù)出來(lái)，人工核對(duì)哪些LUN是刪除的。
4、這些由于性能不穩(wěn)定而掉線的磁盤中存放的是一些舊的數(shù)據(jù)，在生成數(shù)據(jù)的時(shí)候需要將這些磁盤都排除掉。如何判斷哪些磁盤是掉線的呢？由于本案例中LUN基本上都是RAID5陣列，只需要將一個(gè)LUN的RAID條目通過(guò)RAID5的校驗(yàn)算法算出校驗(yàn)值，再和原有的校驗(yàn)值做比較就可以判斷這個(gè)條目中是否有掉線盤。將一個(gè)LUN的所有LUN_MAP都校驗(yàn)一遍就可以知道這個(gè)LUN中的哪些RAID條目中有掉線盤。而這些RAID條目中都存在的那個(gè)盤就一定是掉線盤。排除掉線盤，然后根據(jù)LUN_MAP恢復(fù)所有LUN的數(shù)據(jù)。
5、北亞企安數(shù)據(jù)恢復(fù)工程師編寫掃描LUN_MAP的程序掃描全部LUN_MAP，結(jié)合人工分析獲取到準(zhǔn)確的LUN_MAP。編寫檢測(cè)RAID條目的程序檢測(cè)所有LUN中掉線的磁盤，結(jié)合人工分析排除掉線的磁盤。編寫LUN數(shù)據(jù)恢復(fù)程序結(jié)合LUN_MAP恢復(fù)所有LUN數(shù)據(jù)。人工核對(duì)每個(gè)LUN，確認(rèn)是否和用戶方描述的一致。部分LUN的數(shù)據(jù)截圖：

6、根據(jù)用戶方描述，所有LUN的數(shù)據(jù)可以分成兩大部份：Vmware虛擬機(jī)和HP-UX上的裸設(shè)備，裸設(shè)備里存放的是Oracle的dbf數(shù)據(jù)庫(kù)。由于恢復(fù)的是LUN，無(wú)法看到里面的文件，需要人工核對(duì)哪些LUN是存放Vmware的數(shù)據(jù)，哪些是HP-UX的裸設(shè)備。然后將LUN掛載到不同的驗(yàn)證環(huán)境中驗(yàn)證恢復(fù)的數(shù)據(jù)是否完整。
7、Vmware虛擬機(jī)和裸設(shè)備中oracle數(shù)據(jù)庫(kù)的驗(yàn)證這里就不贅述了。
8、將所有恢復(fù)出來(lái)的數(shù)據(jù)移交到用戶方準(zhǔn)備好的環(huán)境中，經(jīng)過(guò)驗(yàn)證，用戶方確認(rèn)恢復(fù)出來(lái)的數(shù)據(jù)完整有效，認(rèn)可數(shù)據(jù)恢復(fù)結(jié)果。本次數(shù)據(jù)恢復(fù)工作完成。

審核編輯 黃宇