一種災(zāi)難發(fā)生的可能是cascading failure。假設(shè)運(yùn)維團(tuán)隊(duì)在發(fā)布版本時(shí)，發(fā)布了錯(cuò)誤的配置文件，盡管這種分發(fā)是在可控狀況下進(jìn)行的，但因?yàn)橄到y(tǒng)在低發(fā)布率時(shí)崩潰有自愈能力，在更高百分比的發(fā)布時(shí)，由于可用系統(tǒng)的負(fù)載更大，導(dǎo)致可用系統(tǒng)退出服務(wù)，最終導(dǎo)致所有可用服務(wù)均退出服務(wù)，服務(wù)宣告徹底不可用?？紤]到此公司業(yè)務(wù)的復(fù)雜性，并觀察到其技術(shù)棧是大部分基于西雅圖郊區(qū)某公司的技術(shù)構(gòu)建的，幾乎可以肯定的是，部分中間件的支持實(shí)際上是依賴外部技術(shù)支持的。若是中間件或是第三方vendor提供的組件導(dǎo)致錯(cuò)誤，很可能本地團(tuán)隊(duì)無(wú)法做到及時(shí)響應(yīng)。事件發(fā)生時(shí)大約是太平洋時(shí)間下午9點(diǎn)，此時(shí)的技術(shù)支持很大可能是在印度或是澳大利亞進(jìn)行的。作者的行業(yè)從業(yè)經(jīng)驗(yàn)表明，印度技術(shù)支持在很大程度上是無(wú)法很快解決技術(shù)問(wèn)題的。若是本地團(tuán)隊(duì)沒(méi)有對(duì)應(yīng)對(duì)災(zāi)難做出playbook，則很有可能在生產(chǎn)環(huán)境故障時(shí)束手無(wú)措。

應(yīng)對(duì)措施

不管是攻擊或是內(nèi)部故障，有好的備份以及冗余措施，均可以使宕機(jī)時(shí)間縮短到 。備份問(wèn)題盡管聽(tīng)起來(lái)不可思議，但在實(shí)踐中，不少企業(yè)并未建立起一套檢驗(yàn)過(guò)的備份系統(tǒng)。備份的意義在于危急時(shí)刻可以快速恢復(fù)或重建生產(chǎn)系統(tǒng)。在企業(yè)網(wǎng)絡(luò)中，經(jīng)常出現(xiàn)的問(wèn)題實(shí)際上是：1、備份步驟的瑕疵導(dǎo)致并未完成正確的備份過(guò)程2、由于有限的存儲(chǔ)空間導(dǎo)致一定時(shí)間后因存儲(chǔ)空間耗盡導(dǎo)致的隨后備份失敗3、備份介質(zhì)受損導(dǎo)致無(wú)法成功恢復(fù)傳統(tǒng)上，磁帶因其低造價(jià)以及高存儲(chǔ)密度使其成為了理想的備份介質(zhì)。然而，這種傳統(tǒng)備份介質(zhì)的幾個(gè)致命缺點(diǎn)經(jīng)常使其內(nèi)含的數(shù)據(jù)變得不可存?。?、丟失的磁帶索引卡片2、磁帶介質(zhì)在存儲(chǔ)過(guò)程中受到外界磁場(chǎng)影響3、介質(zhì)本身?yè)p壞4、介質(zhì)讀取過(guò)程中被讀取設(shè)備損壞 此外，磁帶備份介質(zhì)本身一般存儲(chǔ)于磁帶倉(cāng)庫(kù)中，從倉(cāng)庫(kù)檢索出所需的備份磁帶、轉(zhuǎn)移至數(shù)據(jù)中心并重新加載數(shù)據(jù)的時(shí)間消耗通常也是客觀的。即使有一套完善的備份系統(tǒng)，備份系統(tǒng)仍然是不能抵擋所有的意外事故的。2014年，Samsung數(shù)據(jù)中心的一場(chǎng)大火使其云服務(wù)暫停服務(wù)。如果沒(méi)有異地備份，這場(chǎng)大火將使其本地備份的恢復(fù)變得極為困難。 冗余對(duì)于突發(fā) 件來(lái)說(shuō)，盡快恢復(fù)，或者是持續(xù)的提供服務(wù)是非常重要的。本月，某知名支付公司因數(shù)據(jù)中心網(wǎng)絡(luò)連接性故障導(dǎo)致了一段時(shí)間的服務(wù)中斷。如果有更好的冗余方案，此種事故的影響面將會(huì)得以降低，甚至?xí)鉃橛脩舨豢筛兄膬?nèi)部事故。 冗余是非常常見(jiàn)的做法。例如，大部分服務(wù)器都有兩部獨(dú)立的PSU，任意一部PSU失效均不會(huì)影響其正常服務(wù)；一般來(lái)說(shuō)，服務(wù)器的兩部PSU將連接到兩路不同的電路或不間斷電源上以避免市電失效；數(shù)據(jù)中心的電源一般同時(shí)配備UPS以及柴油發(fā)電機(jī)以避免發(fā)電公司未通知的停止供電服務(wù)導(dǎo)致的服務(wù)中斷。網(wǎng)絡(luò)亦然；同時(shí)接入多路ISP線路，并對(duì)其進(jìn)行獨(dú)立布線，同時(shí)在多路線路上宣告地址，便可使網(wǎng)絡(luò)服務(wù)的魯棒性更高。 在系統(tǒng)的視角上，只有同時(shí)配置備份以及冗余方案，才可以 大限度的提高可用性，避免非可控因素導(dǎo)致的長(zhǎng)時(shí)間服務(wù)中斷。

前幾天很不小心把硬盤(pán)摔了，結(jié)果開(kāi)機(jī)后發(fā)現(xiàn)電腦完全認(rèn)不出盤(pán)了，即使在PE環(huán)境下也不能發(fā)現(xiàn)硬盤(pán)……本來(lái)以為已經(jīng)徹底沒(méi)救了（幸好本人平時(shí)出門(mén)都把移動(dòng)硬盤(pán)中的硬盤(pán)換到筆記本中，數(shù)據(jù)沒(méi)有損失太多），昨天公司的大神給了我一個(gè)法子，把硬盤(pán)拆下來(lái)拔插幾次，竟然認(rèn)出來(lái)了，不過(guò)分區(qū)表錯(cuò)誤，還是要重新分區(qū) 的。

      重新分區(qū)不是難事，用diskgenius軟件幾下搞定，然后給裝了個(gè)ubuntu，結(jié)果讓人震驚的是進(jìn)入系統(tǒng)的速度卡的要命，加載也十分緩慢，應(yīng)用程序的相應(yīng)也幾乎是卡死狀態(tài)（這就是硬盤(pán)有壞道后的最明顯癥狀）。不用說(shuō)，硬盤(pán)碰撞的時(shí)候出現(xiàn)壞道了。

   再次進(jìn)入PE，使用diskgenius進(jìn)行壞道掃描，發(fā)現(xiàn)壞道大概有10個(gè)，不算多，但是分布讓人很揪心，在60GB左右有一個(gè)，80GB左右兩 個(gè)，95GB處一個(gè)，125GB處一個(gè)，150GB處一個(gè)，220GB處兩個(gè)，230GB處一個(gè)。這樣要屏蔽壞道就會(huì)損失大半的空間，不過(guò)損失歸損失，總比不能用要強(qiáng)，于是就準(zhǔn)備屏蔽壞道了。

Diskgen硬盤(pán)分區(qū)工具    下面是數(shù)學(xué)問(wèn)題，怎么在盡可能安全的情況下 化的利用硬盤(pán)空間，由于壞道具有蔓延性，所以壞道附近硬盤(pán)容量1%的區(qū)間內(nèi)是危險(xiǎn)區(qū)，這么仔細(xì)算下來(lái)大概也就可以分5個(gè)區(qū)，但是其中一個(gè)只有10GB多點(diǎn)的分區(qū)是不是有點(diǎn)……

   由于打算在這個(gè)硬盤(pán)上裝ubuntu，不許要太大的空間，所以果斷分了4個(gè)區(qū)。一個(gè)50GB的/分區(qū)，一個(gè)58GB的/home分區(qū)，一個(gè)10GB的swap分區(qū)，還有一個(gè)40GB的EXT4格式分區(qū)未掛載（以后放不常用文件用）。

   決定之后操作diskgenus分區(qū)就OK了，然后進(jìn)入ubuntu的安裝環(huán)境，開(kāi)始安裝，安裝速度比上次快多了，裝好后進(jìn)入系統(tǒng)一切正常，這才是 ubuntu的閃電啟動(dòng)……呵呵，感謝大神的提醒，不然估計(jì)這個(gè)硬盤(pán)現(xiàn)在已經(jīng)在垃圾堆里了，當(dāng)然以上方法適合摔的不嚴(yán)重的硬盤(pán)，但不管怎么樣，死馬當(dāng)活馬醫(yī)，總要試試吧。

簡(jiǎn)單說(shuō)明一下硬盤(pán)的數(shù)據(jù)存儲(chǔ)原理和恢復(fù)數(shù)據(jù)需要具備的必要條件.

      當(dāng)操作系統(tǒng)要在硬盤(pán)上寫(xiě)入文件時(shí)，首先在DIR區(qū)中寫(xiě)入文件信息（包括文件名、后綴名、文件大小和修改日期），然后在DATA區(qū)找到閑置空間將文件保存，并將DATA區(qū)中存放文件的簇號(hào)寫(xiě)入DIR區(qū)，從而完成整個(gè)寫(xiě)入數(shù)據(jù)的工作。系統(tǒng)刪除文件時(shí)的操作則簡(jiǎn)單許多，它只需將該文件在DIR區(qū)中的第個(gè)字符改成E5，在文件分配表中把該文件占用的各簇表項(xiàng)清0，就表示將該文件刪除，而它實(shí)際上并不對(duì)DATA區(qū)進(jìn)行任何改寫(xiě)。通常的高級(jí)格式化程序，只是重寫(xiě)了FAT表而已，并未將DATA區(qū)的數(shù)據(jù)清除；而對(duì)硬盤(pán)進(jìn)行分區(qū)時(shí)，也只是修改了MBR和OBR， 并沒(méi)有改寫(xiě)DATA區(qū)中的數(shù)據(jù)。正因?yàn)镈ATA區(qū)中的數(shù)據(jù)不易被改寫(xiě)，從而也為恢復(fù)數(shù)據(jù)帶來(lái)了機(jī)會(huì)。事實(shí)上各種數(shù)據(jù)恢復(fù)軟件，也正是利用DATA區(qū)中殘留的種種痕跡，來(lái)恢復(fù)數(shù)據(jù)，這就是整個(gè)數(shù)據(jù)恢復(fù)的基本原理。

      根據(jù)上面的理論,只要硬盤(pán)的物理結(jié)構(gòu)還完整保存就有可能恢復(fù)數(shù)據(jù)的.理論上除非被消磁或者砸了，要不然都有辦法恢復(fù)的.

溫馨提示：

      硬盤(pán)格式化后，如果需要恢復(fù)硬盤(pán)里面的文件，不要往硬盤(pán)中存入數(shù)據(jù)，避免造成數(shù)據(jù)覆蓋，好的方法是硬盤(pán)格式化后，直接送到專業(yè)的數(shù)據(jù)恢復(fù)公司恢復(fù)數(shù)據(jù)。