無(wú)論是硬盤固件bug，還是人為刪除，數(shù)據(jù)丟失會(huì)對(duì)用戶業(yè)務(wù)造成極大影響。
根據(jù)2020年IBM數(shù)據(jù)泄露調(diào)查報(bào)告(The 2020 Cost of a Data Breach Report)顯示：在美國(guó)，由于數(shù)據(jù)丟失帶來(lái)的損失平均達(dá)到860萬(wàn)美元，有94%的企業(yè)經(jīng)歷過(guò)數(shù)據(jù)丟失而無(wú)法恢復(fù)的情況，更驚人的是，70%的中小企業(yè)在發(fā)生大規(guī)模數(shù)據(jù)丟失后一年內(nèi)出現(xiàn)破產(chǎn)……
當(dāng)我們把目光聚焦于數(shù)據(jù)存儲(chǔ)時(shí)會(huì)發(fā)現(xiàn)，造成數(shù)據(jù)丟失的原因有很多，根據(jù)第三方調(diào)研機(jī)構(gòu)Kroll Ontrack的分析報(bào)告顯示，有67%的數(shù)據(jù)丟失是由于硬盤或者系統(tǒng)故障造成的，14%是由于人為誤操作，10%的數(shù)據(jù)丟失源于軟件失效。想要避免數(shù)據(jù)丟失就需要提高硬件的可靠性并盡可能降低人為誤操作帶來(lái)的風(fēng)險(xiǎn)。
目前，市面上的數(shù)據(jù)存儲(chǔ)解決方案都填充著各種功能或機(jī)制，看似可靠性很高，實(shí)則缺乏完整的數(shù)據(jù)保護(hù)閉環(huán)。一旦發(fā)生故障，往往依然采用“頭痛醫(yī)頭腳痛醫(yī)腳”的方式打補(bǔ)丁。基于這一洞察，深信服分布式存儲(chǔ)EDS構(gòu)建了事前主動(dòng)防御、事中自動(dòng)處理、事后快速兜底的數(shù)據(jù)保護(hù)框架，重新定義了存儲(chǔ)可靠性，通過(guò)軟硬件協(xié)同設(shè)計(jì)，以期充分保障用戶核心業(yè)務(wù)數(shù)據(jù)的安全可靠。事前階段的“防患于未然”更是重中之重。
事前主動(dòng)防御——潛在風(fēng)險(xiǎn)提前布防
對(duì)于硬件而言，故障發(fā)生往往充滿隨機(jī)性且難以預(yù)測(cè)，與其“坐以待斃”不如“主動(dòng)出擊”，深信服EDS針對(duì)潛在故障，結(jié)合硬件故障預(yù)測(cè)、數(shù)據(jù)冗余保護(hù)、容災(zāi)備份等構(gòu)建了主動(dòng)防御體系。
1.硬盤亞健康預(yù)測(cè)機(jī)制——省心的“硬盤看護(hù)”
EDS對(duì)硬盤進(jìn)行了全方位保護(hù)，結(jié)合AI算法模型，推出了硬盤壞道預(yù)測(cè)、掃描修復(fù)及SSD壽命預(yù)測(cè)等一系列功能——
硬盤壞道預(yù)測(cè)：通過(guò)收集10萬(wàn)+塊壞道硬盤的1800多萬(wàn)條特征數(shù)據(jù)，進(jìn)行機(jī)器學(xué)習(xí)算法訓(xùn)練，最終將算法內(nèi)置到EDS存儲(chǔ)軟件中，可以實(shí)現(xiàn)提前15天發(fā)現(xiàn)出硬盤是否出現(xiàn)壞道，預(yù)測(cè)準(zhǔn)確率達(dá)98.5%，如果預(yù)測(cè)到某塊磁盤將出現(xiàn)壞道，則調(diào)取壞道掃描和修復(fù)進(jìn)程對(duì)磁盤進(jìn)行掃描和修復(fù)。
自動(dòng)壞道掃描及修復(fù)：主動(dòng)對(duì)預(yù)測(cè)將產(chǎn)生壞道的磁盤進(jìn)行掃描，如果掃描發(fā)現(xiàn)潛藏的壞道，則立即觸發(fā)數(shù)據(jù)修復(fù)，即利用冗余機(jī)制將壞道上的數(shù)據(jù)修復(fù)至硬盤保留扇區(qū)。
預(yù)測(cè)和檢測(cè)結(jié)果及時(shí)通知：預(yù)測(cè)和檢測(cè)結(jié)果都會(huì)以頁(yè)面告警、郵件告警等方式及時(shí)通知用戶風(fēng)險(xiǎn)等級(jí)，用戶可根據(jù)風(fēng)險(xiǎn)等級(jí)提前預(yù)備備件。
除了對(duì)硬盤壞道的預(yù)測(cè)、檢查和修復(fù)完整閉環(huán)流程外，EDS還支持對(duì)卡盤、慢盤、SSD壽命到期、IO錯(cuò)誤等硬件亞健康問(wèn)題的閉環(huán)處理，切實(shí)保障數(shù)據(jù)可靠。
2.副本、糾刪碼機(jī)制——故障后的“重構(gòu)”、“推算”實(shí)現(xiàn)復(fù)原
針對(duì)塊存儲(chǔ)，EDS采用多副本機(jī)制，除了多份數(shù)據(jù)副本之外，還同時(shí)存在仲裁副本，保存少量校驗(yàn)數(shù)據(jù)即可完成故障后的數(shù)據(jù)重構(gòu)。而針對(duì)文件、對(duì)象存儲(chǔ)，EDS采用糾刪碼機(jī)制，對(duì)不同節(jié)點(diǎn)冗余不同級(jí)別的主機(jī)/硬盤故障。
3.數(shù)據(jù)容災(zāi)機(jī)制——故障發(fā)生有“兜底”
針對(duì)用戶業(yè)務(wù)系統(tǒng)或者生產(chǎn)數(shù)據(jù)，深信服提供完整的備份解決方案，針對(duì)結(jié)構(gòu)化數(shù)據(jù)提供實(shí)時(shí)備份能力;針對(duì)海量非結(jié)構(gòu)化數(shù)據(jù)，通過(guò)永久增量與快速掃描技術(shù)提供高效的非結(jié)構(gòu)化數(shù)據(jù)備份和恢復(fù)方案。
事中自動(dòng)處理——實(shí)時(shí)業(yè)務(wù)維護(hù)與快速故障修復(fù)
當(dāng)故障發(fā)生之時(shí)，需要考慮兩件事，一個(gè)是如何保障業(yè)務(wù)依舊正常運(yùn)轉(zhuǎn)，另一個(gè)是如何做到故障快速修復(fù)。不僅要求存儲(chǔ)具備“自愈能力”，還要做到“輕傷不下火線”。深信服EDS針對(duì)各種難題提供了有效的處理方式。
1.針對(duì)硬盤靜默錯(cuò)誤，通過(guò)配置一致性檢查策略，自動(dòng)檢查并修復(fù)由于硬盤靜默錯(cuò)誤產(chǎn)生的數(shù)據(jù)不一致問(wèn)題。
2.針對(duì)無(wú)法修復(fù)的硬盤，EDS觸發(fā)自動(dòng)修復(fù)實(shí)現(xiàn)數(shù)據(jù)的自動(dòng)重建。
3.對(duì)于業(yè)務(wù)系統(tǒng)，當(dāng)主機(jī)/網(wǎng)絡(luò)出現(xiàn)異常時(shí)，業(yè)務(wù)IP自動(dòng)切換到可用節(jié)點(diǎn)，最大程度保障業(yè)務(wù)不中斷。
事后快速兜底——業(yè)務(wù)數(shù)據(jù)找回及時(shí)止損
在故障發(fā)生后，用戶必須要進(jìn)行業(yè)務(wù)數(shù)據(jù)找回以將損失降到最低。深信服EDS實(shí)現(xiàn)發(fā)生物理災(zāi)難性故障后，通過(guò)備份容災(zāi)系統(tǒng)，幫助用戶盡快恢復(fù)數(shù)據(jù);當(dāng)發(fā)生邏輯錯(cuò)誤時(shí)，可以通過(guò)快照克隆、回收站進(jìn)行數(shù)據(jù)恢復(fù)。
其中，回收站可以根據(jù)需要進(jìn)行靈活設(shè)置，一旦配置回收站策略，符合策略的文件在刪除后會(huì)進(jìn)入回收站，當(dāng)刪除操作為誤操作或惡意行為時(shí)，管理員通過(guò)回收站可以找回刪除的數(shù)據(jù)，實(shí)現(xiàn)快速恢復(fù)。
如今，數(shù)據(jù)已經(jīng)成為一種新型生產(chǎn)要素，和所有的行業(yè)、所有單位、企業(yè)，甚至是我們每一個(gè)人都是密不可分，而想要挖掘數(shù)據(jù)的價(jià)值，首先就要保障數(shù)據(jù)的可用性及可靠性，而可靠性是數(shù)據(jù)的根基。深信服EDS存儲(chǔ)基于數(shù)萬(wàn)家用戶服務(wù)的積累，構(gòu)建了完整的數(shù)據(jù)保護(hù)閉環(huán)，提供99.9999%的可靠性，致力于實(shí)現(xiàn)用戶業(yè)務(wù)永無(wú)宕機(jī)。
