隨著技術(shù)的進(jìn)步和時代的發(fā)展，企業(yè)級數(shù)據(jù)中心的數(shù)據(jù)量呈現(xiàn)出了爆發(fā)式的增長。數(shù)據(jù)的快速產(chǎn)生和各項配套政策的落實推動我國大數(shù)據(jù)行業(yè)高速發(fā)展，預(yù)計未來我國行業(yè)大數(shù)據(jù)市場規(guī)模增速將維持在15%-25%之間，到2025年中國大數(shù)據(jù)產(chǎn)業(yè)規(guī)模將達(dá)19508億元的高點。這意味著，中國和世界早已進(jìn)入大數(shù)據(jù)時代。
在大數(shù)據(jù)時代，海量的數(shù)據(jù)給ICT行業(yè)帶來了全新的挑戰(zhàn)，如何存儲、管理和利用這些數(shù)據(jù)，如何借助規(guī)劃有效的降低TCO，如何縮短開發(fā)周期從而保證業(yè)務(wù)系統(tǒng)快速上線等問題，傳統(tǒng)的SAN和NAS 架構(gòu)已經(jīng)不能有效的應(yīng)對這些行業(yè)的難題。
企業(yè)建設(shè)之初，數(shù)據(jù)規(guī)模較小，企業(yè)往往采用NAS存儲非結(jié)構(gòu)化數(shù)據(jù)，不同部門員工每時每刻都在訪問文件系統(tǒng)，當(dāng)有大量文件同時上傳下載，易造成網(wǎng)絡(luò)阻塞，NAS系統(tǒng)的流暢性將受到影響。隨著數(shù)據(jù)大集中、數(shù)據(jù)挖掘、商業(yè)智能、協(xié)同作業(yè)等技術(shù)的成熟，數(shù)據(jù)價值呈指數(shù)上升。各種規(guī)模的企業(yè)均為數(shù)據(jù)量的高速增長帶來的管理和成本問題而困擾，同時NAS存儲也面臨著無法支撐大數(shù)據(jù)智能的業(yè)務(wù)需求。面對海量的非結(jié)構(gòu)化數(shù)據(jù)，對象存儲應(yīng)運而生。
杉巖對象存儲面向海量非結(jié)構(gòu)化數(shù)據(jù)存儲的應(yīng)用場景，可提供安全、可靠和高性能的對象存儲服務(wù)，杉巖對象存儲系統(tǒng)采用扁平化的文件組織結(jié)構(gòu)，有效解決了傳統(tǒng)樹形文件目錄處理海量文件的難題，提供一套REST API接口供開發(fā)使用，無需關(guān)注底層原理，能夠幫助客戶完成業(yè)務(wù)系統(tǒng)的快速開發(fā)和上線。但是客戶使用的存儲種類繁多，運維管理不便，增加了運維的復(fù)雜度和運維成本;企業(yè)啟動針對NAS老舊存儲的整理優(yōu)化已經(jīng)勢在必行，從而實現(xiàn)存儲設(shè)備的資源整合。
在企業(yè)用戶從使用傳統(tǒng)的文件存儲到使用對象存儲的應(yīng)用改造過程中，主要有以下幾個步驟：業(yè)務(wù)系統(tǒng)代碼改造 > 數(shù)據(jù)遷移 > 數(shù)據(jù)校驗 > 業(yè)務(wù)系統(tǒng)停機升級 > 增量數(shù)據(jù)遷移與校驗 > 正式上線。上述過程中，工作量最大的往往不是業(yè)務(wù)系統(tǒng)的代碼改造，而在于數(shù)據(jù)的遷移與校驗。在數(shù)據(jù)遷移的過程中，涉及到數(shù)據(jù)的傳輸，文件數(shù)量及內(nèi)容的校驗，每一項工作都會消耗大量的時間與人力，為業(yè)務(wù)的割接上線帶來了許多阻力。
杉巖對象存儲在滿足海量非結(jié)構(gòu)化數(shù)據(jù)存儲需求的同時， 通過支持NAS異構(gòu)功能徹底解決了上述難題。通過將原有NAS的元數(shù)據(jù)進(jìn)行納管，將NAS數(shù)據(jù)轉(zhuǎn)換為對象形成統(tǒng)一命名空間，業(yè)務(wù)切換時無需進(jìn)行大量的數(shù)據(jù)遷移，即可同時訪問對象存儲及NAS中原有的數(shù)據(jù);另外，在該架構(gòu)下，若需要將NAS中的數(shù)據(jù)遷移至對象存儲，數(shù)據(jù)遷移操作可在后臺異步進(jìn)行，遷移動作對業(yè)務(wù)無感知。
圖1 NAS異構(gòu)功能示意圖
快速納管：3 個節(jié)點的對象存儲集群，對 1000 萬個文件進(jìn)行納管只需要 9分鐘，并且無需考慮文件大小。相比之下，使用傳統(tǒng)方式遷移 1000 萬個 16KB 大小的文件，需要 12 個小時左右的時間，若文件增大，遷移時間將更長;另外，在節(jié)點數(shù)更多的情況下，納管時間會更短。根據(jù)現(xiàn)有的客戶實踐，NAS 納管技術(shù)能夠?qū)⒄麄€業(yè)務(wù)系統(tǒng)改造、上線的時間周期縮短50%以上。
自動遷移：利用生命周期轉(zhuǎn)移功能自動遷移數(shù)據(jù)，無需人為干預(yù)，大大減少人力成本，遷移過程完全透明，用戶無感知。
利舊存儲：整合異構(gòu)存儲資源，空間最大化利用，提高資源利用率，避免存儲資源浪費，從而降低采購成本，提高投資回報率。
簡化管理：納管完成后，使用對象存儲接口訪問時，新寫的對象直接存放在對象存儲中，應(yīng)用可以統(tǒng)一使用S3接口，同時訪問對象存儲及NAS中原有存儲的數(shù)，從而降低數(shù)據(jù)管理的復(fù)雜度。
杉巖對象存儲NAS異構(gòu)技術(shù)，其核心是納管NAS設(shè)備的元數(shù)據(jù)，形成統(tǒng)一的對象命名空間，無需立即觸發(fā)數(shù)據(jù)內(nèi)容搬遷，應(yīng)用統(tǒng)一使用S3接口即可訪問NAS和MOS的數(shù)據(jù)，通過生命周期轉(zhuǎn)移策略，可以后期平滑遷移NAS文件到SandStone MOS，數(shù)據(jù)內(nèi)容搬遷過程中無需停機，業(yè)務(wù)切割時間窗極短，實現(xiàn)業(yè)務(wù)系統(tǒng)的快速切換與上線。
