金庸大俠筆下的武俠世界之所以令人向往,
不僅在于俠客們的快意恩仇,
更在于精彩又不失嚴謹?shù)奈鋵W架構(gòu),
掌握一部武學秘籍往往意味著獨步武林,
而在存儲界,
一部“武學奧義”同樣暗藏于
深信服企業(yè)級分布式存儲EDS最新版本!
●第一式:“外功”強健體魄 ●
——二副本、三副本靈活定義可靠性
所謂內(nèi)練一股氣,外練筋骨皮,
具備一身強勁的“外功”,
在面對不同的外部情況時都能應對自如。
對一套存儲的可靠性而言,
能夠承載故障發(fā)生很重要,
對不同需求進行靈活適配同樣重要。
目前市面上的多數(shù)存儲直接為用戶配置了三副本策略,以保障業(yè)務的高效運轉(zhuǎn)以及故障發(fā)生時業(yè)務的連續(xù),但是三副本意味著要花費更高的成本。新版本EDS從用戶的實際需求出發(fā),為用戶提供更靈活的選擇。
首先,以LUN為粒度配置副本數(shù)和性能優(yōu)先級策略,可以選擇為核心業(yè)務配置3副本高性能策略,非核心業(yè)務配置2副本低性能策略,實現(xiàn)按照業(yè)務需求靈活配置存儲能力。其次,新版本EDS通過塊存儲三副本機制,將三份副本數(shù)據(jù)互斥分布在多個存儲節(jié)點上,當節(jié)點發(fā)生故障時,可將業(yè)務連接快速切換到正常節(jié)點進行讀寫,保障業(yè)務的連續(xù)性。
根據(jù)業(yè)務需求靈活配置副本
三副本可容納任意2節(jié)點故障,但會占3倍于業(yè)務數(shù)據(jù)量的存儲空間,2副本只會占2倍存儲空間,但最大只能容任意1節(jié)點故障,新版本EDS支持按照LUN配置副本數(shù),用戶可根據(jù)業(yè)務的重要性配置,實現(xiàn)業(yè)務可靠性和容量利用率的均衡。同時用戶不必花費高昂的成本全部配置三副本,根據(jù)業(yè)務自主選擇即可。
●第二式:“內(nèi)功”自行療傷 ●
——硬盤壞道主動預測掃描及修復
如果說靈活定義可靠性相當于強化“外功”,
那么提升自我恢復能力則等于修煉“內(nèi)功”。
對于存儲硬盤而言,
那些處在“隱秘的角落”的壞道,
讓業(yè)務數(shù)據(jù)在單副本狀態(tài)下長期“裸奔”。
最好的防御就是主動出擊,
放在新版本EDS再適合不過。
當硬盤出現(xiàn)壞道時一般不容易被發(fā)現(xiàn),只有當客戶端訪問到壞道的數(shù)據(jù)且無法進行訪問時,壞道才會被發(fā)現(xiàn)。新版本EDS對硬盤進行了全方位保護,結(jié)合AI算法模型,推出了硬盤壞道預測、掃描修復及SSD壽命預測等一系列功能。
首先,通過硬盤壞道預測收集分析大量壞道硬盤的SMART數(shù)據(jù)、性能參數(shù)與日志信息,結(jié)合算法訓練模型,可以預測出硬盤在未來7天內(nèi)是否會出現(xiàn)壞道。其次,定時壞道掃描及修復可主動壞道掃描可及時發(fā)現(xiàn)潛藏的壞道,并利用壞道數(shù)據(jù)的另外一個副本將數(shù)據(jù)修復至硬盤保留扇區(qū)。最后SSD壽命預測,通過硬盤Smart信息以及硬盤的寫入量分析,結(jié)合算法訓練模型,預測出SSD的剩余可用時間。
硬盤壞道主動掃描及修復
通過壞道預測,壞道掃描和壞道修復形成壞道處理閉環(huán),使硬盤壞道被發(fā)現(xiàn)的時長從原來的一個月縮短至一天,并完成修復,最大程度規(guī)避數(shù)據(jù)長期單副本的風險。(實際環(huán)境的測試數(shù)據(jù),預測準確率高達95%以上)。通過SSD壽命預測,用戶可體檢對于壽命不足的SSD提前進行更換準備,避免硬盤損壞造成的業(yè)務宕機。
●第三式:“招式”唯快不破 ●
——億級文件、對象秒級檢索
有道是“天下武功,唯快不破”,
除了“內(nèi)功”與“外功”之外,
快速的“招式”修煉同樣重要,
目的便是以最高效的方式解決問題。
想要在大數(shù)據(jù)時代“乘風破浪”,
數(shù)據(jù)檢索的速率起碼要足夠快。
為了幫助用戶更高效地完成海量數(shù)據(jù)的快速檢索及調(diào)用,新版本EDS為數(shù)據(jù)建立了單獨的快速索引結(jié)構(gòu),使得數(shù)據(jù)能夠在十億級別文件規(guī)模下秒級快速檢索。
十億級別文件規(guī)模下秒級快速檢索
采用這種將“搜索框”搬到了存儲里面的方式,上億的文件只需要輸入關鍵詞,即可秒級搜索出來想要查找的文件。2億海量文件檢索實測僅需1.8秒。文件檢索效率的提升也降低了用戶的管理成本。
●第四式:“心性”堅如磐石 ●
——億級小文件承載能力
武學之集大成者,
無不胸襟寬廣,心志堅定,
面對再大的壓力及挑戰(zhàn)依然能夠
泰然自若,巋然不動。
海量小文件的穩(wěn)定承載能力,
是數(shù)字時代存儲所要具備的重要素質(zhì)之一。
EDS利用自主研發(fā)的分布式數(shù)據(jù)庫PhxKV,承載分布式NAS文件系統(tǒng)元數(shù)據(jù),使得元數(shù)據(jù)系統(tǒng)在訪問的時延更低,以及在壞塊修復的時候不阻塞前端業(yè)務,而且修復速度極快。小文件可實現(xiàn)寫入即合并,使得存儲內(nèi)部不存在任何的碎片文件,保證機械盤數(shù)據(jù)的正常業(yè)務讀寫訪問以及數(shù)據(jù)重構(gòu)讀寫等等能夠性能不下降,數(shù)據(jù)重構(gòu)每TB所需時間小于30mins。
相較于主機文件系統(tǒng)或磁盤陣列NAS存儲,單文件系統(tǒng)支持的文件處理從千萬級提升到億級別。用戶通過軟件即可實現(xiàn)高性能的文件處理需求,不需要支出高昂的成本來購買硬件。
要想真正做到獨步武林,
需要兼?zhèn)鋸妱诺耐夤?,深厚的?nèi)功,
這些素質(zhì)缺一不可。
深信服新版本EDS向外強化“容障能力”,
向內(nèi)錘煉“修復能力”,
拔高文件檢索速率,
并強化海量小文件承載能力,
真正做到“內(nèi)外兼修”。
在原有的高性能,高可靠,智能管理等特性的基礎上,新版本EDS進一步升級,靈活定義可靠性,硬盤壞而可查,檢索快速便捷,性能穩(wěn)定,為用戶打造更安全、更高效的存儲服務。