不僅在于俠客們的快意恩仇,
更在于精彩又不失嚴謹..."/>
ITBear旗下自媒體矩陣:

新版本即將來襲,看深信服企業(yè)級分布式存儲EDS蘊藏的“武學秘籍”

   時間:2020-08-06 16:15:06 來源:中華網(wǎng)編輯:星輝 發(fā)表評論無障礙通道

金庸大俠筆下的武俠世界之所以令人向往,

不僅在于俠客們的快意恩仇,

更在于精彩又不失嚴謹?shù)奈鋵W架構(gòu),

掌握一部武學秘籍往往意味著獨步武林,

而在存儲界,

一部“武學奧義”同樣暗藏于

深信服企業(yè)級分布式存儲EDS最新版本!

第一式:“外功”強健體魄 

——二副本、三副本靈活定義可靠性

所謂內(nèi)練一股氣,外練筋骨皮,

具備一身強勁的“外功”,

在面對不同的外部情況時都能應對自如。

對一套存儲的可靠性而言,

能夠承載故障發(fā)生很重要,

對不同需求進行靈活適配同樣重要。

目前市面上的多數(shù)存儲直接為用戶配置了三副本策略,以保障業(yè)務的高效運轉(zhuǎn)以及故障發(fā)生時業(yè)務的連續(xù),但是三副本意味著要花費更高的成本。新版本EDS從用戶的實際需求出發(fā),為用戶提供更靈活的選擇。

首先,以LUN為粒度配置副本數(shù)和性能優(yōu)先級策略,可以選擇為核心業(yè)務配置3副本高性能策略,非核心業(yè)務配置2副本低性能策略,實現(xiàn)按照業(yè)務需求靈活配置存儲能力。其次,新版本EDS通過塊存儲三副本機制,將三份副本數(shù)據(jù)互斥分布在多個存儲節(jié)點上,當節(jié)點發(fā)生故障時,可將業(yè)務連接快速切換到正常節(jié)點進行讀寫,保障業(yè)務的連續(xù)性。

圖1.gif

根據(jù)業(yè)務需求靈活配置副本

三副本可容納任意2節(jié)點故障,但會占3倍于業(yè)務數(shù)據(jù)量的存儲空間,2副本只會占2倍存儲空間,但最大只能容任意1節(jié)點故障,新版本EDS支持按照LUN配置副本數(shù),用戶可根據(jù)業(yè)務的重要性配置,實現(xiàn)業(yè)務可靠性和容量利用率的均衡。同時用戶不必花費高昂的成本全部配置三副本,根據(jù)業(yè)務自主選擇即可。

第二式:“內(nèi)功”自行療傷 

——硬盤壞道主動預測掃描及修復

如果說靈活定義可靠性相當于強化“外功”,

那么提升自我恢復能力則等于修煉“內(nèi)功”。

對于存儲硬盤而言,

那些處在“隱秘的角落”的壞道,

讓業(yè)務數(shù)據(jù)在單副本狀態(tài)下長期“裸奔”。

最好的防御就是主動出擊,

放在新版本EDS再適合不過。

當硬盤出現(xiàn)壞道時一般不容易被發(fā)現(xiàn),只有當客戶端訪問到壞道的數(shù)據(jù)且無法進行訪問時,壞道才會被發(fā)現(xiàn)。新版本EDS對硬盤進行了全方位保護,結(jié)合AI算法模型,推出了硬盤壞道預測、掃描修復及SSD壽命預測等一系列功能。

首先,通過硬盤壞道預測收集分析大量壞道硬盤的SMART數(shù)據(jù)、性能參數(shù)與日志信息,結(jié)合算法訓練模型,可以預測出硬盤在未來7天內(nèi)是否會出現(xiàn)壞道。其次,定時壞道掃描及修復可主動壞道掃描可及時發(fā)現(xiàn)潛藏的壞道,并利用壞道數(shù)據(jù)的另外一個副本將數(shù)據(jù)修復至硬盤保留扇區(qū)。最后SSD壽命預測,通過硬盤Smart信息以及硬盤的寫入量分析,結(jié)合算法訓練模型,預測出SSD的剩余可用時間。

圖2.gif

硬盤壞道主動掃描及修復

通過壞道預測,壞道掃描和壞道修復形成壞道處理閉環(huán),使硬盤壞道被發(fā)現(xiàn)的時長從原來的一個月縮短至一天,并完成修復,最大程度規(guī)避數(shù)據(jù)長期單副本的風險。(實際環(huán)境的測試數(shù)據(jù),預測準確率高達95%以上)。通過SSD壽命預測,用戶可體檢對于壽命不足的SSD提前進行更換準備,避免硬盤損壞造成的業(yè)務宕機。

第三式:“招式”唯快不破 

——億級文件、對象秒級檢索

有道是“天下武功,唯快不破”,

除了“內(nèi)功”與“外功”之外,

快速的“招式”修煉同樣重要,

目的便是以最高效的方式解決問題。

想要在大數(shù)據(jù)時代“乘風破浪”,

數(shù)據(jù)檢索的速率起碼要足夠快。

為了幫助用戶更高效地完成海量數(shù)據(jù)的快速檢索及調(diào)用,新版本EDS為數(shù)據(jù)建立了單獨的快速索引結(jié)構(gòu),使得數(shù)據(jù)能夠在十億級別文件規(guī)模下秒級快速檢索。

圖3.gif

十億級別文件規(guī)模下秒級快速檢索

采用這種將“搜索框”搬到了存儲里面的方式,上億的文件只需要輸入關鍵詞,即可秒級搜索出來想要查找的文件。2億海量文件檢索實測僅需1.8秒。文件檢索效率的提升也降低了用戶的管理成本。

第四式:“心性”堅如磐石 

——億級小文件承載能力

武學之集大成者,

無不胸襟寬廣,心志堅定,

面對再大的壓力及挑戰(zhàn)依然能夠

泰然自若,巋然不動。

海量小文件的穩(wěn)定承載能力,

是數(shù)字時代存儲所要具備的重要素質(zhì)之一。

EDS利用自主研發(fā)的分布式數(shù)據(jù)庫PhxKV,承載分布式NAS文件系統(tǒng)元數(shù)據(jù),使得元數(shù)據(jù)系統(tǒng)在訪問的時延更低,以及在壞塊修復的時候不阻塞前端業(yè)務,而且修復速度極快。小文件可實現(xiàn)寫入即合并,使得存儲內(nèi)部不存在任何的碎片文件,保證機械盤數(shù)據(jù)的正常業(yè)務讀寫訪問以及數(shù)據(jù)重構(gòu)讀寫等等能夠性能不下降,數(shù)據(jù)重構(gòu)每TB所需時間小于30mins。

相較于主機文件系統(tǒng)或磁盤陣列NAS存儲,單文件系統(tǒng)支持的文件處理從千萬級提升到億級別。用戶通過軟件即可實現(xiàn)高性能的文件處理需求,不需要支出高昂的成本來購買硬件。

要想真正做到獨步武林,

需要兼?zhèn)鋸妱诺耐夤?,深厚的?nèi)功,

這些素質(zhì)缺一不可。

深信服新版本EDS向外強化“容障能力”,

向內(nèi)錘煉“修復能力”,

拔高文件檢索速率,

并強化海量小文件承載能力,

真正做到“內(nèi)外兼修”。

在原有的高性能,高可靠,智能管理等特性的基礎上,新版本EDS進一步升級,靈活定義可靠性,硬盤壞而可查,檢索快速便捷,性能穩(wěn)定,為用戶打造更安全、更高效的存儲服務。

 

舉報 0 收藏 0 打賞 0評論 0
 
 
更多>同類資訊
全站最新
熱門內(nèi)容
網(wǎng)站首頁  |  關于我們  |  聯(lián)系方式  |  版權聲明  |  網(wǎng)站留言  |  RSS訂閱  |  違規(guī)舉報  |  開放轉(zhuǎn)載  |  滾動資訊  |  English Version