近日,國際數(shù)據(jù)公司(IDC)發(fā)布《中國軟件定義存儲(chǔ)(SDS)及超融合存儲(chǔ)(HCI)系統(tǒng)市場季度跟蹤報(bào)告,2023Q3》。報(bào)告顯示,2023年第三季度,深信服EDS存儲(chǔ)以7.7%的市占率位列中國文件存儲(chǔ)市場第五。
市場認(rèn)可的背后,是深信服EDS存儲(chǔ)對技術(shù)創(chuàng)新的堅(jiān)持、更是對卓越性能的極致追求。
隨著AI訓(xùn)練、芯片等高精尖產(chǎn)業(yè)的快速發(fā)展,對存儲(chǔ)系統(tǒng)的“綜合性能”提出了更高的要求。在存儲(chǔ)賽道上,作為支持混合IO負(fù)載、兼具大小文件能力的一款存儲(chǔ)產(chǎn)品,深信服EDS存儲(chǔ)憑借自研技術(shù)破解了“大容量、高性能、高性價(jià)比”的不可能之三角。
一、自研創(chuàng)新、技術(shù)突破,解決分布式存儲(chǔ)“不可能之三角”
2023年,深信服發(fā)布了EDS存儲(chǔ)501高性能版本,通過自研技術(shù)的創(chuàng)新,幫助用戶實(shí)現(xiàn)存儲(chǔ)容量擴(kuò)展、性能提升的兼得。
性能和容量線性同步擴(kuò)展
一方面,結(jié)合分布式存儲(chǔ)架構(gòu)的天然優(yōu)勢,當(dāng)用戶需要更大的存儲(chǔ)空間或者處理能力時(shí),只需要添加更多的節(jié)點(diǎn)即可,無需改變已有的硬件或軟件結(jié)構(gòu),也無須面臨替換存儲(chǔ)陣列硬件的昂貴投入。同時(shí),EDS存儲(chǔ)設(shè)計(jì)的讀寫模式充分適應(yīng)了SSD與HDD混合閃存介質(zhì)的特性,以此充分激發(fā)硬件性能。
另一方面,基于多活的元數(shù)據(jù)能力、IO整合、數(shù)據(jù)緩存與協(xié)議增強(qiáng)等核心技術(shù)的突破,充分發(fā)揮各節(jié)點(diǎn)的性能優(yōu)勢,提升海量小文件和大文件高吞吐場景的性能。
深信服EDS存儲(chǔ)性能和容量線性同步擴(kuò)展
在元數(shù)據(jù)處理上,讓元數(shù)據(jù)訪問效率提升10倍以上,可緩存的元數(shù)據(jù)規(guī)模是Ceph系產(chǎn)品的7倍,在 AI 訓(xùn)練等場景下可以保持 90% 以上的元數(shù)據(jù)命中率。
通過小文件的聚合和動(dòng)態(tài)IO整合,解決容量使用超過80%后導(dǎo)致的垃圾回收擠占而性能下降的問題。
對于延遲敏感型業(yè)務(wù),采用自適應(yīng)三級緩存技術(shù),將數(shù)據(jù)時(shí)延降至us級。
在協(xié)議增強(qiáng)上,相比于標(biāo)準(zhǔn)文件共享協(xié)議,提升2-3倍,進(jìn)一步降低協(xié)議對性能的額外開銷,縮短時(shí)延和提升性能。
體驗(yàn)更好,成本更低
與此同時(shí),深信服找到了獲得高性能和大容量的高性價(jià)比答案。
通過冷熱數(shù)據(jù)自動(dòng)分層,熱數(shù)據(jù)存儲(chǔ)在NVMe 或SATA固態(tài)盤構(gòu)建的高性能層,冷數(shù)據(jù)存儲(chǔ)在機(jī)械盤構(gòu)建的大容量層,幫助用戶節(jié)省存儲(chǔ)的硬件成本。
基于深舟數(shù)據(jù)管理平臺(tái)、EDS存儲(chǔ)Data Explorer等軟件,實(shí)現(xiàn)數(shù)據(jù)的高效壓縮和管理,64GB內(nèi)存可以承載億級以上規(guī)模小文件的高速讀寫,幫助用戶合理規(guī)劃存儲(chǔ)的投入成本。
通過實(shí)現(xiàn)高性能、大容量、高性價(jià)比的平衡,EDS存儲(chǔ)希望幫助用戶獲得性能和容量的真正“自由”。
二、用核心業(yè)務(wù)的高性能,鑄就客戶口碑的試金石
一款好的存儲(chǔ)產(chǎn)品,不僅是實(shí)驗(yàn)室里的高性能,更是用戶生產(chǎn)環(huán)境的實(shí)際需求的高性能。
2023年,深信服EDS存儲(chǔ)走進(jìn)高精尖場景,落到真實(shí)的業(yè)務(wù)場景,針對業(yè)務(wù)特征進(jìn)行性能優(yōu)化,為實(shí)際業(yè)務(wù)運(yùn)行帶去更好的體驗(yàn)。
在AI訓(xùn)練場景,3節(jié)點(diǎn)小規(guī)模存儲(chǔ)集群支撐訓(xùn)練過程Checkpoints保存和恢復(fù)吞吐可達(dá)100GB/s,保障模型訓(xùn)練的連續(xù)性。
在PACS閱片場景,在業(yè)務(wù)高峰期閱片終端的圖像加載速度可達(dá)到1000幅/s,數(shù)百位門診、臨床醫(yī)生同時(shí)閱片、對存儲(chǔ)系統(tǒng)產(chǎn)生高并發(fā)訪問,閱片效率不受影響。
在測繪作業(yè)場景,小文件時(shí)延降低到us級,支撐200+臺(tái)工作站并發(fā)建模不掉速,建模效率相比于傳統(tǒng)NAS存儲(chǔ)提升2倍。
在芯片設(shè)計(jì)場景,僅需3臺(tái)通用X86設(shè)備,就可以承載超過2000核的算力負(fù)載,提供數(shù)十萬的小文件OPS能力、大文件的讀寫性能達(dá)到6GB/s,EDA前端設(shè)計(jì)場景混閃能超過700路。
在視頻制作場景,承載動(dòng)畫制作、渲染、后期特效/合成等全流程核心業(yè)務(wù),5臺(tái)EDS存儲(chǔ)最大可提供超過7.5GB/s帶寬,滿足用戶400多人團(tuán)隊(duì)的并行影音文件讀取和同時(shí)編輯創(chuàng)作需求。
三、為AI而生,更高性能,EDS存儲(chǔ)全新版本將重磅發(fā)布
在1月26日即將舉辦的深信服2024春季新品發(fā)布會(huì)上,深信服將正式發(fā)布EDS存儲(chǔ)全新版本。
作為真正為AI大模型而生的全新版本,EDS存儲(chǔ)面向AI采、標(biāo)、訓(xùn)、推、歸檔全過程提供統(tǒng)一的數(shù)據(jù)存儲(chǔ)底座,實(shí)現(xiàn)一套存儲(chǔ)滿足AI模型開發(fā)全流程、多業(yè)務(wù)部門、多環(huán)境的存儲(chǔ)需求。
勝任高精尖領(lǐng)域的各種存儲(chǔ)需求,這并非終點(diǎn),而只是開始。
未來,深信服會(huì)繼續(xù)將卓越的性能和可靠性延伸至更多行業(yè),基于充分的技術(shù)積累和持續(xù)創(chuàng)新的底氣,助力千行百業(yè)實(shí)現(xiàn)全方位的數(shù)字化。
