要說(shuō)近幾年存儲(chǔ)這條街最靚的仔，莫過(guò)于分布式存儲(chǔ)了。
自誕生以來(lái)，分布式存儲(chǔ)就被視為存儲(chǔ)的未來(lái)，被萬(wàn)眾期待。然而分布式存儲(chǔ)起步于寒門，最早應(yīng)用于互聯(lián)網(wǎng)日志、企業(yè)備份歸檔、開發(fā)測(cè)試等場(chǎng)景，追求極致成本，性能和可靠性卻不敢恭維。但它還算爭(zhēng)氣，憑借多年的打怪練級(jí)，越來(lái)越多地開始承載自動(dòng)駕駛研發(fā)、超高清編輯、運(yùn)營(yíng)商5G網(wǎng)絡(luò)云等企業(yè)的關(guān)鍵業(yè)務(wù)，走上變成高富帥、贏取白富美的道路。
正所謂人紅是非多，存儲(chǔ)領(lǐng)域也是一樣，坊間一直流傳著關(guān)于分布式存儲(chǔ)的各種流言蜚語(yǔ)。好事的筆者今天就來(lái)探尋一番，揭開謊言背后的真相。
謊言一：分布式存儲(chǔ)就是軟件+服務(wù)器
目測(cè)分布式存儲(chǔ)領(lǐng)域有兩個(gè)派系，一派是SDS(軟件定義存儲(chǔ))，一派是軟硬一體。前者以vSAN、Ceph為代表，以軟件廠商為主在推廣。分布式存儲(chǔ)軟件+通用服務(wù)器組合，打著重定義存儲(chǔ)市場(chǎng)的旗幟，頗有“有王侯將相寧有種乎”的氣勢(shì);另一派是老牌存儲(chǔ)玩家的產(chǎn)品，他們以軟硬一體為主，如Isilon、HCP等。
楚河漢界已然形成，未來(lái)誰(shuí)主沉浮?
誰(shuí)主沉浮很難判斷，不過(guò)我們不妨從產(chǎn)業(yè)動(dòng)態(tài)窺見一斑。雖然用過(guò)的客戶都詬病分布式存儲(chǔ)軟件+服務(wù)器的方式存在各種兼容性、可靠性、可維護(hù)性的問題，但筆者認(rèn)為SDS這種模式會(huì)長(zhǎng)期存在，尤其是在傳統(tǒng)的低端領(lǐng)域，如備份歸檔、開發(fā)測(cè)試環(huán)境。而越往高端走，軟硬一體越是占據(jù)主流。業(yè)界主流廠商也在持續(xù)推出軟硬一體的產(chǎn)品：
•國(guó)外，DELL&EMC的PowerScale(Isilon)、DDN的EXAScaler等產(chǎn)品;
•國(guó)內(nèi)XSKY、浪潮等Ceph系開源廠商也推出了軟硬件一體產(chǎn)品如XScaler Express。尤其有趣的是XSKY，這可是國(guó)內(nèi)Ceph系軟件定義存儲(chǔ)的旗幟啊，你品，你細(xì)品。
另一方面，筆者也注意到近些年運(yùn)營(yíng)商開展了大規(guī)模的分布式存儲(chǔ)集采，有文件的有塊的。以中國(guó)移動(dòng)2019~2020年分布式塊存儲(chǔ)集采為例，3個(gè)標(biāo)段中2個(gè)為軟硬一體采購(gòu)，占比超過(guò)了90%;電信集團(tuán)2020年集采也放棄了分布式存儲(chǔ)純軟件采購(gòu)，首次全面轉(zhuǎn)向軟硬一體。從這個(gè)角度看，用戶在嘗試了多種采購(gòu)模式之后，也開始逐步轉(zhuǎn)變到軟硬一體的道路上來(lái)，尤其是大型用戶。
#真相#：分布式存儲(chǔ)誕生初期主要是純軟形態(tài)，近十年來(lái)，隨著分布式存儲(chǔ)逐步進(jìn)入企業(yè)市場(chǎng)，軟硬一體的形成已經(jīng)成為主流。
謊言二：分布式存儲(chǔ)就是低價(jià)值存儲(chǔ)
如文章開頭講到的，分布式存儲(chǔ)早期主要用于互聯(lián)網(wǎng)日志、企業(yè)備份歸檔、開發(fā)測(cè)試等場(chǎng)景，這些場(chǎng)景無(wú)疑是低價(jià)值場(chǎng)景，成本是第一訴求甚至唯一訴求。
然此一時(shí)彼一時(shí)，士別三日也當(dāng)刮目相看。
首先是分布式存儲(chǔ)產(chǎn)品能力已今非昔比，逐漸具備了承載企業(yè)高價(jià)值業(yè)務(wù)的關(guān)鍵能力，例如毫秒級(jí)時(shí)延、TB/s級(jí)帶寬、雙活/3DC業(yè)務(wù)級(jí)容災(zāi)、端到端DIF等，無(wú)論是結(jié)構(gòu)化數(shù)據(jù)還是非結(jié)構(gòu)化數(shù)據(jù)的承載，功能完備性的最大短板早已補(bǔ)齊。
其次，分布式存儲(chǔ)已走入眾多高價(jià)值關(guān)鍵業(yè)務(wù)，如運(yùn)營(yíng)商BOM業(yè)務(wù)、金融渠道類業(yè)務(wù)以及超算、油藏探測(cè)HPC等高價(jià)值業(yè)務(wù)，通過(guò)大規(guī)模應(yīng)用實(shí)踐來(lái)檢驗(yàn)成色。(小道消息，某些高價(jià)值場(chǎng)景全閃出貨價(jià)達(dá)到1000美金/TB以上啦)
看完當(dāng)下還要看看未來(lái)，筆者認(rèn)為未來(lái)高價(jià)值的非結(jié)構(gòu)化數(shù)據(jù)場(chǎng)景，分布式存儲(chǔ)的版圖還會(huì)持續(xù)擴(kuò)展。如自動(dòng)駕駛訓(xùn)練、4K/8K超高清、5G日志留存等場(chǎng)景，對(duì)多協(xié)議訪問、極致帶寬、擴(kuò)展性訴求強(qiáng)烈，分布式存儲(chǔ)已然成為這些未來(lái)業(yè)務(wù)的首選架構(gòu)。
#真相#：分布式存儲(chǔ)早期主要用在備份歸檔等低價(jià)值、強(qiáng)成本訴求的場(chǎng)景，如今隨著企業(yè)級(jí)能力的提升，分布式存儲(chǔ)也逐步成為企業(yè)生產(chǎn)系統(tǒng)的承載平臺(tái)，尤其是面向海量非結(jié)構(gòu)數(shù)據(jù)場(chǎng)景，全面支撐文件資源池和HPC等高價(jià)值場(chǎng)景。
謊言三：開源架構(gòu)是分布式存儲(chǔ)的未來(lái)
筆者對(duì)開源從來(lái)是持開放、支持的態(tài)度，正是因?yàn)殚_源的存在，IT產(chǎn)業(yè)才能有今天的繽紛色彩;也正是因?yàn)殚_源，存儲(chǔ)這個(gè)高大上的產(chǎn)品，才走進(jìn)了更多的尋常百姓家。
但如果說(shuō)存儲(chǔ)的未來(lái)在開源，我不敢茍同。
開源分布式存儲(chǔ)軟件的出現(xiàn)，一定程度上降低了存儲(chǔ)的門檻，小公司可快速包裝出存儲(chǔ)產(chǎn)品，帶動(dòng)服務(wù)器銷售。但產(chǎn)品同質(zhì)化問題是所有開源不得不面臨的問題，由于架構(gòu)限制，很難在不動(dòng)架構(gòu)的情況下，真正做出差異化競(jìng)爭(zhēng)力。互聯(lián)網(wǎng)類公司、部分科研機(jī)構(gòu)，以及有技術(shù)情結(jié)和充足資金投入的客戶可能選擇開源，而對(duì)于金融、電信運(yùn)營(yíng)商、大企業(yè)商用HPC、政府等對(duì)可靠性、性能、安全合規(guī)有要求的企業(yè)，開源從來(lái)不是第一選擇，因?yàn)閿?shù)據(jù)太重要了。(聽說(shuō)，國(guó)內(nèi)某知名銀行曾經(jīng)投入500人基于開源軟件搭建分布式存儲(chǔ)，投入巨大且無(wú)法達(dá)銀行業(yè)務(wù)對(duì)性能、可靠性、易運(yùn)維訴求，最終于2年后放棄。)
也有認(rèn)為開源更自主可控的。筆者認(rèn)為開源給了用戶一定的自主權(quán)，但和自主可控是兩個(gè)概念。據(jù)SNYK 2019 年開源安全狀況報(bào)告說(shuō)明，開源軟件漏洞在兩年時(shí)間內(nèi)增加了88%，開源風(fēng)險(xiǎn)的解決強(qiáng)依賴于社區(qū)版本發(fā)布，不能及時(shí)規(guī)避。同時(shí)，近兩年國(guó)際形勢(shì)的大變化，給開放著稱的開源蒙上了一層陰影。
此外，業(yè)界TOP主流分布式存儲(chǔ)產(chǎn)品均是閉源架構(gòu)，如PowerScale(Isilon)、Spectrum Scale、Nutanix、OceanStor Pacific、VSAN、HCP，翻看了一下三個(gè)月前發(fā)布的IDC市場(chǎng)份額報(bào)告，TOP5分布式存儲(chǔ)廠商中，基于開源二次開發(fā)的廠商份額僅占18%。
#真相#：開源只是部分廠商的商業(yè)選擇，分布式存儲(chǔ)產(chǎn)業(yè)的主流還是非開源，并且開源并不代表更加自主可控。
謊言四：分布式存儲(chǔ)可全面取代企業(yè)外置存儲(chǔ)
這是一個(gè)在存儲(chǔ)領(lǐng)域爭(zhēng)論最大的問題。
正所謂長(zhǎng)江后浪推前浪，分布式存儲(chǔ)快速增長(zhǎng)是不可否認(rèn)的，這從各大廠商的業(yè)績(jī)報(bào)告和分析師報(bào)告就能看出來(lái)，但想要把企業(yè)外置存儲(chǔ)這個(gè)前浪拍死在沙灘上還是步子邁太大，不現(xiàn)實(shí)。
企業(yè)外置存儲(chǔ)在相當(dāng)長(zhǎng)的一段時(shí)間內(nèi)，仍然是主流。它主要面向企業(yè)傳統(tǒng)應(yīng)用如ERP/CRM/HIS等，數(shù)據(jù)量不大但對(duì)可靠性、性能有極致要求，如銀行Core-Banking，從可靠性、生態(tài)層面，分布式存儲(chǔ)都不是最佳選擇。分布式存儲(chǔ)主要面向海量數(shù)據(jù)、新興業(yè)務(wù)場(chǎng)景，如HPC/EDA、大數(shù)據(jù)，這類場(chǎng)景以二進(jìn)制文件、視頻、圖片等非結(jié)構(gòu)化數(shù)據(jù)為主，數(shù)據(jù)量極大。所以從場(chǎng)景來(lái)看，二者場(chǎng)景是有明確區(qū)隔的，按場(chǎng)景并存是最好的選擇。
從技術(shù)的角度，分布式存儲(chǔ)的發(fā)力點(diǎn)在大規(guī)模的擴(kuò)展性，基于此逐步優(yōu)化性能、可靠性，讓海量數(shù)據(jù)存得下、用得起;企業(yè)外置存儲(chǔ)的技術(shù)方向在于保持穩(wěn)定性的基礎(chǔ)上，利用更快的介質(zhì)、更低時(shí)延的網(wǎng)絡(luò)為核心業(yè)務(wù)提供加速，讓業(yè)務(wù)更穩(wěn)、效率更高。因此，從技術(shù)方向上來(lái)看，二者也是各有側(cè)重的。
#真相#：分布式存儲(chǔ)和企業(yè)外置存儲(chǔ)并非取代關(guān)系，二者相輔相成、互為補(bǔ)充。企業(yè)外置存儲(chǔ)主要面向結(jié)構(gòu)化數(shù)據(jù)市場(chǎng)，分布式存儲(chǔ)主要面對(duì)海量非結(jié)構(gòu)化數(shù)據(jù)市場(chǎng)（高價(jià)值分布式文件、分布式對(duì)象）。
謊言五：分布式存儲(chǔ)就是“云”
IT潮流滾滾向前，每隔幾年總是需要有一些新概念。
云和分布式存儲(chǔ)一樣，這些年正在大行其道、炙手可熱。Cloud First、All in Cloud、Cloud Native等概念風(fēng)靡業(yè)界，CIO見面不提云貌似都不好意思打招呼。早期人們也習(xí)慣把分布式存儲(chǔ)叫做“云存儲(chǔ)”，那么分布式存儲(chǔ)和云是什么關(guān)系?
筆者認(rèn)為，分布式存儲(chǔ)是一種技術(shù)架構(gòu)，而云是一種商業(yè)模式。分布式存儲(chǔ)可以被用作各種云的數(shù)據(jù)底座，也可以單獨(dú)成為數(shù)據(jù)底座，是配合的關(guān)系，而非替換和包含關(guān)系。
其實(shí)，從與業(yè)界公有云廠商的溝通了解到，公有云雖然近年來(lái)加強(qiáng)對(duì)傳統(tǒng)IT市場(chǎng)的轉(zhuǎn)換，但公有云數(shù)據(jù)增長(zhǎng)更多還是來(lái)自新興場(chǎng)景。以美國(guó)市場(chǎng)為例，近年來(lái)AWS持續(xù)快速增長(zhǎng)，但PowerScale(Isilon)作為Dell&EMC面向非結(jié)構(gòu)化數(shù)據(jù)場(chǎng)景的主力產(chǎn)品，并且近60%的銷售收入來(lái)自于北美市場(chǎng)，依然保持以每年近20%的速度穩(wěn)步增長(zhǎng)。
從場(chǎng)景看，多數(shù)海量存儲(chǔ)場(chǎng)景，因客戶數(shù)據(jù)安全、生態(tài)、招標(biāo)模式等原因，以線下采購(gòu)為主，公有云為輔助。以HPC為例，云上HPC給業(yè)界提供了一種新的方式，讓更多用戶能享受到公有云帶來(lái)的便利性。但實(shí)際上HPC主要用于創(chuàng)新研究，對(duì)數(shù)據(jù)安全要求高，上云是有顧慮。參考Hyperion Research報(bào)告顯示，到2024年云上HPC的收入占比僅17.7%，收入占比很低。
#真相#：分布式存儲(chǔ)是一個(gè)產(chǎn)品，云是一種商業(yè)模式是一種服務(wù)形式，二者不沖突，長(zhǎng)期共存是未來(lái)
