大眾創(chuàng)業(yè)時代，人們常談“自研”。但在國內(nèi)存儲行業(yè)，將“自研”付諸實踐，堅持10年的企業(yè)卻沒幾家。
但即使用10年時間，自研出代表行業(yè)先進水平的產(chǎn)品，生存和發(fā)展的壓力仍在每名研發(fā)、產(chǎn)品、運營人員的肩頭。
這或許印證了中國存儲人、中國IT人的使命——抓住海量數(shù)據(jù)爆發(fā)的時代機遇，成就一款眾人皆知的經(jīng)典產(chǎn)品。
下面講述的，是中國最早自研分布式存儲產(chǎn)品——中科曙光“ParaStor”的10年往事。愿這些過往能給同為追求極致的IT人些許幫助和啟示。
圖說：10周年慶典現(xiàn)場，曙光員工正給ParaStor慶生
存儲“十字路口”
ParaStor的10年，始于2009年夏天。
站在中科院計算所大樓，眺望施工不斷的中關(guān)村，已過而立之年的苗艷超，下定決心離開工作多年的計算所去企業(yè)。
要去的企業(yè)名叫“曙光”，他要負責一款從無到有的存儲產(chǎn)品開發(fā)。
當時，鮮有人談大數(shù)據(jù)、人工智能，少數(shù)國際廠商開始講“分布式存儲”。站在存儲發(fā)展的十字路口，各大廠商開始了對未來的爭奪。
2009年，Cisco宣布進入服務器和存儲市場，與此同時EMC參與NetApp競購，并與Cisco、VMware兩家廠商結(jié)成VCE聯(lián)盟。Oracle收購SUN公司，具備了存儲軟硬件一體的產(chǎn)品格局……
2009年“選擇”擺在了曙光人面前。
隨著曙光服務器進入更多行業(yè)和領(lǐng)域，突破存儲瓶頸成為當時要務。但此時，曙光還未有自研的，滿足高并發(fā)IO需求的商業(yè)化存儲產(chǎn)品。
而苗艷超所在計算所智能中心，便一直研發(fā)有高并發(fā)IO特點的“集群文件系統(tǒng)”，但這些研究成果只停留在課題中，未形成商業(yè)化產(chǎn)品。
不到五人的研發(fā)團隊
到曙光后，苗艷超的第一個難題便是“曙光存儲的技術(shù)路線要怎么走?”
“Parastor立項就面臨技術(shù)路線選擇問題，一個是以磁盤陣列作為基礎(chǔ)部件;另一種是以x86架構(gòu)的高性能服務器為底層硬件，數(shù)據(jù)冗余機制由上層文件系統(tǒng)負責提供的分布式存儲系統(tǒng)。”苗艷超回憶。
此時，為減少對大廠存儲技術(shù)依賴，以及跟上“大數(shù)據(jù)”時代技術(shù)趨勢，結(jié)合曙光自有的產(chǎn)品生態(tài)和優(yōu)勢，苗艷超和同事選擇了更具前瞻性和挑戰(zhàn)的分布式存儲系統(tǒng)研發(fā)路線。
但此時加上苗艷超，初期的ParaStor研發(fā)團隊只有不到5人，相比同類廠商動輒上百人的研發(fā)隊伍，連零頭都不到。
圖說：曙光存儲產(chǎn)品事業(yè)部總工程師 苗艷超
為加快研發(fā)進度，當時每人都領(lǐng)了不同產(chǎn)品領(lǐng)域去研究，經(jīng)常半夜誰有想法就爬起來發(fā)郵件，一起討論可行性。
最終不到一年，ParaStor1.0便問世了。如今看來ParaStor1.0很原始，僅支持副本冗余，沒有糾刪碼等如今“分布式”存儲系統(tǒng)必備的技術(shù)，但它為ParaStor的發(fā)展明確了方向。
2010年，ParaStor從1.0升級到1.5，這是ParaStor第一個商業(yè)化軟件版本。為建口碑，當時團隊內(nèi)部定了一個目標，有BUG必須24小時內(nèi)解決。很多BUG都是當天發(fā)現(xiàn)，研發(fā)團隊通宵修改，第二天客戶上班，BUG已解。
最終，初出茅廬的ParaStor以高性能和良好的擴展性獲得首批客戶的認可，該版本也為國內(nèi)首臺性能超千萬億次的計算系統(tǒng)“曙光星云”，構(gòu)建了當時國內(nèi)最大的單一存儲系統(tǒng)(16PB)。
此次成功部署，使得“曙光能做分布式存儲產(chǎn)品”的理念深入公司內(nèi)外，從此ParaStor步入了高速市場化發(fā)展軌道。
戰(zhàn)書
“三年后，曙光存儲要占領(lǐng)國內(nèi)10%的市場份額，進入存儲主流市場”2012年7月，時任曙光存儲產(chǎn)品總監(jiān)惠潤海，面對發(fā)布會現(xiàn)場記者立下戰(zhàn)書。
圖說：曙光存儲產(chǎn)品事業(yè)部總經(jīng)理惠潤海
而打贏這場仗的排頭兵便是ParaStor。
惠潤海立下戰(zhàn)書后不到半小時，現(xiàn)場就有媒體提問“在國際廠商搶先進入市場的背景下，曙光靠什么獲得主流客戶的認可?”
對此，惠潤海表示，曙光的立身之本有兩點：一是要靠自主研發(fā)，掌握核心技術(shù)，應對海量數(shù)據(jù)增長所帶來的一系列挑戰(zhàn);二是在行業(yè)深耕細作，通過對行業(yè)應用的快速適配和深入優(yōu)化，打造差異化優(yōu)勢，實現(xiàn)重點市場的逐個突破。
相比于2009年，此時已進入“大數(shù)據(jù)元年”，中國互聯(lián)網(wǎng)產(chǎn)業(yè)在起飛。當時IDC研究報告顯示，大數(shù)據(jù)技術(shù)和服務市場至2017年的增長率可達27%，增速是整個信息和通訊技術(shù)市場的6倍。
但就在惠潤海立戰(zhàn)書的幾天前，連媒體也沒幾人知道ParaStor。不知道ParaStor的，還有將成為ParaStor研發(fā)工程師的郭洋。
2012年，在國內(nèi)某IT大廠做存儲產(chǎn)品的郭洋，決定從原先安穩(wěn)的公司來到曙光。但在網(wǎng)上搜索自己要在新單位開發(fā)的產(chǎn)品“ParaStor”，卻找不到太多信息。
“當時的分布式存儲還是國際大廠的天下，國內(nèi)的產(chǎn)品嚴格上講僅有兩家，曙光算一個。此外，當時類型相近的國際大廠分布式存儲產(chǎn)品價格是國產(chǎn)產(chǎn)品的五到十倍。”郭洋回憶。
圖說：采用ParaStor存儲平臺的山西先進計算中心
做到極致
當時ParaStor面臨的最大問題之一，就是如何提升存儲空間利用率，根據(jù)團隊之前的積累，實現(xiàn)這點對郭洋和他的團隊并不算挑戰(zhàn)。但相應的產(chǎn)品測試與驗證調(diào)優(yōu)，則是考驗團隊專業(yè)性的時候。“要考慮用戶端可能出現(xiàn)的各種情況，要做多種排列組合數(shù)量的測試和優(yōu)化。”郭洋說。
在實現(xiàn)ParaStor升級的過程中，郭洋也理解“做到極致”的曙光產(chǎn)品理念，以及曙光存儲堅持自研的原因。
在一個CANU三代基因組裝測試項目中，用戶要求曙光ParaStor的性能必須超越某廠商宣稱的“代表業(yè)界最高性能”的同類產(chǎn)品，才考慮把其業(yè)務遷移到曙光平臺上。
面對新挑戰(zhàn)，郭洋和同事在兩周內(nèi)，將整個業(yè)務流程各階段(涉及幾十個進程)的數(shù)據(jù)IO特點梳理成報告，并同同事一起從底層代碼逐一調(diào)優(yōu)，最終用戶計算用時從9.2小時降低到7.3小時，實測性能超過友商20%以上。
就在郭洋和同事精益求精，不斷將ParaStor產(chǎn)品性能做到極致時，市場也向曙光遞來了橄欖枝。
2013年，ParaStor2.0版本發(fā)布，增強了數(shù)據(jù)保護機制，可為用戶構(gòu)建數(shù)據(jù)全生命周期管理的一體化方案。同年，ParaStor為央視國際打造6PB存儲資源池，并在全國多地中標氣象局、環(huán)保局項目。
2015年，據(jù)IDC報告顯示ParaStor在國內(nèi)NAS市場排名位居第一，營收同比增長42.6%，占全部NAS存儲市場份額21.6%。三年前惠潤海下的戰(zhàn)書達成了，直到今天ParaStor一直保持國內(nèi)NAS存儲市場占有率的前兩位。
多元化需求 本地化服務
2018年夏的一天夜里兩點，在睡夢中的曙光存儲運維工程師呂山被客戶的電話驚醒。
當時一位江蘇的視頻存儲業(yè)務客戶，因操作不當導致后臺出問題。呂山立刻利用客戶提供的安全通道登錄系統(tǒng)，查看日志，最終與同事一起找到問題并解決。
存儲作為數(shù)據(jù)中心的核心之一，任何架構(gòu)、系統(tǒng)、應用的變化都有可能導致問題。這就需要曙光的存儲運維人員耐心、負責地提供各種咨詢、服務支持。
半夜接到客戶電話，對于呂山和同事是常有的事。
2015年前后，隨ParaStor產(chǎn)品銷量增長，運維壓力增加。“行業(yè)不同，客戶運維人員水平不一，導致運維的個性化需求不同、復雜度增加，這就需要我們堅持本土化服務，解決用戶痛點。”ParaStor產(chǎn)品經(jīng)理石冬林說。
河北姑娘石冬林，2012年研究生畢業(yè)即加入曙光存儲產(chǎn)品線，2015年起擔任ParaStor產(chǎn)品經(jīng)理，主要負責分布式存儲產(chǎn)品定義、市場推廣與運營工作。
市場對存儲產(chǎn)品的要求也趨于多元，相比滿足單一的云服務、虛擬化等應用，如今客戶希望不同應用之間實現(xiàn)數(shù)據(jù)靈活流動。
ParaStor如何應對新市場的挑戰(zhàn)，成為石冬林和同事不斷思考的問題。目前石冬林給出的方案之一是“融合”。
“融合性，簡單舉例來說，就是ParaStor除了支持文件、對象存儲外，今后還要支持塊存儲。一套存儲應對用戶不同的業(yè)務需求，實現(xiàn)融合。”石冬林說。
相比傳統(tǒng)分布式存儲產(chǎn)品，如今曙光ParaStor已成為省、市級別先進計算中心的首選存儲平臺。“在先進計算中心，ParaStor融合非結(jié)構(gòu)化與結(jié)構(gòu)化數(shù)據(jù)存儲，融合通用計算、大數(shù)據(jù)、AI等業(yè)務應用”石冬林介紹。
“昨天已過去，明天仍是挑戰(zhàn)”
曙光存儲事業(yè)部總經(jīng)理惠潤海表示，“ParaStor產(chǎn)品歷經(jīng)十年發(fā)展，過程特別不易，測試、產(chǎn)品、售前到售后支持都非常不容易。所有人都全身心地投入其中，就像呵護自家寶貝一樣陪伴她成長。”
在誕生10年之際，曙光表示這個“小寶貝”的最新版本——ParaStor300S，實現(xiàn)了融合存儲架構(gòu)，集群存儲系統(tǒng)可對外統(tǒng)一提供文件、對象、塊等存儲協(xié)議。此外，曙光ParaStor產(chǎn)品明確三大發(fā)展方向：本土化、閃存化、融合智能，領(lǐng)跑數(shù)字經(jīng)濟時代。
圖說：ParaStor300S
經(jīng)過十年發(fā)展，如今ParaStor管理著數(shù)EB存儲空間，實現(xiàn)了TB級訪問帶寬。服務對象遍及氣象、能源、生物、金融、廣電、交通等多個行業(yè)。IDC排名連續(xù)7年位居國內(nèi)NAS存儲市場前二位;而曙光ParaStor產(chǎn)品、研發(fā)團隊，也從最早不足5人，發(fā)展到如今數(shù)百人。
“昨天已經(jīng)過去了，明天仍充滿挑戰(zhàn)”惠潤海最后表示，ParaStor十年取得的成績令人振奮，但我們還有更高的目標，今后仍面臨挑戰(zhàn)。“未來10年，我們將繼續(xù)專注技術(shù)、扎根本土、主動創(chuàng)新的傳統(tǒng)，更貼近用戶應用，不斷滿足中國存儲用戶需求。”惠潤海說。
圖說：曙光存儲團隊
后記：
“十年去了，少年志猶在”
“如果對明天沒有要求”便不會有曙光分布式存儲產(chǎn)品ParaStor的10年。
技術(shù)迭代加速，IT產(chǎn)業(yè)競爭加劇。在莫測的市場環(huán)境中，只有持之以恒做好一件事，別無旁顧打造“極致產(chǎn)品”，持續(xù)為行業(yè)、用戶創(chuàng)造核心價值，才能免于被時代所淘汰。
將以上簡單的道理付諸實踐，堅持10年，這或許便是曙光人的發(fā)展和成功之道。
更多曙光相關(guān)資訊，歡迎搜索微信公眾號“中科曙光/sugoncn”，關(guān)注曙光公司官方微信。
