【ITBEAR】9月26日消息，華為與中國(guó)移動(dòng)攜手，在華為全聯(lián)接大會(huì)2024上推出了智算中心超大規(guī)模集群的AI存儲(chǔ)解決方案。這一創(chuàng)新方案由中國(guó)移動(dòng)集團(tuán)首席專家、研究院網(wǎng)絡(luò)與IT技術(shù)研究所所長(zhǎng)張昊與華為數(shù)據(jù)存儲(chǔ)產(chǎn)品線副總裁謝強(qiáng)強(qiáng)共同發(fā)布，標(biāo)志著AI存儲(chǔ)技術(shù)的又一重大突破。
張昊指出，當(dāng)前大模型技術(shù)正迅速向更大規(guī)模、更強(qiáng)能力演進(jìn)，其發(fā)展趨勢(shì)仍遵循Scaling Law，參數(shù)規(guī)模已擴(kuò)展至萬(wàn)億甚至十萬(wàn)億級(jí)別，且正從單模態(tài)向多模態(tài)轉(zhuǎn)變。全球范圍內(nèi)的科技巨頭，如OpenAI、字節(jié)跳動(dòng)、中國(guó)移動(dòng)、meta等，正積極投建萬(wàn)卡或超萬(wàn)卡集群智算中心，萬(wàn)卡及超萬(wàn)卡集群的建設(shè)已成為新基建領(lǐng)域的顯著趨勢(shì)。然而，隨著大模型規(guī)模的擴(kuò)大，特別是在處理海量非結(jié)構(gòu)化數(shù)據(jù)時(shí)，傳統(tǒng)存儲(chǔ)系統(tǒng)面臨著高吞吐性能、多協(xié)議處理、數(shù)據(jù)管理效率等多方面的嚴(yán)峻挑戰(zhàn)。
為了應(yīng)對(duì)這些挑戰(zhàn)，中國(guó)移動(dòng)在哈爾濱的萬(wàn)卡超大規(guī)模智算集群中首次大規(guī)模部署了基于華為OceanStor AI存儲(chǔ)的多協(xié)議融合存儲(chǔ)系統(tǒng)。該存儲(chǔ)集群的可得容量達(dá)到了150PB，依托其“并行客戶端、高密全閃介質(zhì)、冷熱數(shù)據(jù)自動(dòng)分級(jí)、GSE全調(diào)度以太網(wǎng)”的高性能融合存儲(chǔ)架構(gòu)，顯著提升了大模型的訓(xùn)練效率。
此前，國(guó)內(nèi)運(yùn)營(yíng)商最大的單集群智算中心——中國(guó)移動(dòng)智算中心（哈爾濱）已于8月30日完成建設(shè)并正式投入使用。該智算中心以其單集群算力規(guī)模最大、國(guó)產(chǎn)化網(wǎng)絡(luò)設(shè)備組網(wǎng)規(guī)模最大等特點(diǎn)而著稱，它將所有AI加速卡整合成一個(gè)集群，以支持千萬(wàn)億級(jí)參數(shù)的大模型訓(xùn)練。
此次華為與中國(guó)移動(dòng)的合作，無(wú)疑為智算中心的大規(guī)模集群存儲(chǔ)提供了新的解決方案，進(jìn)一步推動(dòng)了大模型技術(shù)的發(fā)展和應(yīng)用。#華為# #中國(guó)移動(dòng)# #智算中心# #AI存儲(chǔ)# #大模型技術(shù)#
