在人工智能技術(shù)的龐大體系中,深度學(xué)習(xí)框架扮演著連接底層算力和上層算法模型的關(guān)鍵角色,是推動大模型產(chǎn)業(yè)發(fā)展的重要基石。在全球范圍內(nèi),TensorFlow和PyTorch兩大框架占據(jù)了領(lǐng)先地位,而在中國市場,這一格局正在發(fā)生微妙的變化。
近年來,國產(chǎn)深度學(xué)習(xí)框架如華為的昇思MindSpore和百度的飛槳PaddlePaddle等,正以前所未有的速度迎頭趕上。特別是在12月14日舉辦的昇思人工智能框架峰會上,這一趨勢得到了進(jìn)一步的證實。會上,共有18家單位發(fā)布了基于昇思的原生開發(fā)大模型成果,標(biāo)志著昇思在中國AI框架市場的影響力日益增強。
華為ICT戰(zhàn)略與業(yè)務(wù)發(fā)展部總裁彭紅華在峰會上表示,人工智能框架是AI時代的操作系統(tǒng)與軟件底座,它要求同時具備高效、敏捷和開放的技術(shù)與生態(tài)能力。華為將持續(xù)投入昇思MindSpore的發(fā)展,通過開源的方式,推動中國人工智能框架生態(tài)的健康與高速發(fā)展。
智譜AI的CEO張鵬也在會上分享了大模型對深度學(xué)習(xí)框架帶來的變革。他指出,隨著硬件資源的日益豐富,如何高效利用這些資源成為行業(yè)關(guān)注的重點。大模型訓(xùn)練框架和基礎(chǔ)設(shè)施的優(yōu)化,成為提升訓(xùn)練性能的關(guān)鍵。智譜AI與華為的合作,正是在這一背景下展開的,雙方共同投入團(tuán)隊,分布式協(xié)作,成功推出了國產(chǎn)大模型訓(xùn)練解決方案。
張鵬還透露,智譜AI的明星產(chǎn)品CodeGeeX,就是在疫情期間與華為合作完成的。雙方團(tuán)隊分布式協(xié)作,完成了算法調(diào)優(yōu)、集群穩(wěn)定性維護(hù)、inference構(gòu)建等工作。經(jīng)過四年的迭代升級,CodeGeeX已經(jīng)發(fā)展成為具有強大功能的國產(chǎn)大模型。
昇思MindSpore開源社區(qū)理事長丁誠在會上強調(diào),大模型技術(shù)正在以指數(shù)級速度演進(jìn),這對深度學(xué)習(xí)框架提出了更高的挑戰(zhàn)。昇思MindSpore重點關(guān)注大模型參數(shù)量、序列長度和模態(tài)結(jié)構(gòu)的優(yōu)化,以及多模型協(xié)同交互下的復(fù)雜編程問題。通過不斷的技術(shù)創(chuàng)新,昇思正在逐步解決這些問題,提升大模型的訓(xùn)練性能。
自2020年開源以來,昇思MindSpore已經(jīng)取得了顯著的成果。目前,它已經(jīng)孵化并支持了50多個國內(nèi)外主流大模型,開源版本累計下載量達(dá)到1100萬次,覆蓋全球130多個國家和地區(qū)。還有3.7萬多名開發(fā)者參與了社區(qū)貢獻(xiàn),共同推動了昇思的發(fā)展。
在教育科研領(lǐng)域,昇思也與360多所高??蒲性核归_了合作,聯(lián)合1700多位生態(tài)伙伴,共同打造了超過2000個解決方案。這些成果不僅推動了AI技術(shù)的發(fā)展,也為科研創(chuàng)新提供了有力的支持。PaperwithCode網(wǎng)站顯示,基于昇思的原創(chuàng)論文發(fā)表數(shù)量已經(jīng)累計超過1700篇,位列全球第二、中國第一。
隨著國產(chǎn)深度學(xué)習(xí)框架的崛起,中國AI框架市場的競爭格局正在發(fā)生深刻的變化。據(jù)預(yù)測,到2024年,中國AI框架新增市場中,昇思的份額將達(dá)到30%。這一數(shù)據(jù)不僅彰顯了昇思的強勁實力,也為中國AI產(chǎn)業(yè)的發(fā)展注入了新的活力。