【ITBEAR】近日,浪潮信息的源2.0開(kāi)源大模型宣布與百度PaddleNLP實(shí)現(xiàn)全面適配,這一舉措為用戶(hù)提供了全新的體驗(yàn)。通過(guò)PaddleNLP,用戶(hù)可以迅速調(diào)用源2.0預(yù)訓(xùn)練大模型,并應(yīng)用其在語(yǔ)義理解、數(shù)學(xué)計(jì)算、邏輯推理、代碼編寫(xiě)及知識(shí)處理等多方面的強(qiáng)大能力。同時(shí),用戶(hù)還能夠根據(jù)特定領(lǐng)域的數(shù)據(jù)集對(duì)模型進(jìn)行微調(diào),以滿(mǎn)足個(gè)性化的業(yè)務(wù)需求。此次適配標(biāo)志著源2.0大模型成功融入飛槳生態(tài),進(jìn)一步豐富了PaddleNLP的大模型庫(kù)。
PaddleNLP作為百度基于飛槳框架開(kāi)發(fā)的大語(yǔ)言模型套件,匯聚了業(yè)界眾多優(yōu)質(zhì)的預(yù)訓(xùn)練模型,為用戶(hù)提供了開(kāi)箱即用的便捷開(kāi)發(fā)體驗(yàn)。其覆蓋的NLP多場(chǎng)景模型庫(kù),搭配產(chǎn)業(yè)實(shí)踐范例,為用戶(hù)帶來(lái)了極大的便利。而源2.0系列基礎(chǔ)大模型,作為首個(gè)全面開(kāi)源的千億參數(shù)模型,擁有1026億、518億、21億三種不同參數(shù)規(guī)模的版本,在對(duì)話(huà)問(wèn)答、編程以及邏輯推理等多個(gè)領(lǐng)域均展現(xiàn)出了卓越的能力?;赑addleNLP內(nèi)置的預(yù)訓(xùn)練-微調(diào)-推理全流程,源2.0支持大模型的數(shù)據(jù)并行、數(shù)據(jù)分組切片并行以及模型并行,提供了高性能的分布式訓(xùn)練與推理技術(shù)。同時(shí),它還能夠在無(wú)需修改的情況下適配多種硬件,實(shí)現(xiàn)了高效訓(xùn)練和推理。