【ITBEAR】近日，浪潮信息的源2.0開源大模型宣布與百度PaddleNLP實(shí)現(xiàn)全面適配，這一舉措為用戶提供了全新的體驗(yàn)。通過PaddleNLP，用戶可以迅速調(diào)用源2.0預(yù)訓(xùn)練大模型，并應(yīng)用其在語義理解、數(shù)學(xué)計(jì)算、邏輯推理、代碼編寫及知識處理等多方面的強(qiáng)大能力。同時(shí)，用戶還能夠根據(jù)特定領(lǐng)域的數(shù)據(jù)集對模型進(jìn)行微調(diào)，以滿足個(gè)性化的業(yè)務(wù)需求。此次適配標(biāo)志著源2.0大模型成功融入飛槳生態(tài)，進(jìn)一步豐富了PaddleNLP的大模型庫。
PaddleNLP作為百度基于飛槳框架開發(fā)的大語言模型套件，匯聚了業(yè)界眾多優(yōu)質(zhì)的預(yù)訓(xùn)練模型，為用戶提供了開箱即用的便捷開發(fā)體驗(yàn)。其覆蓋的NLP多場景模型庫，搭配產(chǎn)業(yè)實(shí)踐范例，為用戶帶來了極大的便利。而源2.0系列基礎(chǔ)大模型，作為首個(gè)全面開源的千億參數(shù)模型，擁有1026億、518億、21億三種不同參數(shù)規(guī)模的版本，在對話問答、編程以及邏輯推理等多個(gè)領(lǐng)域均展現(xiàn)出了卓越的能力。基于PaddleNLP內(nèi)置的預(yù)訓(xùn)練-微調(diào)-推理全流程，源2.0支持大模型的數(shù)據(jù)并行、數(shù)據(jù)分組切片并行以及模型并行，提供了高性能的分布式訓(xùn)練與推理技術(shù)。同時(shí)，它還能夠在無需修改的情況下適配多種硬件，實(shí)現(xiàn)了高效訓(xùn)練和推理。
