百度在近期舉辦的Create大會上，向外界透露了一項重大技術(shù)突破——成功點亮了國內(nèi)首個完全自主研發(fā)的三萬卡大規(guī)模計算集群。這一集群擁有前所未有的能力，能夠同時支持多個千億級別參數(shù)的大模型進行全量訓(xùn)練，這對于推動人工智能技術(shù)的發(fā)展無疑是一個巨大的飛躍。
據(jù)悉，該集群不僅在硬件規(guī)模上達到了國內(nèi)頂尖水平，更在軟件層面進行了深度優(yōu)化。特別是其構(gòu)建的超大規(guī)模高性能網(wǎng)絡(luò)，確保了集群在執(zhí)行大規(guī)模訓(xùn)練任務(wù)時的穩(wěn)定性和高效性。這一網(wǎng)絡(luò)的設(shè)計，充分考慮了大數(shù)據(jù)傳輸和并行計算的需求，為集群的高效運行提供了堅實的保障。
除了硬件和網(wǎng)絡(luò)的優(yōu)化，百度還在集群的散熱方案上進行了創(chuàng)新。他們設(shè)計了一種全新的散熱系統(tǒng)，能夠顯著降低能耗，提高能源利用效率。這一方案不僅有助于降低集群的運行成本，更在環(huán)保和可持續(xù)發(fā)展方面邁出了重要一步。
該集群還具備強大的客戶支持能力。它能夠同時支持1000個客戶進行百億參數(shù)級別的大模型精調(diào)，這無疑為各行各業(yè)的AI應(yīng)用提供了強大的技術(shù)支持。無論是金融、醫(yī)療、教育還是其他領(lǐng)域，都可以通過這一平臺快速構(gòu)建和優(yōu)化自己的AI模型，推動業(yè)務(wù)的智能化升級。
