10月16日,C-Eval大模型評測榜單更新,榜單顯示,vivo自研大模型在C-Eval全球中文榜單中排名第一。vivo相關負責人透露,vivo自研AI大模型將會在即將發布的OriginOS 4系統中被首次應用,其中包括十億、百億、千億三個不同參數量級的5款自研大模型,全面覆蓋核心應用場景。
C-Eval榜單是由清華大學、上海交通大學和愛丁堡大學合作構建的面向中文語言模型的綜合性考試評測集,涵蓋52個不同學科,共有13948道多項選擇題,是目前較為權威的中文AI大模型評測榜單。CMMLU數據集則是一個綜合性的中文評估基準,由MBZUAI、上海交通大學、微軟亞洲研究院共同推出,在評估語言模型在中文語境下的知識和推理能力方面極具權威性。


【來源:鳳凰網科技】






