C-公布Eval中文大模型排名 云從科技位列百億模型第一。
上證報(bào)中國證券網(wǎng)訊(記者 宋薇萍)8月21日,云從科技正式發(fā)布1.5版坦然大模型。本版本包括10億、100億、1000億模型規(guī)格,實(shí)際測(cè)量性能在全球大模型綜合測(cè)試中進(jìn)行評(píng)價(jià)。(C-Eval)在百億級(jí)中排名第一,總排名第四。

C-Eval是由清華大學(xué)、上海交通大學(xué)和愛丁堡大學(xué)聯(lián)合打造的中文語言模型綜合考試評(píng)價(jià)集,包括52個(gè)不同學(xué)科和4個(gè)難度等級(jí)(初中、高中、大學(xué)和專業(yè))的13948道選擇題,是判斷模型潛力最權(quán)威的模型之一。
據(jù)報(bào)道,為解決大模型落地問題,1.5版本的重點(diǎn)是參數(shù)為130億(13B)的行業(yè)大模型。這種模型是從1000億元的大模型中蒸餾出來的,52類測(cè)試指標(biāo)包括44類超過ChatGPT。、超過GPT-4的29類,距離坦然大模型正式發(fā)布才過去兩個(gè)多月。
與此同時(shí),冷靜大模型1.5版本針對(duì)行業(yè)大模型進(jìn)行了有針對(duì)性的改進(jìn),提高了金融、政務(wù)、零售、交通、安全、能源、教育、醫(yī)療、娛樂等行業(yè)的行業(yè)數(shù)據(jù)比例,重點(diǎn)培養(yǎng)了行業(yè)領(lǐng)域的下游任務(wù)。與此同時(shí),模型前后文的長度(Context length)更加完成了32K Tokens,超過了世界上大多數(shù)模型的2k到8k水平。與此同時(shí),坦然大模型對(duì)中文編碼器進(jìn)行了深度提升,一個(gè)中文漢字的平均值僅占0.7Tokens,這樣就使得1.5版本支持的大模型前后文長度超過45,000字。
云從科技表示,未來將繼續(xù)加大R&D投資,不斷優(yōu)化AI模型,促進(jìn)人工智能與實(shí)體經(jīng)濟(jì)的協(xié)調(diào)發(fā)展,深入?yún)⑴c數(shù)字中國建設(shè),為現(xiàn)代化發(fā)展注入新動(dòng)能。
本文僅代表作者觀點(diǎn),版權(quán)歸原創(chuàng)者所有,如需轉(zhuǎn)載請(qǐng)?jiān)谖闹凶⒚鱽碓醇白髡呙帧?/p>
免責(zé)聲明:本文系轉(zhuǎn)載編輯文章,僅作分享之用。如分享內(nèi)容、圖片侵犯到您的版權(quán)或非授權(quán)發(fā)布,請(qǐng)及時(shí)與我們聯(lián)系進(jìn)行審核處理或刪除,您可以發(fā)送材料至郵箱:service@tojoy.com