vivo大模型云端方案現(xiàn)身C-Eval 性能直逼GPT-4

(資料圖)

【太平洋科技資訊】8月16日消息，國(guó)產(chǎn)手機(jī)品牌相繼升級(jí)其人工智能大模型后，vivo自研的大模型云端方案也已經(jīng)在C-Eval排行榜上露面，預(yù)計(jì)可能會(huì)在其OriginOS 4中為Jovi助手帶來(lái)全新的體驗(yàn)。

據(jù)悉，C-Eval是一個(gè)全面的中文基礎(chǔ)模型評(píng)估套件，包含了13948個(gè)多項(xiàng)選擇題，涵蓋了人文、社科、理工以及其他專業(yè)四個(gè)大方向，包括52個(gè)不同的學(xué)科和四個(gè)難度級(jí)別。這一評(píng)估套件的存在，為AI大模型的研發(fā)和測(cè)試提供了全面而深入的評(píng)估標(biāo)準(zhǔn)。

根據(jù)C-Eval給出的信息，vivo_Agent_LM_7B是由vivo AI全球研究院自主研發(fā)的大規(guī)模預(yù)訓(xùn)練語(yǔ)言模型，從命名可以看出，該模型擁有高達(dá)70億的參數(shù)。

值得關(guān)注的是，在 C-Eval 官網(wǎng)剛剛更新的大模型評(píng)測(cè)榜中，vivo_Agent_LM_7B的得分為64.4分，位列C-Eval排行榜的第五名，同時(shí)vivo也是目前的手機(jī)品牌中排名最高的一位，與第二名的GPT-4相差無(wú)幾，甚至在人文領(lǐng)域的表現(xiàn)更為出色，同時(shí)在社會(huì)科學(xué)領(lǐng)域也有著不錯(cuò)的表現(xiàn)。

繼華為的小藝、小米的小愛(ài)同學(xué)以及OPPO的小布助手升級(jí)了其人工智能大模型能力之后，vivo也開(kāi)始在這一領(lǐng)域積極布局。目前，華為、小米、OPPO的相關(guān)大模型以及全新的智能助手已經(jīng)開(kāi)始或即將開(kāi)始進(jìn)行測(cè)試。vivo_Agent_LM_7B這一結(jié)果無(wú)疑證明了vivo在AI大模型領(lǐng)域的研發(fā)實(shí)力，也預(yù)示著其在未來(lái)智能助手領(lǐng)域可能帶來(lái)的新的突破。

關(guān)鍵詞：