首頁 > 資訊 > 聚焦 > 正文

SuperCLUE 最新評測發(fā)布
，山海大模型穩(wěn)居全球大模型第一梯隊(duì)

2024-07-12 14:27:18來源：今日熱點(diǎn)網(wǎng)

7月9日

，SuperCLUE發(fā)布《中文大模型基準(zhǔn)測評2024上半年報(bào)告》

，報(bào)告選取國內(nèi)外有代表性的33個大模型在6月份的版本

，通過多維度綜合性測評

，對國內(nèi)外大模型發(fā)展現(xiàn)狀進(jìn)行觀察與思考

。

報(bào)告顯示

，云知聲山海大模型在本次半年度評測中取得總分72的優(yōu)異成績

，與360gpt2-pro

、字節(jié)跳動豆包、月之暗面Kimi

、百川智能Baichuan4并列國內(nèi)大模型第四

，穩(wěn)居全球大模型第一梯隊(duì)。

SuperCLUE作為國內(nèi)權(quán)威通用大模型綜合性測評基準(zhǔn)

，其前身可追溯至第三方中文語言理解評估基準(zhǔn)CLUE(The Chinese Language Understanding Evaluation)

。自2019年成立以來，CLUE基準(zhǔn)一直致力于提供科學(xué)、客觀

、中立的語言模型評測

，其先后推出了CLUE、FewCLUE

、KgCLUE

、DataCLUE等多個被廣泛認(rèn)可的評估標(biāo)準(zhǔn)。根據(jù)CLUE多年測評經(jīng)驗(yàn)

，SuperCLUE基于通用大模型在學(xué)術(shù)

、產(chǎn)業(yè)與用戶側(cè)的廣泛應(yīng)用，構(gòu)建了多層次

、多維度的綜合性測評基準(zhǔn)

。

作為一個完全獨(dú)立的第三方評測機(jī)構(gòu)，SuperCLUE采用自動化評測技術(shù)

，有效消除人為因素帶來的不確定性

，確保提供無偏倚的客觀評測結(jié)果。不同于傳統(tǒng)測評通過選擇題形式的測評

，SuperCLUE納入開放主觀問題的測評

，通過多維度多視角多層次的評測體系以及對話的形式，模擬大模型的應(yīng)用場景

，真實(shí)有效考察模型生成能力。與此同時

，SuperCLUE根據(jù)全球的大模型技術(shù)發(fā)展趨勢

，不斷升級迭代測評體系、測評維度和方法

，以保證盡可能精準(zhǔn)量化大模型的技術(shù)演進(jìn)程度

。

為進(jìn)一步真實(shí)反映大模型能力，本次通用測評采用多維度

、多層次的綜合性測評方案

，由理科、文科和Hard三大維度構(gòu)成：理科任務(wù)分為計(jì)算

、邏輯推理

、代碼測評集;文科任務(wù)分為知識百科、語言理解

、長文本

、角色扮演、生成與創(chuàng)作

、安全和工具使用七大測評集;Hard任務(wù)聚焦精確指令遵循測評集

，未來將陸續(xù)推出復(fù)雜多步推理和高難度問題解決等評測。

從代表通用能力的一級總分來看，山海大模型得分72

，與360gpt2-pro

、字節(jié)跳動豆包、月之暗面Kimi

、百川智能Baichuan4并列國內(nèi)大模型第四

，位居全球大模型第一梯隊(duì)。

具體到二級維度得分

，山海大模型在理科和文科領(lǐng)域均表現(xiàn)優(yōu)異——在理科能力方面

，山海大模型以76分的高分緊隨GPT-4o、GPT-4-Turbo-0409之后

，力壓一眾國內(nèi)大模型

，并列排名國內(nèi)第一;文科能力以75分的成績并列國內(nèi)第二，實(shí)力同樣不容小覷

。

在SuperCLUE基于基礎(chǔ)能力和應(yīng)用能力兩個維度構(gòu)建的模型象限圖中

，山海大模型被定位為“卓越領(lǐng)導(dǎo)者”。這一分類反映了山海大模型在基礎(chǔ)和場景應(yīng)用能力上均達(dá)到了領(lǐng)先水平

，持續(xù)引領(lǐng)國內(nèi)大模型技術(shù)發(fā)展和創(chuàng)新

。

此外，與GPT4-Turbo-0409的對戰(zhàn)勝率統(tǒng)計(jì)數(shù)據(jù)顯示

，山海勝率為17.67%

，和率為65.37%，位列國內(nèi)大模型第五

，整體實(shí)力依舊不俗

。

自2023年5月問世以來，山海大模型已相繼在C-Eval全球大模型綜合性評測

、OpenCompass大模型評測

、MedBench評測等多個權(quán)威評測中屢創(chuàng)佳績，充分展現(xiàn)出業(yè)界一流的通用能力和領(lǐng)先于世界的行業(yè)大模型能力

。

正如報(bào)告所言

，隨著技術(shù)進(jìn)步和應(yīng)用場景拓展，2024年下半年國內(nèi)外大模型市場競爭將持續(xù)加劇

，推動技術(shù)創(chuàng)新和產(chǎn)業(yè)升級

。接下來，云知聲將繼續(xù)保持大模型能力穩(wěn)步提升

，以山海為抓手

，在產(chǎn)業(yè)側(cè)實(shí)現(xiàn)加速落地，致力成為真正助力各行各業(yè)的“新質(zhì)生產(chǎn)力”

。

關(guān)鍵詞：

責(zé)任編輯：孫知兵

免責(zé)聲明：本文僅代表作者個人觀點(diǎn)

，與太平洋財(cái)富網(wǎng)無關(guān)

。其原創(chuàng)性以及文中陳述文字和內(nèi)容未經(jīng)本站證實(shí)，對本文以及其中全部或者部分內(nèi)容

、文字的真實(shí)性

、完整性、及時性本站不作任何保證或承諾

，請讀者僅作參考

，并請自行核實(shí)相關(guān)內(nèi)容。
如有問題

，請聯(lián)系我們

！

SuperCLUE 最新評測發(fā)布，山海大模型穩(wěn)居2024-07-12
五彩龍巖亮相成都2024-07-12
斷奶參考嬰兒奶粉十大名牌排行榜選合生元奶2024-07-12
16歲小將亞馬爾閃耀全場
，阿迪達(dá)斯祝賀西班2024-07-12
打造零碳港口新標(biāo)桿遠(yuǎn)程X7E純電牽引車批2024-07-12
尚牌“龍頭套”火爆出圈
，蒼井空為其復(fù)出創(chuàng)2024-07-12
ELASUN尚牌銷量破10億，蒼井空現(xiàn)身復(fù)出創(chuàng)“2024-07-12
80后老板一擲萬金蒼井空聯(lián)動ELASUN尚牌送福利2024-07-12
腋下脫毛的最佳方法：薇婷Pure凈純系列脫毛2024-07-12
80后老板萬元買尚牌龍頭套喜提蒼老師親筆2024-07-12
無人機(jī)配送：低空經(jīng)濟(jì)新引擎
，重塑未來生活2024-07-12
vivo自研藍(lán)河操作系統(tǒng)面向全行業(yè)開發(fā)者尋找2024-07-12
恒潔閃裝3.0解決"煥新"難題
，提振品質(zhì)衛(wèi)浴2024-07-12
有客瑤來，健康無添加龍牙百合專家供應(yīng)商2024-07-12
“以客戶為先” 京東快遞小哥在阿那亞戲劇2024-07-12
和也好聲音丨聆聽嘉興退休醫(yī)務(wù)工作者與和也2024-07-12
海底撈換帥
，將開啟多元發(fā)展模式2024-07-12
老赤坊榮耀41年再出發(fā)
，多系列爆款回饋客戶2024-07-12
蒼井空親筆題詞送祝福，ELASUN尚牌獲消費(fèi)者2024-07-12
科學(xué)防治激素臉薈敏堂中醫(yī)治則有絕招2024-07-12
購買尚牌避孕套附贈蒼井空字畫
，尚牌產(chǎn)品熱2024-07-12
全網(wǎng)票據(jù)流量主入口深度數(shù)科：挖掘票據(jù)數(shù)字2024-07-12
優(yōu)鏈學(xué)堂-姜宏鋒：采購降本的5項(xiàng)障礙2024-07-12
注重創(chuàng)新與產(chǎn)業(yè)布局
，新恒匯具備較強(qiáng)市場競2024-07-12
尼爾森IQ（NIQ） 2024首屆商業(yè)新銳計(jì)劃大2024-07-12
票據(jù)行業(yè)服務(wù)代表深度數(shù)科企服平臺點(diǎn)亮中2024-07-12
行業(yè)首批！箭牌家居電子坐便器全機(jī)種獲國家2024-07-12
共探AGI之路
，云知聲出席“通用人工智能：2024-07-12
你我貸科普:揭秘時下互聯(lián)網(wǎng)金融平臺的運(yùn)作2024-07-12
FlyDeliver獲數(shù)千萬融資,加速IPO步伐2024-07-11

精彩推薦

，同比增長9%">

8月末社會融資規(guī)模存量為368.61萬億元，同比增長9%

，同比增長9%">8月末社會融資規(guī)模存量為368.61萬億元

，同比增長9%

，同比增長9%">8月末社會融資規(guī)模存量為368.61萬億元

，...

？">貸款平穩(wěn)增長

，“組合拳”持續(xù)發(fā)力——8...

Mysteel早讀：黑色期貨夜盤飄紅

，寶武10...

招商蛇口更換掌舵人:“老將”蔣鐵峰升任...

搭檔超20年合伙人反目,董事長把副董事長...

？">中國探月工程首任首席科學(xué)家：下一步我...

好消息

！奉賢4座口袋公園改造提升工程即...

cf體驗(yàn)服資格是永久的嗎（cf體驗(yàn)版）

，稱香港特區(qū)政府會全力應(yīng)對并總結(jié)經(jīng)驗(yàn)">李家超昨日下午視察災(zāi)情，稱香港特區(qū)政...

存內(nèi)控獨(dú)立性不足等問題

，證監(jiān)會對華西...

！2號種子拒絕爆冷，2-1逆轉(zhuǎn)

，高芙對手出爐">美網(wǎng)決賽對陣出爐

！2號種子拒絕爆冷，2-...

千里走單騎的內(nèi)容概括100字（千里走單騎...

？看看你就知道了">洋錢罐借款怎么樣容易下款嗎

？看看你就...

Mysteel晚餐：唐山鋼坯下調(diào)40

，高爐電爐...

9月8日：“農(nóng)產(chǎn)品批發(fā)價格200指數(shù)”比昨...

五彩龍巖亮相成都

！">斷奶參考嬰兒奶粉十大名牌排行榜...

，阿迪達(dá)斯祝賀西班牙隊(duì)2:1戰(zhàn)勝法國隊(duì)">16歲小將亞馬爾閃耀全場，阿迪達(dá)...

打造零碳港口新標(biāo)桿遠(yuǎn)程X7E純...

，有效脫毛更養(yǎng)膚">腋下脫毛的最佳方法：薇婷Pure凈...

，重塑未來生活圖景">無人機(jī)配送：低空經(jīng)濟(jì)新引擎，重...

vivo自研藍(lán)河操作系統(tǒng)面向全行業(yè)...

，提振品質(zhì)衛(wèi)浴消費(fèi)信心">恒潔閃裝3.0解決"煥新"難題

，提...

？產(chǎn)業(yè)鏈?zhǔn)鞘裁矗?>有客瑤來

，健康無添加龍牙百合專...

五彩龍巖亮相成都
上一篇2024-07-12 13:51:37

關(guān)于我們　-　聯(lián)系方式　-　版權(quán)聲明　-　招聘信息　-　友鏈交換　-　網(wǎng)站統(tǒng)計(jì)

太平洋財(cái)富主辦版權(quán)所有：太平洋財(cái)富網(wǎng)

?中國互聯(lián)網(wǎng)違法和不良信息舉報(bào)中心

未經(jīng)過本站允許請勿將本站內(nèi)容傳播或復(fù)制業(yè)務(wù)QQ：3 31 986 683

感谢您访问我们的网站，您可能还对以下资源感兴趣：

五月婷婷操大逼,我和岳坶一起看片,久久精品无码一区二区三区,好硬好大我还要好爽视频,日本99热爱精品,日韩美女乱婬试看视频网站 ,寡妇下面水多好紧视频 ,亚洲AⅤ一区二区三区,色www亚洲国产张柏芝,亚洲av无码男人的天堂无广告,精品久久久久久久免费自慰,久久精品国产大片免费观看,AV影片影音先锋一本大道香蕉,香蕉97超级碰碰碰免费公开 ,啊轻点好爽在线观看,亚洲视频欧美不卡,久久精品国产99久

456亚洲人成在线播放网站国产污污网站免费看波多野结衣性爱网站精品自拍日本日韩少妇150P 久久91精品国产91久久免费A片伦费影视在线观看亚洲国产一二 99久久et这里只有精品18 亚洲AV美女一区二区三区国产成人在线综合网一区二区免费在线视频 XXXX日本高清1 男男gv在线播放网站亚洲亚洲日韩国产新品天堂在线日本不卡一区色多多国产AV二区三区最近中文字幕大全免费日本亚州视频在线八a 妺妺窝人体色www金莲精品欧美伦欲视频精品国产亚洲第一区二区三区国产成人精品一区二三区2023 中日韩人妻一级精品毛片午夜视频在线在免费视频亚洲啊啊啊啊 2021在线看片免费人成视频激情综合亚洲九月色亚洲va中文字幕不卡无码免费无限永久在线观看污污网址看男女日皮视频在线观看青青草国产播放视频黄色一级视频免费看国内精品自产拍在线观看亚洲欧美日产综合在线网性色亚洲中文自拍另类Av片成人一级黄片免费观看最新国产精品自在线观看国产福利第一导航呦男呦女精品视频八区在线的最新免费国产国产中文字幕亚洲精品宅男福利导航紧身裙连裤袜波多野结衣欧美成综合网站少妇久久综合 A片调教在线免费播放网址欧美3d怪物H动漫播放白丝jk插进去喷水视频粗大掹烈进出高潮视频 2021精品亚洲中文字幕最刺激的乱惀小说喷水网国产美女遭强开双腿在线观看农村国产一级一级A片一性一交一口添一摸视频超级碰碰青草免费视频APP 久久精品国产大片免费观看国产精品毛片va一区二区三区国产美女视频免费曰批免费视频观看40分钟中文字幕在线永久视频国产精品所白浆视频又色又粗又长又大的三级久久久精品免费齐齐国产精品自拍自偷伊人色综合一区二区三区强行交换配乱婬bd 久久中文字幕系列 mm1313国产精品久久尤物92福利视频午夜1000合集 97国产最新免费公开视频丝袜美腿视频一区二区三区 aⅴ调教视频国产精品一区二区丝瓜国产精品成熟老女人风间由美性色一区二区三区亚洲国产精品激情一区二区 91新超碰极品盛宴分类 XX一个色综合国产色综合午夜福利合集青青青视频自偷自拍在线观看免费AV啊啊啊啊不要青青草成人视频在线视频偷拍亚州av综合色区无码一区亚洲另类自拍图五月丁香激情综合视频国产精品1000部在线观看亚洲一区二区不三区不卡国产精品情侣自拍又粗又大又爽又紧免费视频亚洲日韩AV中字在线网站亚洲有码一区二区三区视频亚洲AV成人片色欲在线观看品久久二区三区久草欧美精品国产丰满麻豆videosshd 精品不卡一区二区日本XXXX视频在线观看免费国产精品亚洲小说专区白丝jk国产一区二区三区伊在人天堂亚洲香蕉精品区国产综合日本亚洲777 张开腿无遮无挡在线观看久久久久久久99精品免费观看中文乱码一区高潮在线喷另类老妇性BBWBBW 超清中文乱码字幕在线观看国产三寸白浆喷潮直流视频少妇一区二区三区黄亚洲中文字幕乱码电影国产精品亚洲日韩久久亚洲中文字幕久久无码精品国外欧美一区二区中美日韩印度亚洲综合在线国产区精品系列在线观看不免费又爽又刺激的网站美女被狂插出水茄子在线看片免费人成视频亚洲性色成人av天堂黄、作爱免费视频亚洲狂野国产AV 手机看片久久国产永久免费好男人www 中文字幕婷婷日韩欧美亚洲白洁国产剧情Av手机在线尤物成人影院yw193在线观看欧美v亚洲v日韩v最新在线国产未满十八岁午夜欧美老妇理论片白浆高潮国产免费精品国产高清一区二区三区国产嫖妓一区二区三区无码国产精品1区2区3区在线播放 h娇喘喷水抽搐高潮视频欧美乱妇日本无乱码特黄大片国内私拍哺乳精品视频又大又粗又长外国一级黄在线看片免费人成视频在线观看亚洲精品福利片欧美孕妇变态重口另类欧美亚洲综合在线国产91麻豆免费观看 h视频网站黄国产情侣草莓视频在线色五五月五月开在线观看九九热精品免费观看 992免费视频网站十八禁网站gay 亚洲午夜福利在线视频女人把私人部位扒开视频在线看 www欧美性爱色露一区二区亚洲Aⅴ天堂在线观看忘忧草在线社区www日本亚欧性爱欧美日韩国产一区二区国产精品亚洲二区在线看疯狂做受DVD免费播放 99久久国产综合精品无码 a女激情视频在线观看日本高清=区视频在线

SuperCLUE 最新評測發(fā)布，山海大模型穩(wěn)居全球大模型第一梯隊(duì)

精彩推薦

閱讀排行

推薦閱讀

SuperCLUE 最新評測發(fā)布
，山海大模型穩(wěn)居全球大模型第一梯隊(duì)