国产精品亚洲mnbav网站_成人午夜亚洲精品无码网站_日韩va亚洲va欧洲va国产_亚洲欧洲精品成人久久曰影片

全球百模爭霸,國產大模型拿下多個冠軍!智源FlagEval全球評測榜單出爐

AIGC動態9個月前發布 新智元
329 0 0

全球百模爭霸,國產大模型拿下多個冠軍!智源FlagEval全球評測榜單出爐

原標題:全球百模爭霸國產大模型拿下多個冠軍!智源FlagEval全球評測榜單出爐
文章來源:新智元
內容字數:5822字

智源研究院發布2024下半年大模型評測結果

1. **評測概述:** 智源研究院發布了2024年下半年大模型綜合評測結果,涵蓋100多個開源和閉源模型,評估范圍涵蓋文本、語音、圖像和視頻等多個領域。本次評測相比5月份的評估,在任務難度、評估維度和應用場景上都有顯著提升,新增了數據處理、高級編程、工具調用以及金融量化交易等方面的評估。

2. **語言模型評測:** 在語言模型主觀評測中,字節跳動Doubao-pro-32k-preview和百度ERNIE 4.0 Turbo表現最佳;客觀評測中,OpenAI o1-mini-2024-09-12和Google Gemini-1.5-pro-latest領先。總體而言,在一般中文場景下,模型能力趨于飽和,但在復雜場景下,國內頭部模型與國際一流水平仍存在差距。

3. **多模態模型評測:** 多模態模型發展迅速,視覺語言模型中,開源模型在圖文理解任務上正在縮小與閉源模型的差距;文生圖模型已具備中文文字生成能力,但復雜場景下的表現仍需提升;文生視頻模型的畫質和動態性有所提升,但仍存在動作變形、物理規律理解不足等問題。各個模態的領先模型分別為:視覺語言模型方面,OpenAI GPT-4o-2024-11-20和字節跳動Doubao-Pro-Vision-32k-241028領先;文生圖模型方面,騰訊Hunyuan Image位列第一;文生視頻模型方面,快手可靈1.5領先。

4. **語音語言模型評測:** 語音語言模型能力提升顯著,但與專業模型仍存在差距,高性能的開源模型相對較少。阿里巴巴Qwen2-Audio在專項評測中排名第一。

5. **K12學科測驗:** 智源研究院再次聯合海淀區教師進修學校進行K12學科測驗,模型綜合得分較半年前提升12.86%,但在部分學科上仍與人類學生存在差距,呈現出“文強理弱”的偏科現象。某些模型在英語和歷史科目上的表現甚至超越了人類考生的平均分。

6. **FlagEval平臺評測:** FlagEval大模型角斗場和FlagEval Debate平臺對模型進行了用戶偏好和辯論能力的評估。用戶更傾向于模型提供結構化、標準化的輸出;模型在辯論中普遍缺乏邏輯框架和論據支撐,更擅長反駁而非論證。

7. **金融量化交易評測:** 評測探索了大模型在金融量化交易領域的應用,發現頭部模型已具備生成有回撤收益的策略代碼的能力,部分模型能力接近初級量化交易員水平。

8. **FlagEval平臺迭代:** FlagEval平臺持續迭代,已覆蓋全球800多個開閉源模型,并不斷更新評測數據集和方法,以確保評測的科學性和權威性。 智源研究院致力于打造一個公正、開放的大模型評測平臺,為大模型技術生態發展提供參考。


聯系作者

文章來源:新智元
作者微信:
作者簡介:智能+中國主平臺,致力于推動中國從互聯網+邁向智能+新紀元。重點關注人工智能、機器人等前沿領域發展,關注人機融合、人工智能和機器人對人類社會與文明進化的影響,領航中國新智能時代。

閱讀原文
? 版權聲明
蟬鏡AI數字人

相關文章

蟬鏡AI數字人

暫無評論

暫無評論...
国产精品亚洲mnbav网站_成人午夜亚洲精品无码网站_日韩va亚洲va欧洲va国产_亚洲欧洲精品成人久久曰影片
<span id="3dn8r"></span>
    1. <span id="3dn8r"><optgroup id="3dn8r"></optgroup></span><li id="3dn8r"><meter id="3dn8r"></meter></li>

        日本不卡高清视频| 亚洲欧洲韩国日本视频| xnxx国产精品| 国产精品乡下勾搭老头1| 国产日韩精品久久久| 91视频91自| 亚洲综合一区二区三区| 欧美日韩二区三区| 国产美女精品人人做人人爽| 久久精品视频一区| 日本道色综合久久| 久久精品国产77777蜜臀| 国产精品久久久久久久第一福利| 欧美日韩午夜在线视频| 精品在线亚洲视频| 一区二区三区蜜桃| 久久久久久久免费视频了| 日本丶国产丶欧美色综合| 狠狠色狠狠色综合系列| 亚洲一区免费观看| 国产欧美日韩在线视频| 91国在线观看| 成人伦理片在线| 奇米色一区二区三区四区| 国产精品美女久久久久aⅴ国产馆| 色婷婷综合久久久久中文一区二区| 美女视频一区在线观看| 亚洲欧美韩国综合色| 国产亚洲欧美日韩俺去了| 欧美综合在线视频| www.欧美亚洲| 久久精品国产**网站演员| 亚洲人成伊人成综合网小说| 91精品国产色综合久久ai换脸 | 99精品国产热久久91蜜凸| 亚洲国产日产av| 亚洲欧洲日本在线| 精品国产区一区| 欧美乱熟臀69xxxxxx| 99re视频精品| 国产成人综合视频| 精品中文字幕一区二区| 日韩激情av在线| 一区二区不卡在线视频 午夜欧美不卡在| 欧美变态口味重另类| 8v天堂国产在线一区二区| 在线观看av一区二区| 91麻豆精品在线观看| 北条麻妃国产九九精品视频| 国产成人亚洲综合a∨婷婷| 国产综合成人久久大片91| 九色综合国产一区二区三区| 久久国产剧场电影| 国产一区二区三区蝌蚪| 久久99精品久久久久久| 另类专区欧美蜜桃臀第一页| 石原莉奈在线亚洲二区| 奇米一区二区三区av| 美女视频黄久久| 麻豆一区二区三区| 国产精品亚洲一区二区三区在线| 精品一区二区免费| 精品在线你懂的| 国产东北露脸精品视频| 99精品久久久久久| 欧美日韩国产123区| 日韩免费高清av| 国产精品视频一二三区| 亚洲视频在线一区| 亚洲国产精品影院| 久久99久久99精品免视看婷婷 | 欧美日韩午夜在线视频| 欧美精品一二三四| 亚洲国产va精品久久久不卡综合| 亚洲国产精品久久艾草纯爱 | 精品亚洲porn| 国产成人在线免费观看| 国产精品一级在线| 91猫先生在线| 欧美一区二区三区免费视频| 日韩一级大片在线| 国产亚洲精品aa午夜观看| 中文字幕一区二区三区在线不卡 | 日韩欧美在线综合网| 欧美电影免费观看高清完整版| 国产欧美一区二区三区网站| 亚洲精品亚洲人成人网| 久久电影网电视剧免费观看| 成人av资源下载| 欧美丰满高潮xxxx喷水动漫| 国产午夜精品久久久久久免费视 | 免费人成精品欧美精品| 国产成人综合视频| 欧美美女一区二区在线观看| 国产日产亚洲精品系列| 午夜精品福利一区二区三区av | 亚洲1区2区3区视频| 国产美女精品人人做人人爽| 日本高清不卡一区| 国产精品亲子伦对白| 日韩黄色在线观看| 91片在线免费观看| 久久久精品国产免大香伊| 亚洲国产精品久久久久婷婷884| 国产精品99久久久久| 7777精品伊人久久久大香线蕉 | 26uuu国产日韩综合| 亚洲一级片在线观看| www.在线成人| 国产精品女人毛片| 久草在线在线精品观看| 在线成人av影院| 亚洲欧美激情小说另类| 国产激情91久久精品导航| 91精品欧美一区二区三区综合在| 国产精品伦理一区二区| 久久国产精品露脸对白| 欧美二区三区91| 亚洲成a人片综合在线| 欧美影院一区二区| 亚洲激情第一区| 一本一道综合狠狠老| 中文字幕不卡在线观看| 国产精品自拍网站| 久久日韩粉嫩一区二区三区| 九九九久久久精品| 欧美va亚洲va在线观看蝴蝶网| 日韩成人精品在线| 欧美肥妇毛茸茸| 日韩国产精品久久久久久亚洲| 欧美日韩一区高清| 日韩专区一卡二卡| 日韩精品一区在线| 国产乱子轮精品视频| 日韩欧美一级特黄在线播放| 麻豆精品视频在线| 欧美不卡激情三级在线观看| 麻豆一区二区三| 久久蜜桃av一区精品变态类天堂 | 蜜臀a∨国产成人精品| 5858s免费视频成人| 人妖欧美一区二区| 日韩欧美国产综合在线一区二区三区| 午夜精品福利一区二区三区av| 在线免费一区三区| 午夜激情一区二区三区| 日韩一卡二卡三卡国产欧美| 蜜桃av一区二区| 久久久久成人黄色影片| 国产成人精品亚洲777人妖| 亚洲国产精品传媒在线观看| 97精品国产露脸对白| 午夜视频在线观看一区二区| 国产日韩精品一区二区三区在线| 国产99久久久国产精品潘金网站| 国产精品国产三级国产aⅴ无密码 国产精品国产三级国产aⅴ原创 | 国产日韩三级在线| 成人99免费视频| 亚洲精品一卡二卡| 日韩天堂在线观看| 丁香啪啪综合成人亚洲小说| 亚洲嫩草精品久久| 日韩一区二区电影| 成人国产精品视频| 天天综合日日夜夜精品| 国产欧美一区二区精品久导航| 91精品一区二区三区在线观看| 久久精品国产免费| 中文字幕一区二区三区精华液 | 91精品国产综合久久福利| 狠狠色2019综合网| 一片黄亚洲嫩模| 久久色.com| 欧美日韩一卡二卡| 成人性视频免费网站| 青青青爽久久午夜综合久久午夜| 国产日韩精品一区二区三区| 欧美日韩国产免费| 99国产精品久久久久久久久久 | 欧美日韩国产另类一区| 粉嫩久久99精品久久久久久夜| 天堂一区二区在线| 亚洲丝袜制服诱惑| 国产精品视频看| 久久一区二区视频| 欧美日本在线观看| 高清在线不卡av| 麻豆成人91精品二区三区| 亚洲精品视频观看| 久久久亚洲精品石原莉奈| 欧美人与性动xxxx| 91久久精品网| 91年精品国产| 99精品欧美一区二区蜜桃免费 | 国产高清无密码一区二区三区| 亚洲色图制服丝袜| 亚洲国产高清aⅴ视频| 久久日韩粉嫩一区二区三区| 欧美一区二区三区思思人| 欧美主播一区二区三区美女|