国产精品亚洲mnbav网站_成人午夜亚洲精品无码网站_日韩va亚洲va欧洲va国产_亚洲欧洲精品成人久久曰影片

全球百模爭霸,國產大模型拿下多個冠軍!智源FlagEval全球評測榜單出爐

AIGC動態9個月前發布 新智元
329 0 0

全球百模爭霸,國產大模型拿下多個冠軍!智源FlagEval全球評測榜單出爐

原標題:全球百模爭霸國產大模型拿下多個冠軍!智源FlagEval全球評測榜單出爐
文章來源:新智元
內容字數:5822字

智源研究院發布2024下半年大模型評測結果

1. **評測概述:** 智源研究院發布了2024年下半年大模型綜合評測結果,涵蓋100多個開源和閉源模型,評估范圍涵蓋文本、語音、圖像和視頻等多個領域。本次評測相比5月份的評估,在任務難度、評估維度和應用場景上都有顯著提升,新增了數據處理、高級編程、工具調用以及金融量化交易等方面的評估。

2. **語言模型評測:** 在語言模型主觀評測中,字節跳動Doubao-pro-32k-preview和百度ERNIE 4.0 Turbo表現最佳;客觀評測中,OpenAI o1-mini-2024-09-12和Google Gemini-1.5-pro-latest領先。總體而言,在一般中文場景下,模型能力趨于飽和,但在復雜場景下,國內頭部模型與國際一流水平仍存在差距。

3. **多模態模型評測:** 多模態模型發展迅速,視覺語言模型中,開源模型在圖文理解任務上正在縮小與閉源模型的差距;文生圖模型已具備中文文字生成能力,但復雜場景下的表現仍需提升;文生視頻模型的畫質和動態性有所提升,但仍存在動作變形、物理規律理解不足等問題。各個模態的領先模型分別為:視覺語言模型方面,OpenAI GPT-4o-2024-11-20和字節跳動Doubao-Pro-Vision-32k-241028領先;文生圖模型方面,騰訊Hunyuan Image位列第一;文生視頻模型方面,快手可靈1.5領先。

4. **語音語言模型評測:** 語音語言模型能力提升顯著,但與專業模型仍存在差距,高性能的開源模型相對較少。阿里巴巴Qwen2-Audio在專項評測中排名第一。

5. **K12學科測驗:** 智源研究院再次聯合海淀區教師進修學校進行K12學科測驗,模型綜合得分較半年前提升12.86%,但在部分學科上仍與人類學生存在差距,呈現出“文強理弱”的偏科現象。某些模型在英語和歷史科目上的表現甚至超越了人類考生的平均分。

6. **FlagEval平臺評測:** FlagEval大模型角斗場和FlagEval Debate平臺對模型進行了用戶偏好和辯論能力的評估。用戶更傾向于模型提供結構化、標準化的輸出;模型在辯論中普遍缺乏邏輯框架和論據支撐,更擅長反駁而非論證。

7. **金融量化交易評測:** 評測探索了大模型在金融量化交易領域的應用,發現頭部模型已具備生成有回撤收益的策略代碼的能力,部分模型能力接近初級量化交易員水平。

8. **FlagEval平臺迭代:** FlagEval平臺持續迭代,已覆蓋全球800多個開閉源模型,并不斷更新評測數據集和方法,以確保評測的科學性和權威性。 智源研究院致力于打造一個公正、開放的大模型評測平臺,為大模型技術生態發展提供參考。


聯系作者

文章來源:新智元
作者微信:
作者簡介:智能+中國主平臺,致力于推動中國從互聯網+邁向智能+新紀元。重點關注人工智能、機器人等前沿領域發展,關注人機融合、人工智能和機器人對人類社會與文明進化的影響,領航中國新智能時代。

閱讀原文
? 版權聲明
蟬鏡AI數字人

相關文章

蟬鏡AI數字人

暫無評論

暫無評論...
国产精品亚洲mnbav网站_成人午夜亚洲精品无码网站_日韩va亚洲va欧洲va国产_亚洲欧洲精品成人久久曰影片
<span id="3dn8r"></span>
    1. <span id="3dn8r"><optgroup id="3dn8r"></optgroup></span><li id="3dn8r"><meter id="3dn8r"></meter></li>

        亚洲国产欧美一区二区三区丁香婷| 中文字幕在线观看不卡视频| 精品成人a区在线观看| 亚洲丶国产丶欧美一区二区三区| 欧洲一区在线观看| 亚洲午夜久久久| 日韩欧美黄色影院| 国产精品一二一区| 国产亚洲精品aa| 色噜噜狠狠成人中文综合| 亚洲精品videosex极品| 在线成人高清不卡| 国产成人精品免费一区二区| 亚洲欧美偷拍另类a∨色屁股| 91.com视频| 97久久人人超碰| 秋霞成人午夜伦在线观看| 国产精品色婷婷| 制服丝袜亚洲播放| 97se狠狠狠综合亚洲狠狠| 天堂在线一区二区| 亚洲欧美偷拍卡通变态| 久久青草欧美一区二区三区| 欧美午夜不卡视频| 成人三级伦理片| 麻豆精品蜜桃视频网站| 亚洲在线成人精品| 中文字幕成人av| 精品国产一区二区三区久久久蜜月| 色综合天天综合网天天狠天天| 免费xxxx性欧美18vr| 一区二区三区欧美激情| 国产欧美一区二区三区鸳鸯浴| 日韩一级完整毛片| 欧美午夜免费电影| 一本久久a久久免费精品不卡| 国产成人免费视频精品含羞草妖精| 亚洲成av人**亚洲成av**| 亚洲欧美在线高清| 国产精品国产自产拍高清av王其| 久久久久久久免费视频了| 日韩欧美的一区| 91麻豆精品国产91久久久久久久久| 91一区二区三区在线观看| 成人午夜碰碰视频| 成人av一区二区三区| 国产精品一区二区久激情瑜伽| 日本三级韩国三级欧美三级| 亚洲福利一区二区三区| 一区二区国产视频| 亚洲香肠在线观看| 亚洲v中文字幕| 亚洲.国产.中文慕字在线| 亚洲自拍偷拍麻豆| 亚洲无线码一区二区三区| 一区二区三区中文免费| 一区二区三区精品视频在线| 一区二区欧美在线观看| 一区二区三区中文字幕| 一区二区三区在线免费| 亚洲国产一区在线观看| 午夜精品福利一区二区三区蜜桃| 亚洲无线码一区二区三区| 五月综合激情婷婷六月色窝| 亚洲高清视频的网址| 丝袜国产日韩另类美女| 国内精品伊人久久久久av影院 | 国产伦精品一区二区三区免费| 蜜桃一区二区三区在线观看| 蜜臀av亚洲一区中文字幕| 裸体一区二区三区| 丁香五精品蜜臀久久久久99网站| 9人人澡人人爽人人精品| 欧洲一区二区三区在线| 日韩欧美中文字幕制服| 久久久久久电影| 亚洲另类一区二区| 日韩av一区二区三区四区| 国产一区 二区| 一本一道波多野结衣一区二区| 欧美性生活影院| 久久综合网色—综合色88| 国产精品国产a| 麻豆91在线看| 91伊人久久大香线蕉| 日韩欧美另类在线| 中文字幕亚洲成人| 日韩高清一级片| 粉嫩av一区二区三区在线播放| 91免费版在线| 337p粉嫩大胆噜噜噜噜噜91av| 成人欧美一区二区三区在线播放| 亚洲香肠在线观看| 成人一区二区三区| 欧美一级视频精品观看| 亚洲日本一区二区| 国产成人免费9x9x人网站视频| 欧美日韩色一区| 国产精品天美传媒沈樵| 久久精品免费观看| 欧美少妇xxx| 国产精品久久久久久久久晋中 | 亚洲超碰精品一区二区| 成人一区在线观看| 精品福利一二区| 亚洲国产日韩a在线播放性色| 国产91精品免费| 91精品国产一区二区三区| 中文字幕一区不卡| 国产xxx精品视频大全| 制服丝袜av成人在线看| 亚洲尤物在线视频观看| 一本久道久久综合中文字幕| 欧美国产欧美综合| 国产成人精品亚洲日本在线桃色| 91精品国产欧美日韩| 亚洲国产人成综合网站| 91福利国产成人精品照片| 亚洲视频一区在线观看| 成人一区二区三区| 国产精品入口麻豆原神| 国产成人a级片| 久久精品亚洲麻豆av一区二区| 蜜桃视频在线观看一区二区| 91麻豆精品国产91久久久久久 | 久久精品99国产精品| 欧美一区二区在线播放| 亚洲va在线va天堂| 欧美三级在线看| 亚洲成人你懂的| 欧美高清hd18日本| 奇米在线7777在线精品| 日韩欧美专区在线| 国产一区二区导航在线播放| 欧美精品一区在线观看| 国产高清视频一区| 国产精品私人影院| 91影视在线播放| 午夜亚洲福利老司机| 欧美一级二级三级蜜桃| 久草精品在线观看| 国产欧美一区二区三区网站| 成人av网站大全| 亚洲欧美日韩精品久久久久| 在线观看视频欧美| 天天综合网天天综合色| 2014亚洲片线观看视频免费| 成人av在线网| 婷婷激情综合网| 久久新电视剧免费观看| 91在线观看视频| 日本v片在线高清不卡在线观看| 精品美女一区二区| 一本到高清视频免费精品| 亚洲va欧美va天堂v国产综合| 精品国偷自产国产一区| av动漫一区二区| 日本美女一区二区三区视频| 国产午夜精品久久久久久免费视| 99久久99久久综合| 天堂资源在线中文精品| 国产午夜精品一区二区三区嫩草| 色婷婷av久久久久久久| 国产一区二区不卡| 亚洲一区免费观看| 久久免费美女视频| 欧洲生活片亚洲生活在线观看| 麻豆国产一区二区| 亚洲一区中文在线| 国产亚洲一区二区三区| 欧美日韩一二三| 国产91在线看| 青青草91视频| 亚洲尤物视频在线| 国产精品色眯眯| 精品99999| 91精品国产入口| 91黄视频在线| av电影在线观看不卡| 精品一区二区三区不卡| 午夜一区二区三区视频| 综合久久给合久久狠狠狠97色| 精品成a人在线观看| 欧美绝品在线观看成人午夜影视 | 国产精品888| 午夜成人免费视频| 亚洲精选在线视频| 国产精品色婷婷久久58| 久久久久久久久蜜桃| 日韩午夜av一区| 欧美高清视频在线高清观看mv色露露十八 | 欧美一区二区三区免费观看视频| 北条麻妃国产九九精品视频| 国产麻豆精品视频| 久久精品二区亚洲w码| 日韩电影一区二区三区| 一区二区三区四区中文字幕| 中文字幕视频一区| 亚洲欧美成人一区二区三区| 亚洲人成网站影音先锋播放|