开源仅12天,通义千问包揽多个大模型权威评测冠军_每日快讯(专注热点分享网)

开源仅12天,通义千问包揽多个大模型权威评测冠军


开源仅12天,通义千问包揽多个大模型权威评测冠军

  2023-12-17 20:41:53     简体|繁體
http://news.qghjm.com/1019961.html

原文来源:Tech星球

作者:贾宁宇

图片来源:由无界 AI生成

自12月1日阿里云宣布开源,通义千问72B大模型就开启了“屠榜”模式,接连问鼎多个权威排行榜。今天,通义千问又摘得一重要榜单冠军。

12月12日,中国权威的大模型评测平台OpenCompass日前更新了榜单,阿里云通义千问登上开源基座大模型榜首,并在中文数据集评测中包揽前二。

图注:通义千问72B登顶OpenCompass基座大模型榜。

OpenCompass是上海人工智能实验室开源的大模型评测平台,Qwen、LLaMA2等开源模型及GPT-4、ChatGPT等主流模型均参与评测,可全面评估大模型能力,是业界公认最权威的中文能力评测榜单之一。

通义千问72B开源模型(Qwen-72B),以67.1的综合得分夺得OpenCompass基座大模型榜单冠军,并在学科能力、理解能力两大维度评测中超越标杆GPT-4,创下开源大模型的新纪录。

而在OpenCompass中文数据集评测中,通义千问72B基座大模型和对话大模型(Qwen-72B-Chat)包揽前二,与其他模型拉开差距。

图注:通义千问72B基座大模型及对话大模型包揽中文数据集测试前二。


登顶HuggingFace榜单,刷新国产大模型纪录


就在几天前,通义千问力压Llama2等国内外开源大模型,登顶全球最大的开源大模型社区HuggingFace最新的开源大模型排行榜。

HuggingFace是全球最具影响力的AI开源社区,其开源大模型排行榜(Open LLM Leaderboard)被认为是最具公信力的专业榜单,收录了Qwen系列、LLaMA2等全球上百个开源大模型。

开源的通义千问(Qwen-72B)表现抢眼,以73.6的综合得分在所有预训练模型中排名第一。刷新了中国大模型在HuggingFace榜单上的纪录。

图注:通义千问72B登顶HuggingFace排行榜。


性能最强开源大模型,超越标杆LLaMA2


通义千问72B已成为国内外公认的性能最强的开源大模型,完全可满足企业级、科研级应用对大模型性能的高要求。

此前,在宣布开源的12月1日,Qwen-72B就在10个权威基准测评中夺得开源模型最优成绩,超越LLaMA2-70B,并在部分测评中超越闭源的GPT-3.5和GPT-4。

图注:通义千问720亿开源模型部分成绩超越闭源的GPT-3.5和GPT-4。

具体来看,在英语任务上,Qwen-72B在MMLU基准测试取得开源模型最高分;中文任务上,Qwen-72B霸榜C-Eval、CMMLU、GaokaoBench等基准,得分超越GPT-4;数学推理方面,Qwen-72B在GSM8K、MATH测评中断层式领先其他开源模型;代码理解方面,Qwen-72B在HumanEval、MBPP等测评中的表现大幅提升,代码能力有了质的飞跃。


将开源进行到底


据了解,阿里云已开源通义千问18亿、70亿、140亿、720亿参数的4款大语言模型,以及视觉理解Qwen-VL、音频理解Qwen-Audio的 2款多模态大模型,引领“全尺寸、全模态”开源之先。

截至目前,通义千问开源模型系列总下载量超150万,并涌现出150余款新模型和新应用。

阿里云CTO周靖人曾表示,开源生态对促进中国大模型的技术进步与应用落地至关重要,通义千问将持续投入开源,希望成为“AI时代最开放的大模型”,与伙伴们共同促进大模型生态建设。

开发者可在阿里云魔搭社区直接体验系列模型效果,也可通过阿里云灵积平台调用模型API,或基于阿里云百炼平台定制大模型应用;阿里云人工智能平台PAI还针对通义千问全系列模型进行深度适配,推出轻量级微调、全参数微调、分布式训练、离线推理验证、在线服务部署等服务。



编辑:web3528btc 来源:加密钱包代币

免责声明:以上文章内容信息均搜集自互联网或用户发布,并不代表本站观点或立场,本站不对其真实合法性负责。如有信息侵犯了您的权益,请联系本站将立即删除。
分享到:

  • 上一篇
    下一篇

  • 今日要闻|实事关注

    每日快讯(专注热点分享网)
    手机查看(二维码扫一扫)

    每日快讯网,最有影响力热点信息分类网站,覆盖品牌价值、汽车资讯、视频、基金、财经、房产、金融新闻、券商、公司等多类信息分享交流,免费提供最有价值的头条信息平台。
    « 2024年 » « 05月 »
    12345
    6789101112
    13141516171819
    20212223242526
    2728293031

    最新资讯

    [开户代运营] 债务纠纷法律咨询 直投企V添加 成本20左右 日产千条 目前法律咨询公司资质可开户
  • 2025-06-04 06:35:28

     

    [开户代运营]口腔牙科种植CPA意向表单,帮助医院门店机构精准拓客引流,产出比高,出量稳定!!
  • 2025-06-04 06:31:25

     

    [开户代运营]app拉新唤醒ocpc监测回传 API开发对接联调
  • 2025-06-04 06:27:21

     

    人保安心保一年期重疾险(免健告版)投保规则有哪些?保障哪些内容?
  • 2025-06-04 06:23:18

     

    1 0 6 短信获客
  • 2025-06-04 06:19:14

     

    [代运营托管]有短剧、语聊、电商、直播、游戏等线上场景应用资源的渠道可深度交流合作。
  • 2025-06-04 06:15:10

     

    [代运营托管]乌鲁木齐天山国际机场航站楼广告位
  • 2025-06-04 06:11:07

     

    [开户代运营]:抖音法律代运营,专业运营推广,服务无数的法律客户!寻有需求甲方!
  • 2025-06-04 06:07:03

     

    [开户代运营]抖音/腾讯院校招生的资源,开户代运营投流!日耗30万+,专业运营推广!
  • 2025-06-04 06:03:00

     

    [开户代运营]:寻工具APP,休闲小游戏APP等量大的甲方,专业运营推广服务你们
  • 2025-06-04 05:58:56

     

    [开户代运营]抖音专本科/职研/同等学力/留学开户推广,抖音一级代理,专业运营推广!
  • 2025-06-04 05:54:52

     

    [开户代运营]抖音夏令营/冬令营特训的量,日耗10万+!专业代运营推广,一上线就有量!
  • 2025-06-04 05:50:49

     

    [开户代运营]百度(baidu)痔疮,眼病,皮肤,带状疱疹后遗,哮喘,肺病等小病种推广,量大稳定 需要的老板联系
  • 2025-06-04 05:46:45

     

    [开户代运营]oppo熊胆粉,血压计,起量了,需要来
  • 2025-06-04 05:42:42

     

    [开户代运营]源头养生粉,仪器小护士血压计 砂锅粉 羊奶等免领粉,注册率55-70%,质高价优!
  • 2025-06-04 05:38:38