中文通用大模型基准测试 SuperCLUE 发布,讯飞星火认知大模型国内第一

5月9日,中文通用大模型综合性评测基准 SuperCLUE 正式发布。该基准测试主要关注以下问题:中文大模型在不同任务上的表现如何?与国际代表性模型相比,中文大模型的表现达到了何种程度?中文大模型与人类表现相比如何?

该模型可通过多个层面,考验市面上主流的中文 GPT 大模型的能力:

基础能力: 包括了常见的有代表性的模型能力,如语义理解、对话、逻辑推理、角色模拟、代码、生成与创作等 10 项能力。

专业能力: 包括了中学、大学与专业考试,涵盖了从数学、物理、地理到社会科学等 50 多项能力。

中文特性能力: 针对有中文特点的任务,包括了中文成语、诗歌、文学、字形等 10 项多种能力。

中文通用大模型基准测试 SuperCLUE 发布,讯飞星火认知大模型国内第一

该机构利用 SuperCLUE 测试基准,对市面上主流的支持中文的通用大模型进行了评测与排名。从排名中我们可以看出,GPT-4 一骑绝尘,已经非常接近人类的能力。国产大模型中讯飞科技研发的星火认知大模型总排名第三,国内排名第一。

中文通用大模型基准测试 SuperCLUE 发布,讯飞星火认知大模型国内第一

以下为该机构公布的各个子项目的具体得分。排行榜会定期更新,并于CLUEbenchmarks 官方网站网站进行公示。

中文通用大模型基准测试 SuperCLUE 发布,讯飞星火认知大模型国内第一

中文通用大模型基准测试 SuperCLUE 发布,讯飞星火认知大模型国内第一

中文通用大模型基准测试 SuperCLUE 发布,讯飞星火认知大模型国内第一

节点声明:本内容为作者独立观点,不代表节点财经立场。未经允许不得转载,文中内容仅供参考,不作为实际操作建议,交易风险自担。

(0)
节点财经的头像节点财经
新城控股4月合同销售额同比降20.67%;阅文集团管理层调整
上一篇 2023年 5月 10日 11:10
视觉中国实控人柴继军减持203万股;淘宝天猫集团架构调整完成
下一篇 2023年 5月 11日 10:44

相关推荐

  • 阿里云首次亮相总台春晚,云技术支持全球观众看直播

    1月28日晚,阿里云首次亮相中央广播电视总台蛇年春晚,云技术支持全球观众观看春晚直播。作为总台春晚云计算AI独家合作伙伴,阿里云为春晚直播提供了强大的全球云基础设施和通义大模型AI技术支持。 今年春晚的直播画面,通过阿里云部署在全球的云基础设施,从北京分发到全球各地的网络平台及网络转播机构,同时满足8K电视大屏、移动小屏等多终端需求,并提供竖屏春晚、三维菁彩…

    2025年 1月 28日
  • 黎辉出手,28亿买了一杯蓝瓶咖啡

    文 / 安妮  来源 / 节点财经  一笔新的资本交易进入市场视野。 瑞幸大股东大钲资本已与雀巢达成交易,将收购蓝瓶咖啡全球所有线下门店资产,交易价格低于4亿美元。 此次出手收购蓝瓶咖啡,对于瑞幸而言,有何战略意义? 不为人知的是,蓝瓶咖啡并非大钲资本搜寻的首个标的。据CNBC报道,早在去年7月星巴克中国收到的近30家私募股权机构的竞标报…

    2026年 3月 8日
  • 古茗营收利润「双丰收」,能否撑起上市后亮眼表现?

    文 / 二风 近日,古茗控股有限公司(以下简称‘古茗’)向港交所更新了招股书,高盛和瑞银集团担任联席保荐人。这意味着,“新茶饮第三股”距离跟投资者见面的日期越来越近了。 据招股书显示,截至2024年前三季度,古茗的总营收已达到166亿元,同比增长20.4%。如果按照2023年的总营收计算,古茗位居全价格带大众现制茶饮店总营收第二位,仅次于蜜雪冰城的427亿元…

    2024年 12月 19日
  • 突破50亿的水井坊,后劲知多少?

    文 / 三生  来源 / 节点财经 当前,白酒行业的深度调整仍在继续。从近期披露的年报和一季报业绩来看,不必讳言的是,降速已经成为主基调。在这种背景下,增速不高但得以保持稳定的水井坊就从原来的“中等生”开始向“优等生”的方向靠拢。 从财报数据上看,2024年水井坊全年实现营业收入52.17亿元,同比增长5.32%;归属于上市公司股东的净利润达13.…

    2025年 6月 4日
  • 中国速度!世界首创:城市级商用人形机器人示范区落地海淀

    一周前,国务院总理李强同与会外方嘉宾、国际组织代表在世界人工智能大会(WAIC)上现场下单体验了银河通用“智惠小卖部”,银河通用具身大模型机器人 Galbot 自主完成商品取送的一刻被媒体称为“中国AI服务民生的标志性场景”。 一周后的今天,这项技术成果已真正走入现实生活。 2025年8月7日,北京中关村·ART PARK 大融城迎来了一场别开生面的新品发布…

    上市公司 2025年 8月 8日