当前位置:主页 > 财经 > 滚动新闻 > 中文通用大模型基准测试 SuperCLUE 发布,讯飞星火认知大模型国内第一

中文通用大模型基准测试 SuperCLUE 发布,讯飞星火认知大模型国内第一

2023-05-10 17:42:02来源:环球财富网

文章导读
5月9日,中文通用大模型综合性评测基准SuperCLUE正式发布。该基准测试主要关注以下问题:中文大模型在不同任务上的表现如何?与国际代表性模型相比,中文大模型的表现达到了何种程度?中文大模型与人类表现相比如何? 该模型可通过多个层面,考验市面上主流的中文GPT大模型的能力: 基础能力:包括了常见的有代表性的模型能力,如语义理解、对话、逻辑推理、角色模拟、代码、生成与创作等10项能力。 专业能力:包括了中学、大学与专业考试,...
  5月9日,中文通用大模型综合性评测基准 SuperCLUE 正式发布。该基准测试主要关注以下问题:中文大模型在不同任务上的表现如何?与国际代表性模型相比,中文大模型的表现达到了何种程度?中文大模型与人类表现相比如何?

  该模型可通过多个层面,考验市面上主流的中文 GPT 大模型的能力:

  基础能力: 包括了常见的有代表性的模型能力,如语义理解、对话、逻辑推理、角色模拟、代码、生成与创作等 10 项能力。

  专业能力: 包括了中学、大学与专业考试,涵盖了从数学、物理、地理到社会科学等 50 多项能力。

  中文特性能力: 针对有中文特点的任务,包括了中文成语、诗歌、文学、字形等 10 项多种能力。

  


  该机构利用 SuperCLUE 测试基准,对市面上主流的支持中文的通用大模型进行了评测与排名。从排名中我们可以看出,GPT-4 一骑绝尘,已经非常接近人类的能力。国产大模型中讯飞科技研发的星火认知大模型总排名第三,国内排名第一。

  


  以下为该机构公布的各个子项目的具体得分。排行榜会定期更新,融易新媒体,并于CLUEbenchmarks 官方网站网站进行公示。

  


  
免责声明
融易新媒体转载此文目的在于传递更多信息,不代表本网的观点和立场。文章内容仅供参考,不构成投资建议。如果您发现网站上有侵犯您的知识产权的作品,请与我们取得联系,我们会及时修改或删除。
热门文章
日榜 周榜
1 中英人寿品牌焕新升级案例获评“金诺·中国金融品牌影响力典

5月9日,《中国银行保险报》2023金诺·第七届中国金融品牌影响力流传案例入选名单发表。中英...

2 中文通用大模型基准测试 SuperCLUE 发布,讯飞星火认知大模型国

5月9日,中文通用大模型综合性评测基准SuperCLUE正式发布。该基准测试主要关注以下问题:中文...

3 云创数据两个生意业务日市值上涨超57%

受ChatGPT概念等因素影响,北交所上市公司云创数据(835305)近日连续两个交易日大涨,5月5日和...

4 腾讯云大数据TBDS落地鹏华基金,推动基金行业核心系统国产化升

5月8日,腾讯云连系鹏华基金配合对外公布,通过两边技能团队以及计谋相助同伴华云中盛配合...

5 中邮人寿一季度保险业务收入同比提升近四成,总资产达4609亿元

近期,中邮人寿保险股份有限公司(以下简称“中邮人寿”)发布2023年一季度偿付能力报告摘要...

6 中邮人寿一季度保险业务收入同比提升近四成,总资产达4609亿元

近期,中邮人寿保险股份有限公司(以下简称“中邮人寿”)发布2023年一季度偿付能力报告摘要...

7 万亿巨头资管景顺投资入局索菲亚,投资和将来成长前景值得等

索菲亚(002572)5月4日晚间披露简式权益变换陈诉书,本次权益变换前,INVESCO ASSET MANAGEMENT LIMI...

8 九方财富IPO上市:深植合规理念,筑牢合规经营

随着资本市场的发展,IPO已经成为企业资金筹备的重要方式,对企业而言,IPO意义重大。据九方财...

9 以“创”强“实”,青岛在玩一种很新的财富投资

时代的钟摆下,产业格局与城市布局正在重新洗牌。 产业发展快速转换、科技创新周期重启、...

10 如何高效传承财产?恒天财富教你设计财富传承方案

一直以来,跨代际的财富传承都是中国企业家、超高净值人士非常关心的话题。如何高效传承...

1 中英人寿品牌焕新升级案例获评“金诺·中国金融品牌影响力典

5月9日,《中国银行保险报》2023金诺·第七届中国金融品牌影响力流传案例入选名单发表。中英...

2 中文通用大模型基准测试 SuperCLUE 发布,讯飞星火认知大模型国

5月9日,中文通用大模型综合性评测基准SuperCLUE正式发布。该基准测试主要关注以下问题:中文...

3 云创数据两个生意业务日市值上涨超57%

受ChatGPT概念等因素影响,北交所上市公司云创数据(835305)近日连续两个交易日大涨,5月5日和...

4 腾讯云大数据TBDS落地鹏华基金,推动基金行业核心系统国产化升

5月8日,腾讯云连系鹏华基金配合对外公布,通过两边技能团队以及计谋相助同伴华云中盛配合...

5 中邮人寿一季度保险业务收入同比提升近四成,总资产达4609亿元

近期,中邮人寿保险股份有限公司(以下简称“中邮人寿”)发布2023年一季度偿付能力报告摘要...

6 中邮人寿一季度保险业务收入同比提升近四成,总资产达4609亿元

近期,中邮人寿保险股份有限公司(以下简称“中邮人寿”)发布2023年一季度偿付能力报告摘要...

7 万亿巨头资管景顺投资入局索菲亚,投资和将来成长前景值得等

索菲亚(002572)5月4日晚间披露简式权益变换陈诉书,本次权益变换前,INVESCO ASSET MANAGEMENT LIMI...

8 九方财富IPO上市:深植合规理念,筑牢合规经营

随着资本市场的发展,IPO已经成为企业资金筹备的重要方式,对企业而言,IPO意义重大。据九方财...

9 以“创”强“实”,青岛在玩一种很新的财富投资

时代的钟摆下,产业格局与城市布局正在重新洗牌。 产业发展快速转换、科技创新周期重启、...

10 如何高效传承财产?恒天财富教你设计财富传承方案

一直以来,跨代际的财富传承都是中国企业家、超高净值人士非常关心的话题。如何高效传承...

备案号:鄂ICP备2022006215号 Copyright © 2002-2022 关于我们 融易新媒体