网易首页 > 网易号 > 正文 申请入驻

新华社研究院发布大模型体验报告,讯飞星火总分第一

0
分享至

8月12日,新华社研究院中国企业发展研究中心发布《人工智能大模型体验报告2.0》,对当前国内风生水起的主流大模型进行了客观评测,结果显示,科大讯飞星火总分第一。



相对于6月首次发布的《人工智能大模型体验报告》,本次测评在题目设计、对标Benchmark(人类)、打分权重、专家测评团队四大维度进行了全面升级。

其中,在题目设计方面,测评题目由300道扩展至500道,并进一步完善了题目分类:

在对标Benchmark方面,本次测评将接受过高等教育的人类作为对照,来考评大模型真实能力;

在打分标准上,本次测评根据对产业、生活的实际价值,对基础能力、智商能力、情商能力和工具提效四大测评维度进行了权重设计;

在测评团队方面,本次测评特邀北京大学文化与传播研究所及其他产界、学界专家全程参与。

本次研究设置了用户体验项目,抓取了7月31日—8月4日数据,通过人机互动提问等形式,对国内主流大模型进行使用体验评测,旨在为科技企业调整努力方向提供参考。

报告显示,与2023年6月相比,当前中国大模型产品进步显著。但与接受过高等教育的人类相比,大模型在智商、情商等方面还存在一定程度差距。

综合基础能力、智商能力、情商能力和工具提效四大能力综合得分情况来看,科大讯飞星火大模型得分1013,仅比人类答案少1分,在各主流大模型中排名第一。其它排在第二、第三的分别为百度文心一言和商汤商量。

据了解,科大讯飞星火大模型发布于5月6日,并于6月9日完成首次升级。相对于初始版本,讯飞星火讯飞新版本无论是知识问答能力、推理能力、数学能力、语言理解、代码能力还是文本生成能力均有较大提升。



科大讯飞星火之所以有如此表现,此前科大讯飞董事长刘庆峰表示,主要是因为公司员工努力和技术积累所致。

刘庆峰表示,在过去24年的创业历程中,为了让机器实现像人一样能听会说、能理解会思考,用人工智能建设美好世界的梦想,科大讯飞人没有一天停止过,也没有一天不再奋斗。

在过去的创业历程中,科大讯飞不仅彻底扭转了中文语音产业的竞争格局,而且在英文等多语种领域获得了全球第一的地位。

在全球首次让机器语音转写超过专业书记员;首次让机器翻译通过国家翻译师资格考试;首次让机器通过了国家执业医师资格考试。同时也是中国唯一一家承担认知智能国家重点实验室建设的公司。

除技术积累外,科大讯飞还拥有成建制的团队,且每一个关键模块都是完全自主研发的,有完整的创新体系,这是科大讯飞在人工智能领域得以踏实前行的关键。

科大讯飞星火大模型当前的版本为1.5,据悉,8月15日,科大讯飞将正式发布讯飞星火2.0版,在文本生成、语言理解、逻辑推理等各项能力持续提升的同时,代码能力和多模态能力将登上全新高度。

特别声明:以上内容(如有图片或视频亦包括在内)为自媒体平台“网易号”用户上传并发布,本平台仅提供信息存储服务。

Notice: The content above (including the pictures and videos if any) is uploaded and posted by a user of NetEase Hao, which is a social media platform and only provides information storage services.

相关推荐
热点推荐
凌晨大逆转,股市直线暴拉!霍尔木兹海峡,利好来了

凌晨大逆转,股市直线暴拉!霍尔木兹海峡,利好来了

中国基金报
2026-09-25 06:18:36
沙特并不是不认同中国的实力,但是沙特认为,中国有实力,却从来不去干预世界局势。

沙特并不是不认同中国的实力,但是沙特认为,中国有实力,却从来不去干预世界局势。

回京历史梦
2026-09-24 11:10:04
想将台北故宫绑上战车,谁疯了?

想将台北故宫绑上战车,谁疯了?

新民周刊
2026-09-25 10:41:36
德黑兰的囚徒:佩泽希齐扬内斗失败,恐怕无法返回伊朗了

德黑兰的囚徒:佩泽希齐扬内斗失败,恐怕无法返回伊朗了

民间胡扯老哥
2026-09-25 05:04:25
炸裂!未婚夫发文感谢鸟哥,这样的女孩不娶也罢,网友:及时排雷

炸裂!未婚夫发文感谢鸟哥,这样的女孩不娶也罢,网友:及时排雷

风起见你
2026-09-25 01:57:26
腾讯“龙虾”宣布停运,上线仅半年!

腾讯“龙虾”宣布停运,上线仅半年!

城事堂
2026-09-24 15:03:35
C罗单刀被吹+评分垫底,菲利克斯世界波定乾坤,葡萄牙1-0威尔士

C罗单刀被吹+评分垫底,菲利克斯世界波定乾坤,葡萄牙1-0威尔士

钉钉陌上花开
2026-09-25 04:55:40
内塔尼亚胡刚登台,多国代表集体退场,他回呛:没走的懦夫也走吧!

内塔尼亚胡刚登台,多国代表集体退场,他回呛:没走的懦夫也走吧!

桂系007
2026-09-25 04:03:40
以色列驻美大使紧急回国!其儿子遭车冲撞生命垂危,29岁巴勒斯坦司机被当场击毙,另一儿子已在加沙身亡

以色列驻美大使紧急回国!其儿子遭车冲撞生命垂危,29岁巴勒斯坦司机被当场击毙,另一儿子已在加沙身亡

每日经济新闻
2026-09-25 02:49:08
任正非回忆:本来以100亿美金卖掉华为,都准备好了,美方企业不买了!估计10年后会山头拼刺刀,那时就开始做备胎计划!网友:天意难违

任正非回忆:本来以100亿美金卖掉华为,都准备好了,美方企业不买了!估计10年后会山头拼刺刀,那时就开始做备胎计划!网友:天意难违

大白聊IT
2026-09-25 01:45:41
3-0!孙颖莎王楚钦横扫日本组合 晋级混双四强 松岛辉空4金梦碎

3-0!孙颖莎王楚钦横扫日本组合 晋级混双四强 松岛辉空4金梦碎

念洲
2026-09-25 09:55:47
从“卖靓号”到“织天网”:当星链叩门,三大运营商拿什么抵挡进攻

从“卖靓号”到“织天网”:当星链叩门,三大运营商拿什么抵挡进攻

细雨中的呼喊
2026-09-24 18:24:56
中国刚签美国天然气,俄罗斯急改管道名,信号太明显!

中国刚签美国天然气,俄罗斯急改管道名,信号太明显!

北纬的咖啡豆
2026-09-25 07:08:22
最小红军向轩:7岁参军,9岁跟随部队走完长征,1955年授衔大典,他被授予什么军衔?

最小红军向轩:7岁参军,9岁跟随部队走完长征,1955年授衔大典,他被授予什么军衔?

磊子讲史
2026-09-17 16:42:41
年轻人没性生活不生娃,北大调查:罪魁祸首不是加班,是"没工作"

年轻人没性生活不生娃,北大调查:罪魁祸首不是加班,是"没工作"

知识圈
2026-09-24 14:52:42
亚运6连冠+队史第12冠!国乒女团3-0日本登顶 王曼昱复仇张本超开心

亚运6连冠+队史第12冠!国乒女团3-0日本登顶 王曼昱复仇张本超开心

颜小白的篮球梦
2026-09-24 21:22:59
刘国梁,现场见证国乒这场历史性失利!王楚钦:有很大部分原因在我这里

刘国梁,现场见证国乒这场历史性失利!王楚钦:有很大部分原因在我这里

南方都市报
2026-09-24 22:19:43
越南深度改革对我国的启示

越南深度改革对我国的启示

大国老记老顾
2026-09-24 11:18:00
1分惜败日本队被淘汰!中国女篮再遭打击:三人亚运遗憾出局无缘争冠

1分惜败日本队被淘汰!中国女篮再遭打击:三人亚运遗憾出局无缘争冠

篮球快餐车
2026-09-24 17:59:05
刘国梁赛后脸色铁青快速离场!托腮看日本官员庆祝 赛前曾微笑招手

刘国梁赛后脸色铁青快速离场!托腮看日本官员庆祝 赛前曾微笑招手

风过乡
2026-09-25 08:15:38
2026-09-25 11:32:49
数码日记 incentive-icons
数码日记
数码圈里的那些事儿!
1109文章数 5469关注度
往期回顾 全部

科技要闻

华为赛力斯,一次声势浩大的权、利再分配

头条要闻

日本男乒亚运夺金 张本智和:日本队真的超越了中国队

头条要闻

日本男乒亚运夺金 张本智和:日本队真的超越了中国队

体育要闻

这场青春风暴,中国足球等了太久

娱乐要闻

肖战因拍《十日终焉》连续做半个月梦

财经要闻

月饼卖不动了...

汽车要闻

全新第四代博越L 上市限时价9.29万元起

态度原创

健康
教育
数码
时尚
家居

鼻子三角区的痘,千万别乱挤!

教育要闻

英语应该退出主科,别再做升学路上的拦路虎

数码要闻

微软正淡化Copilot+ PC品牌,2026新款Surface已弃用

秋冬最舒适的“豹款”,这样穿才好看!

家居要闻

2026建博会(广州) 公装联探展交流活动

无障碍浏览 进入关怀版