怀仁信息港 网站首页 资讯列表 资讯内容

快讯 丨《麻省理工科技评论》中国发布大模型评测报告

2023-08-29| 发布者: 怀仁信息港| 查看: 144| 评论: 3|来源:互联网

摘要: 8月16日,《麻省理工科技评论》中国发布中国大模型评测报告,从研发和商业化能力、外界态度以及发展趋势等维...
托福口语扣分常见原因

8月16日,《麻省理工科技评论》中国发布中国大模型评测报告,从研发和商业化能力、外界态度以及发展趋势等维度全方位检测大模型的能力。

据悉,此次评测选取了讯飞星火、百度文心一言、商汤商量、阿里通义千问等中文大模型平台代表展开。

评测使用的测试集包含600道题目,覆盖了语言专项、数学专项、理科综合、文科综合、逻辑思维、编程能力、综合知识、安全性共8个一级大类,126个二级分类,290个三级标签,并针对问题的丰富性和多样性做了优化。

评测整体水平结果显示,前三位分别为:讯飞星火、百度文心一言以及商汤商量,得分率分别为81.5%、75.2%和68.3%,阿里通义千问则以得分率66.9%排名第四。



分享至:
| 收藏
收藏 分享 邀请

最新评论(0)

Archiver|手机版|小黑屋|怀仁信息港  

GMT+8, 2019-1-6 20:25 , Processed in 0.100947 second(s), 11 queries .

Powered by 怀仁信息港 X1.0

© 2015-2020 怀仁信息港 版权所有

微信扫一扫