暂无图片
暂无图片
暂无图片
暂无图片
暂无图片
人工智能大模型体验报告2.0.pdf
229
27页
0次
2023-08-16
100墨值下载
1
中国企业发展研究中⼼
新华社国家⾼端智库分中⼼
人工智能大模型体验报告2.0
新华社研究院中国企业发展研究中心
202308
2
报告综述
2023年6月首次发布的《人工智能大模型体验报告》基础之上,本次测评在题目设计、对标Benchmark
(人类)、打分权重、专家测评团队四大维度进行了全面升级。在题目设计方面,测评题目由300道扩展至500道,
并进一步完善了题目分类;在对标Benchmark方面,本次测评将接受过高等教育的人类作为对照,来考评大模型
真实能力;在打分标准上,本次测评根据对产业、生活的实际价值,对四大测评维度进行了权重设计;在测评团
队方面,本次测评特邀北京大学文化与传播研究所及其他业界、学界专家全程参与。
通过本次测评发现,与2023年6月相比,当前中国大模型产品进步显著。但与接受过高等教育的人类相比,
大模型在智商、情商等方面还存在一定程度差距。具体来看,科大讯飞的星火在工作提效方面优势明显;百度文
心一言地基深厚、基础能力仍处领军水准;商汤商量则在情商方面表现优秀;智谱AI ChatGLM整体表现优秀。
在本次体验测评的基础上,研究团队将继续深耕,加强在大模型安全可解释性、工作提效能力、实际落地情
况、产业优秀案例等维度上的探索与研究,欢迎持续关注。
3
目录
2.0版本大模型综合指数
2.0版本测评细分维度指数及评述
大模型市场综述
大模型厂商整体测评2.0版本
厂商优秀答案展示
02
01
03
大模型发展进程
大模型应用发展建议
大模型未来发展趋势
2.0版本大模型测评规则
大模型2.0版本测评题目展示
of 27
100墨值下载
【版权声明】本文为墨天轮用户原创内容,转载时必须标注文档的来源(墨天轮),文档链接,文档作者等基本信息,否则作者和墨天轮有权追究责任。如果您发现墨天轮中有涉嫌抄袭或者侵权的内容,欢迎发送邮件至:contact@modb.pro进行举报,并提供相关证据,一经查实,墨天轮将立刻删除相关内容。