人工智能大摸型体验报告2.0新华社研究院中国企业发展研究中心2023年08月在2023年6月首次发布的《人工智能大模型体验报告》基础之上，本次测评在题目设计、对标Benchmark(人类)、打分权重、专家测评团队四大维度进行了全面升级。在题目设计方面，测评题目由300道扩展至500道，并进一步完善了题目分类；在对标Benchmark方面，本次测评将接受过高等教育的人类作为对照，来考评大模型真实能力；在打分标准上，本次测评根据对产业、生活的实际价值，对四大测评维度进行了权重设计；在测评团队方面，本次测评特邀北京大学文化与传播研究所及其他业界、学界专家全程参与。通过本次测评发现，与2023年6月相比，当前中国大模型产品进步显著。但与接受过高等教育的人类相比，大模型在智商、情商等方面还存在一定程度差距。具体来看，科大讯飞的星火在工作提效方面优势明显；百度文心一言地基深厚、基础能力仍处领军水准；商汤商量则在情商方面表现优秀；智谱AI的ChatGLM整体表现优秀。在本次体验测评的基础上，研究团队将继续深耕，加强在大模型安全可解释性、工作提效能力、实际落地情况、产业优秀案例等维度上的探索与研究，欢迎持续关注。201大模型市场综述目录大模型发展进程大模型应用发展建议·大模型未来发展趋势2.0版本大模型测评规则02大模型厂商整体测评2.0版本·2.0版本大模型综合指数·2.0版本测评细分维度指数及评述03厂商优秀答案展示大模型2.0版本测评题目展示301.大模型成为AI大规模落地拐点4大横型发展进程中国大摸型发展现状大模型发展进程通用大模型应用垂直大模型应用360智脑-360WAI-微盟子日有道中国大模型发展热度依旧，天眼查数据显示，截至2023年上半年，与“大模型”直接相关的融资事件超20起，其中超拟人大模型-聆心智能ChatABC-中农行包含光年之外、面壁智能等明星级创业企业：从被投企业混元·讯的地域分布来看，北京、上海以及杭州位居前列，特别是九天，中国移动北京，融资事件数量超10起，凸显出北京在人工智能领域Baker-GPT-标贝科技盘古华为Graph-AIGC-图字宙的领先地位。越来越多的企业和学术界开始关注如何将大模型与实际应用场景相结合，实现真正的商业化应用。具DriveGPT-毫末智行体来说探索主要围绕研究层面和应用层面：研究层面，中国大模型在科研方面已形成涵盖理论文心一言百度西湖·西湖心辰HealthGPT-叮当方法、软硬件的体系化能力，学术界和产业界共同参星河中国电信medGPT.-医联与，形成更加完善的理论框架。左医GPT左手医生应用层面，目前大模型已开始渗透到恪行各业，实现序列猴子出门问问玉额、丹青网易伏羲商业化应用。超过半数的大模型实现开源。知海图知乎DRL-rct AI紫东太初中科院GAEA-超参数5