1 中国企业发展研究中心 新华社国家高端智库分中心 人工智能大模型体验报告 3.0 新华社研究院中国企业发展研究中心 2023 年11月2报告回顾：大模型产品市场竞争激烈，技术不断进步 从1.0版本到 3.0版本的测评过程中，参与厂商的分数变化反映了大模型产品竞争的激烈和技术的进步。可以明显观察到一些厂商在持续进步，而 一些新的厂商也在逐渐崭露头角。 •在1.0版本中（ 5月测评） ，ChatGPT 系列占据领先位置，其中 ChatGPT4 表现最佳，紧随其后的是 ChatGPT3.5 。百度文心一言位于整体第 三位置，展现出了较强的实力。这一阶段的科大讯飞星火和阿里通义千问也进入了整体前五，国内前三，表现不俗。 •到了2.0版本（ 8月测评）， 专注于国内市场，科大讯飞星火实现了跨越式发展，整体表现亮眼。百度文心一言、商汤商量与智谱 CHATGLM 也取得优异的成绩。同时， 360智脑和昆仑万维天工也进入了前五。这些变化展示了厂商之间的激烈竞争和技术进步的速度。 •到了3.0版本（ 11月测评） ，科大讯飞星火依旧保持领先，商汤商量紧随其后，稳定发挥。值得一提的是，澜舟科技孟子取得了显著进步， 字节跳动豆包作为新面孔，在这次评估中崭露头角。 纵观这三个版本的发展，可以看出一些规律。首先是竞争日益激烈，厂商之间的得分变动频繁，这体现了大模型产品市场的活跃和竞争激烈程 度。其次，技术进步明显，从 1.0到3.0版本，各个厂商的产品在性能和功能上都有显著提升。最后，新面孔的涌现也展示了这个行业的活力和吸 引力，新的厂商不断加入竞争，推动了大模型产品的发展。厂商A 厂商B 厂商C 厂商D 厂商E 厂商F 厂商G 厂商H 厂商I 厂商J 厂商K 三次测评概览 1.0版本2.0版本3.0版本 注：气泡越大代表实际测评得分越高，分数越靠前；空白表示该版本下未测试。厂商A 厂商B 厂商C 厂商D 厂商E 厂商F 厂商G 厂商H 厂商I 厂商J 厂商K 3 目录 •3.0版本大模型综合指数 •3.0版本测评细分维度指数及评述 •测评题目展示大模型产品测评综述 大模型厂商整体测评 厂商最佳实践 案例目 录 0201 03•大模型产品现状与进程 •3.0版本大模型测评规则 •厂商优秀案例展示