2024年中国大模型行研能力年中评测（摘要版）.docx

FROSTSULLIVAN

沙利文

2024年中国大模型

行研能力年中评测

（摘要版）

AI变革行业创新发展

2024EvaluationofChinaLLMinIndustryResearchMid-YearReport

评测|

人工智能系列研究

OPPORTUNITYGROWTHINVESTMENTINSIGHTS

报告提供的任何内容（包括但不限于数据

报告提供的任何内容（包括但不限于数据、文字、图表、图像等）均系头豹研究院独有的高度机密性文件（在报告中另行标明出处者除外）。未经头豹研究院事先书面许可，任何人不得以任何方式擅自复制、再造、传播、出版、引用、改编、汇编本报告内容，若有违反上述约定的行为发生，头豹研究院保留采取法律措施、追究相关人员责任的权利。头豹研究院开展的所有商业活动均使用“头豹研究院”或“头豹”的商号、商标，头豹研究院无任何前述名称之外的其他分支机构，也未授权或聘用其他任何第三方代表头豹研究院开展商业活动。

头豹研究院

弗若斯特沙利文咨询（中国）

大模型行研评测|2024/08

中国：人工智能系列

I摘要

n大模型是自然语言处理领域中深度学习技术的高阶应用，其通过对海量文本数据的深度训练，能够全面吸纳并提炼出丰富的语言学知识与语义内涵。这类大模型通常拥有庞大的参数规模，动辄数亿乃至数十亿参数，从而具备了高度精准的自然语言理解与生成能力，几乎能够实现与人类的无障碍交流。其广泛的应用场景涵盖了机器翻译、智能问答、文本摘要等多个领域。从技术发展的视角来看，语言模型的演进路径具有重要的启示意义。最初，模型基于深度神经网络进行训练；随后，业界逐步引入了预训练与微调相结合的模式以提升模型性能；而当前，最前沿的范式已转向预训练结合提示训练，这一转变标志着自然语言处理在模拟人类思维交流方面的又一重大突破。

n大模型能够显著增强研究报告的编写效率，通过采纳精细化的询问策略，分析师在研究过程中能够实现效率的最优化。此外，这一模型还能够提供全面的文本编辑支持，包括校正、查重、以及文风润色等功能，从而确保分析师提交的工作成果达到更高的质量标准

n大模型技术潮流兴起催生中国大模型百花齐放。沙利文与头豹研究院联手对16个大模型进行

综合评估，以深入梳理中国大模型在行研领域的应用表现，为各界提供清晰深入的视角，以应对预训练大模型引发的人工智能浪潮

自2022年底ChatGPT向公众发布以来，AI技术从科技企业的闭门探索正式走向全人类的视野。经过一年多的发展，基于GPT起源的大模型技术已成为国家技术和产业的关键战略要素，受到国际高度重视。在此背景下，中国地区涌现了数百个预训练语言大模型，参与者涵盖了顶尖学术研究机构和互联网科技企业。为梳理中国大模型能力梯队与企业背景，沙利文头豹研究院于2023年12月首次对大模型行研能力进行了多维度综合评测。

半年后，随着大模型能力持续迭代升级，市场竞争格局经历多轮洗牌，当下的大模型市场已焕然一新。不仅百度、阿里、腾讯等互联网大厂继续引领市场，诸如Moonshot、零一万物、百川智能等大模型创业企业也纷纷崭露头角，挑战传统大牌互联网厂商的地位。为反映当前最真实的竞争态势，沙利文头豹研究院与2024年8月，基于必威体育精装版的大模型能力，梳理并评估了市场上领先的多家大模型，深入分析它们的当前行研综合能力。

头豹

LeadLeo

400-072-5588

沙

J文

大模型行研评测|2024/08

中国：人工智能系列

内容目录

1大模型行研能力评测背景及方法05页

行研背景概述

传统行研发展痛点数字行研革新

大模型赋能行研

评测大模型参与者评测方法与指标

报告撰写能力

行研基础能力行业理解能力

2

2

评测结果

研究目标

n研究目的

n

基于数字行研解决方案的研究和实践基础，头豹研究院联合沙利文凭借百人分析师团队匿名投票机制，筛选了16个大模型，进行了多维度的综合评估，旨在全面了解并系统梳理中国大模型参与者在行研领域的应用表现。

n研究目标

n

?了解中国大模型在行研领域的应用价值

?探析中国大模型在行研领域的综合表现

?梳理中国大模型的参与者现状

?评估中国大模型