来源:弗若斯特沙利文 日前,面对相继上市的众多模型,国际知名调研机构弗若斯特沙利文(Frost&Sullivan)联合头豹研究院发布《2024年中国大模型能力评测报告》(以下简称“报告”)。
报告选定了中外19个具有代表性的大模型进行评测,其中覆盖15家国内主流模型,与此同时,国际方面选择了OpenAI的GPT3.5和GPT4、谷歌的Gemini1.0以及Anthropic的Claude2,并将这四大模型的平均水平设为国际大模型均线。 报告以五大细分维度——数理科学、语言能力、道德责任、行业能力及综合能力为衡量标准,深入探索了大模型的能力边界,为社会各界提供了对当前中国大模型产业发展现状的清晰认知,以及大模型技术发展的潜力和在实际应用中的价值体现。
报告的核心内容包括以下几个方面:
具体内容如下