全球主流模型厂商旗舰模型的大参数发展趋势 原图定位

我们认为，全球头部闭源模型的参数目前呈现的规律是：跨代际更新，模型参数进一步加 大；同代 际更新，随着模型技术架构优化和软硬件资源 协同能力提高，在模型性性能不降的情况下，参数或做的更小。Google 和 OpenAI 的最新模型都呈现了这个趋势。24 年 5月 13 日，OpenAI 发布了 GPT-4o 模型，在多模态端到端的架构基础上，实现了更快的推理速度，以及相比于 GPT-4 Turbo 50%的成本下降，我们推测其模型参数或在下降。5 月14 日 Google 发布了 Gemini 1.5 Flash，官方明确指出 Flash 是在 Pro 的基础上，通过在线蒸馏的方式得到，即 Flash 的参数小于 Pro。