前沿模型领先地位更替更快

关键信息

Epoch Capabilities Index 是一个语言模型性能的综合指标，因此排名反映的是更广泛的能力趋势，而不是单一基准测试。图表还表明，GPT-4 之后的进步更小但更频繁，尤其是在 2024 年秋季像 o1-preview 这样的推理模型出现之后。

资讯摘要

Epoch AI 研究员 Jaeho Lee 的数据表明，GPT-4 在 Epoch Capabilities Index 上大约连续保持了一年的榜首位置，这在如今的前沿模型竞争中非常少见。GPT-4 于 2023 年 3 月发布，直到 2024 年 2 月才被 Claude 3 Opus 超越。报道指出，自那以后，没有任何模型能达到 GPT-4 那样长的统治时间。OpenAI 的 o1 模型是第二长的领跑者，但它也只维持了刚过三个月，不到 GPT-4 的三分之一。

自 Claude 3 Opus 夺回榜首以来，第一名已经更换了 17 次。现在模型在榜首位置的中位停留时间大约只有七周。文章认为，这张图有两层含义：一方面，它说明竞争对手花了很长时间才追上 GPT-4；另一方面，它也说明行业竞争已经变得更激烈。文章还指出，如今不同领先模型之间的能力跃迁更快，但单次提升幅度比 GPT-4 时代以及 2024 年秋季以 o1-preview 为代表的推理模型阶段更小。

资讯正文

GPT-4 的统治地位持续了一年，而如今的顶级模型在榜首往往只能待上七周左右

OpenAI 的 GPT-4 在 Epoch Capabilities Index（ECI）榜首位置上保持了大约一年。ECI 是衡量语言模型表现的一项综合指标。根据 Epoch AI 研究员 Jaeho Lee 的说法，这一纪录远远超过此后任何模型。OpenAI 的 o1 以略超过三个月的时间，拥有第二长的领先期，但也不到 GPT-4 统治期的三分之一。自从 Claude 3 Opus 在 2024 年 2 月将 GPT-4 拉下榜首以来，榜首位置已经易手 17 次。按单个模型计算，居于榜首的中位停留时间大约是七周。

这张图可以有两种解读方式。它显示了竞争对手实验室需要多长时间才能追平 GPT-4——这款模型在发布时确实是一个真正的异类。但它也说明，自那以后竞争已经激烈得多。如今再没有任何模型能够保持类似的领先优势；而且与 GPT-4 以及 2024 年秋季随推理模型（如 o1-preview）开启的那个时代相比，模型之间能力跃升的速度更快，但幅度更小。

来源与参考

1. 原始链接
2. GPT-4's dominance lasted a year while today's top models barely survive seven weeks at the top