Epoch AI发布Claude偏科图谱:写代码长板一直在,Opus 4.6和4.7已补齐数学短板

AIMPACT 消息,5 月 16 日(UTC+8),据 动察 Beating 监测,Epoch AI 发布领域特定能力指数(Domain-specific ECI)最新分析,揭示了 Anthropic 旗下 Claude 系列模型相对其综合能力一直表现为写代码强、数学弱。不过最新数据显示,这一偏科现象正在快速缓解。 根据测算,在过往多代模型中,Claude 在软件工程基准测试(SWE-ECI)上的表现一直稳定高于其综合得分,而在数学基准测试(Math-ECI)上长期存在落差。最新发布的 Opus 4.6 和 4.7 模型已将数学与综合得分的差距缩小至 1 分以内,补齐了此前的短板。 ECI 的测算机制是比较各大模型之间的相对表现,因此它直接反映特定任务对 AI 的平均难度,而非对人类的难度。 (来源:BlockBeats)