跳到正文
原文
Import AI· Jack Clark·· 2026-07-27AI 评分62

Epoch 与 METR 发布 MirrorCode 长周期编程基准

Import AI 466: The bitter lesson for robotics, AIs complete week-long programming tasks; and OpenAI's accidental AI hacker

AI 导读

Epoch 与 METR 发布 MirrorCode 基准,用于测试 AI 系统在长周期编程任务上的表现,任务要求仅凭 CLI 访问重新实现目标程序。25 个目标程序中有 17 个至少出现一次满分运行,另有 4 个接近满分;Opus 4.7 用 14 小时、251 美元推理成本完成了一项人类预计需 2 至 17 周的任务。

来源:Import AI · importai.substack.com