★ 3
论文质疑 AI 省时测量:复现 METR 研究得 19%–24% 减速
论文区分「秒表视角」与「账本视角」,主张衡量 AI 节省时间必须同时计入被放过的错误。作者用公开数据复现 METR 开发者研究,同样 246 个议题可得出 19% 或 24% 的减速结论,AI 仅在 3%–82% 的议题上有帮助。在 GDPval 全量复核流程中,仅复核时间就把 GPT-5 的加速…
arXiv cs.AI5 天前
共 1 篇相关资讯,按重要度与时间排序,每 3 小时更新。
论文区分「秒表视角」与「账本视角」,主张衡量 AI 节省时间必须同时计入被放过的错误。作者用公开数据复现 METR 开发者研究,同样 246 个议题可得出 19% 或 24% 的减速结论,AI 仅在 3%–82% 的议题上有帮助。在 GDPval 全量复核流程中,仅复核时间就把 GPT-5 的加速…