跳到正文
METR:Research·· 2026-02-24精选AI 评分67

METR 承认后续 AI 开发者效率实验受选择效应影响,宣布修改实验设计

We are Changing our Developer Productivity Experiment Design

AI 导读

METR 宣布更改其开发者生产力实验设计,认为 2025 年 8 月启动的新一轮实验数据不能可靠反映 AI 工具对开发效率的影响。

推荐理由

原文解释了新一轮 AI 开发者效率实验为何出现选择偏差并导致结果不可靠,还列出后续多种替代测量方案,方法层面的教训可以迁移到类似研究。

来源:METR:Research · metr.org