METR:Research·· 2026-02-24精选AI 评分67
METR 承认后续 AI 开发者效率实验受选择效应影响,宣布修改实验设计
We are Changing our Developer Productivity Experiment Design
AI 导读
METR 宣布更改其开发者生产力实验设计,认为 2025 年 8 月启动的新一轮实验数据不能可靠反映 AI 工具对开发效率的影响。
推荐理由
原文解释了新一轮 AI 开发者效率实验为何出现选择偏差并导致结果不可靠,还列出后续多种替代测量方案,方法层面的教训可以迁移到类似研究。
来源:METR:Research · metr.org