Ars Technica · AI· Kyle Orland·· 9 天前AI 评分62
哈佛研究:AI编码智能体生成更多代码,但软件产出并未增加
AI coding agents generate more code, but not more software
AI 导读
哈佛大学研究者Fiona Chen和James Stratton基于Jellyfish的聚合分析数据,覆盖2021年至2026年3月间700多家软件开发公司、70多万名员工的3亿条工作事件,发现AI编码工具带来的编码阶段效率提升被下游环节吸收,代码审查成为显著瓶颈。
正文 · AI 翻译
任何与计算机编程哪怕只有一点关联的人都知道,现代 AI 编程助手和智能体在生成大量可用代码方面效率极高。但使用这些工具的编码人员也清楚不能轻信这些代码的准确性,这意味着需要投入大量精力来审查任何 AI 生成的输出。
一项针对数百家公司实际编码实践的最新研究发现,人工代码审查构成了 AI 编程工具整体效率的显著“瓶颈”,导致“几乎没有证据表明公司通过使用这些工具提高了软件产出或减少了用工”。研究作者发现,实际编码阶段提升的任何效率都“被生产流程下游的制约因素所吸收”;因为“代码审查流程显著变长,拉取请求更有可能需要修改,审查者留下的评论也更多”。
量两次,剪一次
为得出这些结论,哈佛大学研究人员 Fiona Chen 和 James Stratton 使用了 Jellyfish 的汇总分析数据,该平台衡量工程团队的细粒度产出。这些数据涵盖 3 亿个单独“工作事件”(例如提交和拉取请求),以及 2021 年至 2026 年 3 月期间 700 多家相关软件开发公司、超过 70 万名员工的问题管理软件数据。
来源:Ars Technica · AI · arstechnica.com