← 返回 Siami 首頁

AI 程式助手讓你寫更快 但不是寫更好:哈佛研究戳破「產出倍增」幻象

💬 44
AI 程式助手讓你寫更快 但不是寫更好:哈佛研究戳破「產出倍增」幻象

AI 程式助手讓你寫更快 但不是寫更好:哈佛研究戳破「產出倍增」幻象

編按:本文綜合整理自 Ars Technica 原報導、哈佛商學院 Fiona Chen 與 James Stratton 研究論文、軟體工程數據分析平台 Jellyfish 公開資料集,並加入 Siami 編輯部觀點與分析。

Ars Technica 報導指出,哈佛大學兩位研究員 Fiona Chen 與 James Stratton 利用軟體工程數據分析平台 Jellyfish 的真實工作數據,對 700 多家軟體公司、超過 70 萬名工程師在 2021 年至 2026 年 3 月間的活動進行大規模分析後發現:AI 程式助手確實讓「程式碼行數」暴增,但「軟體產出」卻幾乎紋風不動。換句話說,整套 AI 寫程式工具的效率紅利,目前幾乎完全被另一個瓶頸吸收掉了——而那個瓶頸,是人類。


程式碼暴增 30%,Issue 解決率卻沒變

研究的數字相當直觀:

  • AI coding agents 引入後,平均每家公司程式碼總行數增加 30%
  • commit 總數上升 20%
  • pull request 數量增加 23%

但同期間,Jira 之類的 Issue / Epic(也就是「一個完整可交付的功能」)的解決率,在統計上沒有顯著變化。換句話說,工程師的「鍵盤產出」是變多了,但「真正被交付的軟體功能」沒有等比例增加。

這是一個非常關鍵的發現:AI 不是讓工程師「做更多事」,而是讓他們「打更多字」。


瓶頸轉移到「人類審查」

研究員把這個落差歸因到下游的 code review(程式碼審查)流程:

  • pull request 從送出到被合併的審查時間暴漲 49%
  • 「需要修改」的 pull request 比例近乎翻倍
  • 每份 pull request 留下的評論數增加 35%
  • 從事 code review 的員工比例上升 14%

研究員 Fiona Chen 在論文中寫道:「任何在『實際寫程式』階段提升的效率,都被生產流程的下游限制給吸收掉了。」

這意味著 AI 寫程式不是「省時間」的工具,而是把時間從「打程式碼」移到「讀程式碼」。淨效果接近零。


AI 審查還不夠普及 23% 評論來自 AI

理論上,AI 也可以用來做 code review。資料顯示,截至 2026 年 3 月有 80% 受測公司開始用某種 AI 審查工具。但實際成效仍有限:

  • 只有 23.3% 的審查評論是 AI agent 留下的
  • 只有 10.8% 的 pull request 由 AI agent 主導

也就是說人,人類審查者仍然是審查工作的關鍵角色。AI 確實開始介入審查,但目前還沒辦法獨立完成「看程式碼、找 bug、給修改建議」這個閉環。


為什麼這件事重要

這份研究給了業界一個很冷靜的現實校準。過去兩年,整個軟體圈籠罩在「AI 取代工程師」或「AI 讓產出倍增」的敘事裡。這份研究用真實工作數據告訴我們:敘事的方向是錯的,AI 沒有讓軟體公司變成兩倍速的工廠。

  • 對管理層:AI 寫程式的投資回報,要看「端到端交付週期」而不是「commit 數」。如果只看 commit,可能會誤判團隊生產力。
  • 對工程師:AI 工具的價值不在「幫你打更快」而是「幫你處理瑣碎」。Code review 流程如果沒有自動化,AI 寫程式的紅利會被審查時間吃掉。
  • 對 AI 公司:現在的競爭點不是「誰的模型寫程式更準」,而是「誰能把整個開發閉環自動化」。

對台灣的中小企業與新創來說,這份研究的訊號更直接:別先別急著算 AI 寫程式的 ROI,先把 code review 流程自動化,或先用 AI 工具做審查輔助,紅利才會真正落地。


數據解讀與質疑

幾個值得追蹤的數字與疑問:

  • 研究的截止點是 2026 年 3 月:AI agent 在那之後又更新過幾輪,現在的「AI 寫程式 → AI 審查」閉環可能已經改善。這份研究是當下的快照,不是終局。
  • 沒有涵蓋頂尖工程師:Jellyfish 的資料是「公司層級」的聚合,沒辦法分辨頂尖星級工程師是否比 AI 工作者(agent-only)整體主導。如果頂尖 5% 的工程師用 AI 的效果好,可能被平均數蓋掉。
  • 「軟體產出」的定義太狹隘:研究用 Jira 的 Issue 解決率當產出指標,但很多 AI 寫的程式是測試、文件、重構,這些不會變成新 Issue,但不代表沒價值。
  • 「下游瓶頸」是暫時的:code review 變長可能是因為人類還不信任 AI。當業界建立「AI 寫、AI 審」的標準流程後,這個瓶頸可能消失。

研究員也提醒,目前沒有任何證據顯示 AI 寫程式會減少軟體公司的員額——就業數字與 LinkedIn 交叉比對後沒有顯著變化。


研究方法小檔

  • 資料來源:Jellyfish 平台的工程團隊分析資料(涵蓋 700+ 家公司、70 萬+ 員工、3 億筆工作事件)
  • 時間範圍:2021 年至 2026 年 3 月
  • 方法:「雙重差分」迴歸分析(Difference-in-Differences),比較引入 AI 工具前後的差異
  • 研究者:哈佛大學 Fiona Chen、James Stratton
  • 資料特性:Jellyfish 客戶偏中大型軟體公司,新創與個人開發者的覆蓋率較低

參考資料