DX 社の Deputy CTO である Justin Reock 氏が、400社のデータを分析した結果を公開しました。AI コーディングツールの導入による開発者の生産性向上は、ベンダーが謳う「2〜3倍」や「10倍」ではなく、約10% にとどまるという内容です。

調査の概要

DX 社は 2024年11月から2026年2月にかけて、400社のエンジニアリング組織を対象に、AI ツールの利用状況と PR（Pull Request）スループットの相関を分析しました。

主な結果:

  • AI ツールの利用率は平均 65%増加
  • PR スループットは 9.97%（約10%）の増加 にとどまった
  • 大半の組織は 8〜12% の範囲に収まった

なお、PR 目標値を設定しているチーム（メトリクスのインフレーションが起きやすい）は分析から除外されています。

なぜ10倍にならないのか

開発者へのインタビューから浮かび上がった根本的な理由は、「コードを書くこと自体がボトルネックではなかった」 という点です。

あるシニア開発者のコメント:

簡単なタスクは少し楽になった。4日かかるタスクが3日になるかもしれない。でも、それは PR を3倍出せるという意味ではない。

ソフトウェア開発のライフサイクル全体を考えると、コーディングはその一部に過ぎません:

  • 要件の理解・すり合わせ — AI では圧縮しにくい
  • コードレビュー — 人間同士のコミュニケーションが必要
  • テスト・デプロイ — 組織のプロセスに依存
  • チーム間の調整・ハンドオフ — 人間中心の活動

AI ツールがコーディング速度を50%向上させたとしても、コーディングが全体の15%しか占めていなければ、全体への影響は限定的です。

10%でも価値はある

記事では、10%の生産性向上を過小評価すべきではないとも指摘しています。

  • 500人の開発者がいる組織なら、50人分の追加アウトプット に相当
  • 採用コストなしでその効果が得られる
  • 組織全体で一貫して得られる改善は意味がある

エンジニアリングリーダーへの示唆

この調査結果は、AI ツール導入における期待値の設定が重要であることを示しています:

  1. 現実的な目標設定: 10倍ではなく10%の改善を前提に ROI を計算する
  2. ボトルネックの正確な把握: コーディング以外のプロセス（レビュー、テスト、調整）にも目を向ける
  3. ベンダーの主張を鵜呑みにしない: マーケティング上の数字と実測値には大きな乖離がある

参考