DX 社の Deputy CTO である Justin Reock 氏が、400社のデータを分析した結果を公開しました。AI コーディングツールの導入による開発者の生産性向上は、ベンダーが謳う「2〜3倍」や「10倍」ではなく、約10% にとどまるという内容です。
調査の概要
DX 社は 2024年11月から2026年2月にかけて、400社のエンジニアリング組織を対象に、AI ツールの利用状況と PR（Pull Request）スループットの相関を分析しました。
主な結果:
- AI ツールの利用率は平均 65%増加
- PR スループットは 9.97%（約10%）の増加 にとどまった
- 大半の組織は 8〜12% の範囲に収まった
なお、PR 目標値を設定しているチーム（メトリクスのインフレーションが起きやすい）は分析から除外されています。
なぜ10倍にならないのか
開発者へのインタビューから浮かび上がった根本的な理由は、「コードを書くこと自体がボトルネックではなかった」 という点です。
あるシニア開発者のコメント:
簡単なタスクは少し楽になった。4日かかるタスクが3日になるかもしれない。でも、それは PR を3倍出せるという意味ではない。
ソフトウェア開発のライフサイクル全体を考えると、コーディングはその一部に過ぎません:
- 要件の理解・すり合わせ — AI では圧縮しにくい
- コードレビュー — 人間同士のコミュニケーションが必要
- テスト・デプロイ — 組織のプロセスに依存
- チーム間の調整・ハンドオフ — 人間中心の活動
AI ツールがコーディング速度を50%向上させたとしても、コーディングが全体の15%しか占めていなければ、全体への影響は限定的です。
10%でも価値はある
記事では、10%の生産性向上を過小評価すべきではないとも指摘しています。
- 500人の開発者がいる組織なら、50人分の追加アウトプット に相当
- 採用コストなしでその効果が得られる
- 組織全体で一貫して得られる改善は意味がある
エンジニアリングリーダーへの示唆
この調査結果は、AI ツール導入における期待値の設定が重要であることを示しています:
- 現実的な目標設定: 10倍ではなく10%の改善を前提に ROI を計算する
- ボトルネックの正確な把握: コーディング以外のプロセス（レビュー、テスト、調整）にも目を向ける
- ベンダーの主張を鵜呑みにしない: マーケティング上の数字と実測値には大きな乖離がある