クローズドループ AI レビューとは、AI コーディングエージェントがリポジトリにコントリビュートし、1 つ以上の AI コーディングエージェントがそのコントリビューションをレビューする構成、すなわちプルリクエストの両側に AI がいる状態を指す。この用語は GitHub プルリクエストにおける AI から AI へのコードレビュー で導入されたもので、同論文はこれを慎重に観測上の意味で定義している。論文が観測できるレビューイベントは AI に帰属するものに限られているため、「クローズドループ」とは AI が両方の役割を占めていることを意味するのであって、人間が不在だったことを意味するのではない。クローズドループとして数えられたプルリクエストが、データには現れなかっただけで人間のレビューを受けていた可能性は十分にある。
用法
この構成が存在するのは、コーディングエージェントがいまやプルリクエストのワークフローにおいて 2 つの異なる役割を占めているからである。作成側のエージェント — 論文は Devin、OpenAI Codex、GitHub Copilot コーディングエージェント、Cursor、Claude Code を挙げている — は、自律的に、あるいは支援ツールとして、ユーザーに代わって PR を作成する。CodeRabbit、Sourcery、PR-Agent のようなレビュー側のエージェントは、行単位のコメントやレビュー判断を投稿する。いくつかの製品は両方の役割で登場し、それによってループはエコシステムをまたいでだけでなく、単一のエコシステム内でも閉じることになる。
この用語が実際に担っている区別として、同一製品のループと製品横断のループの区別がある。レビュー側のエージェントが作成側のエージェントと同じ識別可能な製品なのか、それとも別の製品なのかという区別である。その境界はベンダーや基盤モデルではなく、エージェント製品またはハーネスのレベルで引かれるため、同じ企業の 2 つの製品は製品横断として数えられる。同一製品によるレビューは単に統合された製品ワークフローの一部である可能性があり、そのため、この用語を導入した研究は製品横断のレビューをより興味深いケースとして扱っている。
適用される場面
測定される現象としては、入手可能な証拠によれば、これはエージェントの活動のうち少数派ではあるが急速に増えていた。特定されたエージェント作成の PR のうち 8.8% が少なくとも 1 件の AI レビューを受けており、製品横断では 1.6% であった。製品横断の件数は 2025 年第 1 四半期から 2025 年第 3 四半期にかけて 2 桁以上増加している。
この用語の実際上の重みは、GitHub のデータを読む者にとってそれが何を意味するかにある。公開コードのうち AI によって部分的に評価されるものの割合が増えているなら、レビュー履歴を人間の意思決定の証拠として扱う研究は異なる母集団を混ぜていることになり、メンテナーはレビューのシグナルがかつてと同じ意味を持つと想定できなくなる。同じ議論は下流にも当てはまり、レビューの出力を要約・集計するツールにも及ぶ。
これには 2 つの注意点が伴う。この構成は署名による帰属で特定されるため、AI の署名がないことは AI が関与しなかった証拠にはならず、件数は下限値である。また、AI が AI をレビューしたと観測できても、そのレビューが良いものだったかどうかについては何も言えない。この現象に名前を付けた研究は、コメントの量、カテゴリの構成、レイテンシを測定しており、これらはレビューの正しさやソフトウェアの品質ではなく、観測可能なレビュアーの振る舞いを記述するものだと明言している。