アーカイブ / AI Agent / RAG
調査AIの検索が停滞したとき、続行・方向転換・終了を選ぶRAAC
Retrieval-Aware Agent Controller (RAAC)
Retrieval-Aware Agent Controller (RAAC)の原論文から掲載した図です。細部はクリックして拡大できます。
原論文の図の説明を読む
Figure 1: (a) Stagnant reasoning in DRAs: the agents continue for many unnecessary repetitive steps, even though their information discovery capabilities are saturated and the task often has already been accomplished. (b) Effect of adding RAAC: the introduced unsupervised signals guide DRAs toward a more effective decision-making, improving both efficiency and task success.
概要
- RAACは検索履歴から情報の充足、文書と検索語の新規性、質問との近さを調べ、続行・方向転換・終了を選ぶ。
- 著者らのBrowseComp-Plusでの評価では、検索回数が平均14回減り、回答accuracyが平均3ポイント改善した。
- 社内文書への応用には、根拠の見落としと回答精度を、検索回数・完了時間と併せて制御なしの場合と比較する必要がある。
補足：編集した模式図で仕組みを確認する
VISUAL EXPLAINER
図でつかむ、Retrieval-Aware Agent Controller (RAAC)の仕組み
- 01調査質問
- 02文書検索と履歴
- 034信号で判断
- 04追加検索か最終回答
原論文の説明をもとにした模式図です。処理の細部は省略しています。
研究の背景
調査エージェントは、検索と推論を何度も繰り返して質問に答える。著者らが7種類の途中経過を調べたところ、多くは初期の反復後に関連文書の取得が頭打ちとなり、その後も同じ文書を再び見つけていた。
不要な検索は回数と待ち時間を増やす。一方、十分な根拠が集まる前に止めれば回答を損なうため、集めた情報と検索の進展を見て次の行動を決める必要がある。
手法
RAACは各反復で、質問、検索語、取得文書の履歴を調べる。判断材料は、回答に必要な条件をどこまで満たしたか、今回初めて見つかった文書の割合、前回と今回の検索語の違い、検索語と元の質問の近さの四つである。これらは正解ラベルから学習する代わりに、途中経過から得る信号として提案されている。
例えば複数の条件を含む質問で同じ文書ばかり見つかり、一部の条件が未確認なら、制御器は方向転換を選べる。その場合、履歴を受け取る別の処理が考え直した検索語を作り、その検索結果を履歴へ追加する。進展が見込めなければ検索を止め、元のエージェントに最終回答を作らせる。
新規性
著者らの提案は、既存の調査エージェントに、検索履歴全体を見て次の行動を選ぶ制御器を加える点にある。文書と検索語の新規性だけでなく、回答に必要な条件の充足と元の質問からのずれも扱う。
制御器は特定のエージェント構造に依存しない設計で、検索を続ける、方向を変える、回答へ進む、の三つを選ぶ。
従来手法との違い
比較対象はRAACを付けない同じ調査エージェントである。著者らは構成の異なる7種類を評価し、各検索で取得する文書を上位5件にそろえた。
元のエージェントは自ら検索と推論を繰り返す。RAACを加えると履歴を監視し、停滞時には別の検索を促し、情報が尽きたと判断すれば回答へ進める。もともと早く終了しがちなCPM-Reportでは、BrowseComp-Plusで検索回数が増えた。
実験結果
著者らは7種類のエージェントをBrowseComp-Plus、NeuCLIR、LegalSearchで評価した。指標は関連文書の取得割合を示すrecall、検索回数、BrowseComp-Plusではさらに回答のaccuracyである。各検索の取得件数は上位5件にそろえた。
BrowseComp-Plusでは、著者らによると検索回数が平均14回減り、accuracyは平均3ポイント、最大10ポイント改善した。WebWeaverではrecallが64.9から67.2、accuracyが47.8から51.3、検索回数が75.0から50.7に変わった。数値はこの評価条件での報告である。
応用の可能性
編集上の応用案 · 論文が実証した用途とは区別しています。
編集上の応用案：社内規程の変更点を調べる担当者向けに、規程文書を検索して根拠付きの回答案を作る調査処理へRAAC型の制御を加える。入力は担当者の質問、検索可能な規程文書、検索履歴で、出力は参照文書を添えた回答案とする。
追加学習用データは前提とせず、質問から回答条件を整理する方法を社内用語に合わせる。検証用には、必要な根拠文書と正しい回答を人が確認したラベルが要る。専用センサーを使わない文書業務への応用仮説であり、業務効果は未検証である。
導入時の検証
導入時の検証案 · 対象データでの再評価が必要です。
導入時の検証案：社内規程への質問と検索対象文書を用意し、各質問の必要な根拠文書と正しい回答を人がラベル付けする。追加学習用データや専用センサーは前提とせず、検索履歴の記録と三択の制御を既存処理に組み込み、回答条件の抽出を社内用語に合わせて調整する。
同じ質問集合で制御なしの処理を基準にし、根拠文書のrecall、回答の正確さ、検索回数、完了時間を比べる。終了を促した時点で必要な条件や根拠が残っていないかも人が点検する。
限界と課題
著者らは、制御器による複数回の言語モデル呼び出しが遅延を増やすと述べる。報告された評価条件では、制御器の処理時間はエージェントの推論と検索に要する時間の約10％だった。ただし、この値を社内文書の運用時間にそのまま当てはめることはできない。
編集上の検証事項は、回答条件を正しく抽出できるか、初めて見つかった文書が有用か、終了判断で必要な根拠を落とさないかである。確認できた本文の範囲では、付録にある設定や手順の詳細までは照合できない。
出典
元のタイトル・要旨を確認する（英語）
When Deep Research Agents Stagnate: Enhancing Reasoning with Retrieval-Aware Agent Control
In this paper, we analyze the reasoning trajectories of a variety of DRAs and show that existing agents often suffer from reasoning stagnation: the majority of iterations contribute little or no improvement to final performance, while agents lack awareness of their trajectories and are therefore ineffective at adapting their search strategies or determining when to terminate. To address this issue, we introduce a set of unsupervised signals and a Retrieval-Aware Agent Controller (RAAC), which assists the agent in selecting optimal actions at each stage of the research process. RAAC incorporates key information retrieval principles, namely search novelty and information coverage, resulting in more effective reasoning trajectories that improve overall performance while reducing unnecessary iterations, and consequently cost and latency. Specifically on BrowseComp-Plus and across a large set of DRAs, adding RAAC reduces the number of search calls by an average of 14, significantly improves the best-performing DRA on recall and accuracy, and achieves an accuracy gain of up to 10% (3% on average).
論文本体の取得範囲に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。解説更新：2026-10-01