表示
超・人工知能研究所 Super AI Research Lab トップへ超・人工知能研究所AI Research Lab / ぱそ太郎工事中

since
平成38年9月29日

← 検索結果に戻る

解候補の改善と検索語の改善を一緒に進めるEvoDuet

EvoDuet

保存した記事を見るこのブラウザに保存します。無料会員で端末間の同期・フォルダ整理

概要

  • 解候補と検索語を二段の最適化で更新し、モデルの重みは固定する。
  • 検索するか、保存済み文書を使うか、文書なしで進むかを段階ごとに選ぶ。
  • 21課題で改善を報告するが、使うモデルによって効果が異なる。
補足:編集した模式図で仕組みを確認する

VISUAL EXPLAINER

図でつかむ、EvoDuetの仕組み

左から右へ読む
  1. 01解候補と知識不足
  2. 02検索語と文書の改善
  3. 03新たな候補生成
  4. 04評価結果の保存

原論文の説明をもとにした模式図です。処理の細部は省略しています。

研究の背景

言語モデルを使う進化的探索は、解の候補を作り、評価し、良い候補を次の改善へ使う。ところが必要な外部知識が足りないと、候補を更新しても進歩が止まる場合がある。

検索ツールを追加するだけでは、解の状況が変わっても同じページばかり取得することがある。EvoDuetは、解の探索と検索の方法を一緒に変え、必要な知識の取り方も改善する。

手法

各反復で検索ゲートが知識の不足を判定し、新しく検索する、保存文書を再利用する、文書なしで進むという選択を行う。検索が必要な場合には内側のループで検索語を改善し、その文書から得られると予測する解の得点で文書を順位付けする。

外側のループは選んだ文書を使って解候補を生成し、評価結果を後の検索のために保存する。検索と課題解決を二段で最適化する一方、基礎モデルの重みは変えない。解の状態と評価の経験が、次に調べる知識を変える仕組みである。

新規性

検索を固定の補助処理とせず、解の改善と並行して検索語や文書選択も進化させる点が中心である。過去にどの文書が良い解へつながったかを後の探索へ戻す。

必要な時だけ検索するゲートも設け、保存した知識の再利用を選べる。検索回数を増やすこと自体より、候補の変化に合う知識を取得する設計を目指す。

従来手法との違い

単に検索ツールを付ける方式は、解が変わっても検索先が固定化し得る。本方式は検索語の更新と文書の予測順位を使い、課題の現在の状態へ検索を対応させる。

比較ではOpenEvolveの発見利得が基準になる。またTop-KやEvoXなど別の探索枠組みでも検討しており、特定の候補管理方式だけに効果が依存するかを調べる。

実験結果

著者らは、一反復一候補の21最適化課題で、正規化した発見利得がGPT-5.6-Lunaでは74.1%から78.0%、Gemini-3.8-Flashでは61.3%から82.3%へ改善したと報告する。一方でQwen3.5-9Bには利益がなかった。

最良の試行は八課題で既報の最高得点を超え、三課題で一致したとされる。これらは評価された最適化課題の結果であり、任意の科学的発見や検索業務に同じ改善幅を約束するものではない。

応用の可能性

編集上の応用案 · 論文が実証した用途とは区別しています。

編集上の応用案として、社内でアルゴリズムの設定を探索するときに、失敗した候補から不足知識を整理して関連文書を探す使い方が考えられる。候補、測定値、検索文書を一緒に記録する。

担当者は採用する改善案を確認し、どの文書が変更へ影響したかを追跡する。実験可能な得点を持つ小さい課題から始めれば、検索が改善へ寄与したかを判定しやすい。

応用先の候補からNauhに相談できます。

導入時の検証

導入時の検証案 · 対象データでの再評価が必要です。

導入時の検証案では、検索なし、固定検索、検索語も更新する方式を同じ課題と予算で比較する。使える文書集合と候補評価の方法をそろえ、乱数条件を複数用意する。

最終得点、改善に必要な反復数、重複取得率、検索費用を測る。モデルによる効果差も確認し、成績が良かった一試行だけを採用判断の根拠にしない。

限界と課題

著者らの結果には、あるモデルでは改善しない例が含まれる。知識不足の判定や文書の価値予測がうまく働かなければ、検索を増やしても良い候補が得られるとは限らない。

編集上は、文書の誤り、評価指標の偏り、外部情報の更新を確認したい。得点の改善と研究上の妥当性を区別し、提案を再現可能な実験へ結び付ける必要がある。

応用先の候補
研究内容と応用案に基づく分類です。業界での導入実績を示すものではありません。

出典

元のタイトル・要旨を確認する(英語)

EvoDuet: Bilevel Co-Evolution of Web Searching and Task Solving for Scientific Discovery

Evolutionary search with large language models (LLMs) can stall when progress requires external knowledge the model lacks. Supplying relevant documents helps, but simply adding web search tool can keep returning the same pages as solutions change. We introduce EvoDuet, a bi-level optimization method that co-evolves solutions and search queries with fixed model parameters. At each iteration, a retrieval gate lets the LLM assess its knowledge gap and choose to retrieve new documents, reuse stored ones, or proceed without them. An inner loop refines queries and ranks documents by the solution scores they are predicted to yield; an outer loop generates candidates in parallel from these documents and records the evaluated outcomes for later searches. Across 21 optimization tasks with one candidate per iteration, EvoDuet raises OpenEvolve's normalized discovery gain from 74.1% to 78.0% with GPT-5.6-Luna and from 61.3% to 82.3% with Gemini-3.8-Flash, whereas Qwen3.5-9B does not benefit. Our best runs surpass the previously reported best scores on eight tasks, including Swap Reduction on Q20 and Rosetta, and match them on three more. EvoDuet also improves with other scaffolds (e.g., Top-K, EvoX) on Sums/Diffs and Denoising, demonstrating its applicability across evolutionary search scaffolds.

論文本体の取得範囲に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。収集:2026-10-01