新着研究 / Generative AI / AI Agent
全体構図と局所修正を振り分けるStride、図表入り画像の要件違反を反復して直す
Stride
概要
- 要件を満たすかの採点と、画像のどこで違反したかの特定を分けて扱う。
- 全体の再構成は構図担当、局所の訂正は修整担当へ渡し、複数候補から改善したものを採用する。
- 固定した生成器を使う試験で図表生成の評価を改善するが、検証器の得点上昇は全要件の正しさを保証しない。
補足:編集した模式図で仕組みを確認する
VISUAL EXPLAINER
図でつかむ、Strideの仕組み
- 01画像と要件
- 02違反を採点し位置特定
- 03全体か局所を修正
- 04改善候補だけ採用
原論文の説明をもとにした模式図です。処理の細部は省略しています。
研究の背景
図表入りの説明画像は、見た目だけでなく文字、数値、配置、意味の関係を同時に満たす必要がある。局所編集では全体構図の誤りを直せず、全体を生成し直すと正しかった部分まで壊すことがある。
Strideは修正範囲に応じて担当を分ける。生成器の重みを固定したまま、画像を見て要件を検証するモデルと複数の担当AIで反復改善する。どこが不正かを把握し、直す規模を合わせることが課題になる。
手法
まず要件ごとの充足を検証器で評価し、別に違反の場所と修正方法を画像へ対応付ける。全体の構図に関わる違反は構成担当へ、文字や部分的な要素の誤りは修整担当へ振り分ける。それぞれが内部で計画を立て、複数の画像候補を生成する。例えば要素の配置全体が崩れた場合と、一つのラベルだけが誤った場合で経路を変える。
過去の修正履歴も参照し、検証器の得点が上がる候補だけを次の状態として採用する。生成が確率的で検証器も不完全なため、一回の変更を信用せず候補を複数用意する。採用得点を単調に改善する方針で、反復中の後退を抑えるが、実際の正確さも単調に上がる保証とは異なる。
新規性
要件充足の判断と違反の視覚的な位置付けを分離し、その結果を編集規模の選択へ使う点が中心だ。全体再生成と局所修正の双方を持ち、変更の性質に合わせて使い分ける。
履歴、複数候補、改善時だけの採用を組み合わせて、固定生成器上の進化的な探索として修整を扱う。単に指示を詳しくする方法や生成数だけを増やす方法との差を要素別に評価している。
従来手法との違い
比較には元の固定生成器、候補数だけを増やす方式、Gen-Searcherなどの既存エージェント方式が含まれる。構成担当のみ、修整担当のみ、視覚的な位置特定の有無、反復数も比較する。
ERNIE-Imageで候補を一から六へ増やすだけでも点は上がるが、完全構成には届かない。修整担当だけの構成も強く、担当を増やせば機械的に最高になるわけではない。複数の役割を要件に対応付ける設計として読む。
実験結果
著者らはBizGenEval、IGenBench、WISEで評価した。BizGenEvalのHard得点はERNIE-Imageで51.1、Infographic-V2で69.5となり、固定生成器からそれぞれ23.1、28.4ポイント改善した。
IGenBenchのInfographic-V2構成は質問単位の正答率0.84、画像単位0.38で、元の0.72、0.17を上回った。画像単位0.38は比較したGPT-Image-2.0と同じ値だった。各得点は掲載された試験条件の結果で、画像全体が常に正確になることを意味しない。
応用の可能性
編集上の応用案 · 論文が実証した用途とは区別しています。
編集上の応用案は、社内報告向けの説明画像の下書き修正だ。入力は確定した数値、ラベル、配置条件と初期画像、出力は修正候補と満たしていない要件の一覧にする。担当者が採用画像を原データと照合して仕上げる。
図の構図は良いがラベルが違う場合には局所修正、要素の関係が崩れる場合には全体修正を使う。外部へ配布する前に数値と文字を確認し、自動検証の得点だけで正しい図として扱わない流れが必要になる。
応用先の候補からNauhに相談できます。
導入時の検証
導入時の検証案 · 対象データでの再評価が必要です。
導入時の検証案では、数値と条件が明確な少数の図案を用意する。同じ生成器で一回生成、複数候補選択、局所修正のみ、全体と局所の分岐を比較する。計算予算を揃え、反復の追加費用も記録する。
人が確認した要件充足率、文字と数値の誤り、正しい領域を壊した回数、修正時間を測る。検証器が改善と判定したのに人の評価が下がる例を集め、得点採用の盲点を調べる。最後の承認は元データとの照合で行う。
限界と課題
本方式は生成器の確率性と検証器の不完全さを前提にする。採用得点の単調性は検証器の尺度上の性質であり、見逃した要件や数値の正確さに対する保証ではない。複数候補と反復には追加の生成費用もかかる。
編集上の検証課題は、日本語の小さな文字、複雑な表、相互に衝突する制約、局所修正による周辺の変化だ。掲載比較の優位をすべての図案へ広げず、用途ごとの人手確認と費用を含めて評価したい。
出典
元のタイトル・要旨を確認する(英語)
Stride: Scale-Aware Multi-Agent Evolutionary Refinement for Infographic Generation
Infographic generation challenges text-to-image models because a single image must satisfy numerous visual, textual, and semantic constraints. Iterative agentic refinement with a multimodal verifier is a natural remedy, but existing methods face a scale mismatch: local edits cannot correct global composition errors, while full regeneration may destroy already-correct regions. We introduce Stride, a constraint-grounded multi-agent framework that treats refinement over any frozen generator as a history-aware evolution strategy. Stride separates constraint evaluation - whether each requirement is satisfied - from visual grounding - where and how it is violated. It then routes global revisions to a composer subagent and local corrections to a retoucher subagent. Each subagent conducts internal planning and generates multiple candidates, while Stride accepts a candidate only when it improves the verifier score, reducing regression across iterations. Because stochastic generators and imperfect verifiers make any single step unreliable, it is this combination of scale-aware routing, per-step redundancy, and monotonic acceptance that yields stable improvement across iterations. With fully open-weight generator-verifier systems, Stride outperforms proprietary systems including Nano-Banana-2.0 and Seedream-5.0-Pro on BizGenEval, matches GPT-Image-2.0 and surpasses Seedream-5.0-Pro on IGenBench, and achieves a new state-of-the-art score on WISE, while substantially outperforming existing agentic methods across all evaluated benchmarks.
論文本体の取得範囲に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。収集:2026-10-12




