アーカイブ / Robotics / VLM
学習済みロボット方策の動作を実行時に点検・修正するEVE
EVE
EVEの原論文から掲載した図です。細部はクリックして拡大できます。
原論文の図の説明を読む
Figure 1 : EVE : A Generator-Verifier Interaction Framework for Generative Embodied Policies
概要
- EVEは、学習済みロボット方策の重みを固定し、複数のVLM検証器による提案を実行時の動作生成へ反映する。
- 動作候補の時間的なずれが閾値を超えたときに検証器を呼び、候補選択と回復動作の提案を集約する。
- 著者らはMS-HABの66課題中44課題で、二種類の検証器を併用した構成が課題内で最高の成績だったと報告する。
補足:編集した模式図で仕組みを確認する
VISUAL EXPLAINER
図でつかむ、EVEの仕組み
- 01観測画像・状態・指示
- 02動作候補とずれ検出
- 03検証器の提案
- 04誘導付き動作生成
- 05実行動作
原論文の説明をもとにした模式図です。処理の細部は省略しています。
研究の背景
生成型方策は、観測から複数の動作候補を作るロボットの制御方法である。机の高さなどが学習時と少し違うと動作が崩れ、失敗から戻りにくいことがある。回復動作を追加で収集して再学習するには手間がかかる。
EVEは、学習済み方策の重みを変えずに、実行中の候補動作を点検して修正する。著者らは物をつかむ、置くなどの操作作業を対象に、追加の推論を使って成功率を高められるか調べた。
手法
EVEは、作業指示、観測画像、関節などの状態から、固定した方策で複数の動作候補を作る。時間が重なる候補部分の分布の差をMMDという統計量で測り、閾値を超えたときに検証器を呼ぶ。視覚言語モデル(VLM)は画像と言葉を扱うモデルで、候補軌道を選ぶ役割と、画像から回復動作を選ぶ役割を担う。
例えば置く動作が乱れた場合、前者は提示された軌道を選び、後者は事前に定めた基本動作から回復案を選ぶ。提案を動作軌道に変換して集約し、誘導付き拡散で方策の動作生成へ反映する。拡散は雑音から動作を段階的に作る処理で、検証器の軌道との差を縮める方向に生成を導く。
新規性
EVEの中心は、重みを固定した動作生成方策に、役割の異なる複数の視覚言語モデル(VLM)検証器を組み合わせる点にある。候補軌道を選ぶ検証器と、観測画像から回復動作を選ぶ検証器を同じ枠組みで扱う。
異なる形式の提案を動作軌道にそろえて集約し、誘導付き拡散で元の方策の動作生成へ反映する。追加の方策学習や検証器学習を要しない構成として、著者らは提示している。
従来手法との違い
直接の比較対象は、検証器を使わず、学習済み方策の動作をそのまま実行する場合である。EVEでは動作候補のずれを検出した時点で検証器を呼び、提案を動作生成へ加える。著者らは評価した操作課題で成功率の改善を報告する。
SetTable-Placeでの構成要素比較では、検証器の動作で全面的に置き換える方法は成績が大きく低下し、単純平均も提案手法の誘導付き拡散より低かった。確認できた本文の範囲では、この比較の差の数値は示されていない。
実験結果
著者らはMS-HABの移動操作66課題で、学習済み拡散方策との成功率を比較した。Success-Onceは最大200ステップの試行中に一度でも成功した割合で、66課題中44課題では二種類の検証器を併用した構成が課題内で最高だったと報告する。
SimplerEnvではπ0方策に対し、Move Nearで併用構成が2.40%、Close Drawerで基本動作を選ぶ検証器が1.11%の改善と記す。MS-HABの指標説明は1000試行、結果説明は1008回の実行と記載が異なるため、ここでは試行数を確定しない。詳細な課題別結果表は確認できた本文の範囲に含まれない。
応用の可能性
編集上の応用案 · 論文が実証した用途とは区別しています。
編集上の応用案:倉庫の棚から物品を取り、指定場所へ置く移動ロボットで試す。入力はカメラ画像、関節などの状態、作業指示と置き場所の情報、出力は実行動作列と介入記録にする。動作候補が乱れた場面で検証器の提案を取り込む。
対象作業に適合する学習済み方策と、その学習元となる実演データの画像・状態・指示・動作の形式を確認する。物品位置の表示方法、回復動作の選択肢、成否ラベルを現場に合わせて用意する必要がある。この用途での改善は未検証である。
応用先の候補からNauhに相談できます。
導入時の検証
導入時の検証案 · 対象データでの再評価が必要です。
導入時の検証案:まず一つの置き作業を選び、同じ初期条件で既存方策のみの場合とEVEを加えた場合を比べる。方策の学習元となる実演データの画像・関節状態・指示・動作の形式を確認し、同種のセンサー入力をそろえる。各試行には成否ラベルを付ける。
候補軌道の見せ方、目標位置の指定、回復用の基本動作を対象作業に合わせる。別の事前試行で介入閾値を決め、成功率、失敗後の回復率、介入回数、動作決定時間を記録する。元の方策との差に加え、介入が失敗を増やした試行も確認する。
限界と課題
著者らは、毎時点で複数のVLMを呼ぶ計算負荷を挙げ、動作のずれを検出した時点だけ介入させている。また、画像などの情報と低水準の動作、異なる検証器の提案を接続する難しさを課題として説明する。記載された実験設定では、介入は一試行につき一回に制限される。
編集上の検証事項は、別の作業でも介入閾値が適切か、必要な画像・関節情報・目標位置を取得できるか、動作決定の時間が制御周期に収まるかである。介入後に新たな失敗が生じる頻度も調べたい。
出典
元のタイトル・要旨を確認する(英語)
EVE: A Generator-Verifier System for Generative Policies
Visuomotor policies based on generative such as diffusion and flow-matching have shown strong performance for robotics applications but degrade under distribution shifts, demonstrating limited recovery capabilities without costly finetuning. In the language modeling domain, test-time compute scaling has revolutionized the reasoning capabilities of modern LLMs by enabling candidate solution refinement. These methods typically leverage foundation models as verification modules in a zero-shot manner to score candidate solutions. We hypothesize that generative policies can similarly benefit from additional inference-time compute that employs zero-shot VLM-based verifiers in a generation-verification framework. To this end, we introduce EVE: a modular, generator-verifier interaction framework that boosts the performance of pretrained generative policies at test time, with no additional training. EVE wraps a frozen base policy with multiple zero-shot, VLM-based verifier agents. Each verifier proposes action refinements to the base policy candidate actions, while an action incorporator uses classifier guidance to fuse aggregated verifier feedback into action denoising. We study design choices for generator-verifier information interfacing across a system of verifiers with distinct capabilities. Across diverse simulated and real robotic tasks and embodiments, EVE consistently improves success rates without additional policy or verifier training. Through extensive ablations, we isolate the contribution of verifier capabilities and action incorporator strategies, offering practical guidelines to build scalable, modular generator-verifier systems for embodied control.
論文本体の取得範囲に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。解説更新:2026-10-01




