アーカイブ / Robotics / Generative AI
開始画像からロボットの動きを生成し、制御方針を試すWorldGym
WorldGym
WorldGymの原論文から掲載した図です。細部はクリックして拡大できます。
原論文の図の説明を読む
Figure 1: Overview of WPE. Generated video frames (bottom) are compared against ground-truth video frames (top) given the same action sequence. Semantic segmentation and tracking can evaluate the dynamics of the generative simulator, while VLMs can be used as reward models to compute policy values. Agreement between real-world videos and generated videos reflects the quality of the world model.
概要
- 開始画像から方針の操作値に沿う動画を生成し、視覚言語モデルで作業の成否を判定する。
- LIBEROでは成績順を保った一方、元の方針の成功率を低く、操作に雑音を加えた方針では高く推定した。
- 実機への適用には、対象ロボットの画像・操作記録と、実際の成功率による照合が必要になる。
補足：編集した模式図で仕組みを確認する
VISUAL EXPLAINER
図でつかむ、WorldGymの仕組み
- 01開始画像と作業指示
- 02方針の操作値
- 03動画を区間生成
- 04動画の成否判定
原論文の説明をもとにした模式図です。処理の細部は省略しています。
研究の背景
ロボットの制御方針は、画像や作業指示を受けて次の操作を決める。候補を実機で繰り返し試すには費用がかかり、物を壊す恐れもある。手作業のシミュレーターでは、複雑な物体の動きを再現するための調整が必要になる。
著者らは、過去の画像と操作記録から次の映像を学び、実機試験前に方針を動かせる環境を検討した。評価に役立つかは、操作に応じた映像の動きと、作業の成否判定が実際の結果にどれほど合うかにかかる。
手法
WorldGymでは、開始画像と作業指示を受けた制御方針が操作値を出し、世界モデルがその操作後の画像を生成して方針に返す。この往復で作業の動画を作る。例えば把持部を動かして閉じる操作は、丸めて文字にした値ではなく、元の連続的な数値としてモデルに渡す。
長い動作は複数の区間に分け、直前までの画像と次の複数の操作値から、続く複数フレームを生成する。区間ごとに参照する過去の長さと生成する長さを調整できる。生成動画から画像を抜き出し、作業指示とともに視覚言語モデル、つまり画像と文章を合わせて扱うモデルへ渡して成否を判定する。複数回の試行で成功率を推定する。
新規性
著者らは、操作値に応じて動画を生成する世界モデルを、制御方針の評価環境として使う方法を提案した。世界モデルとは、過去の観測と操作から次の観測を予測するモデルである。
長い動作を区間に分けて生成し、実動画と同じ操作列を与えた生成動画との一致を測る指標も設計した。生成した動作の成否を視覚言語モデルで判定し、方針の評価につなげる。
従来手法との違い
比較対象は、手作業で構築されたLIBEROシミュレーターと、記録済みの実ロボット動画である。LIBEROでは同じ方針をシミュレーターとWorldGymで実行し、作業の成功率を比べた。実動画との比較では、同じ操作列を条件に生成した動画の動きを調べた。
著者らのLIBERO実験では、課題間や操作に雑音を加えた方針間の成績順は保たれた。ただし、元の方針では成功率を低く、学習時と異なる操作では高く推定する傾向があり、推定値の絶対値にはずれがある。
実験結果
著者らはLIBEROの4課題でOpenVLA方針を各32軌跡ずつ評価した。成功率の表は4回の実行の平均±標準誤差で、LIBERO-Spatialではシミュレーターが0.91±0.10、WorldGymによる推定が0.69±0.06、LIBERO-Longではそれぞれ0.47±0.10、0.16±0.10だった。
同方針の操作にガウス雑音を加え、4課題を集計した条件では、雑音水準0.1でLIBEROの成功率0.09±0.05に対し推定値は0.50±0.15だった。成否判定器が失敗動画を成功と判定した割合は、LIBERO-Objectで0.00±0.00、RT-1で0.03±0.05と報告されている。
応用の可能性
編集上の応用案 · 論文が実証した用途とは区別しています。
編集上の応用案：机上の物体をつかんで移す作業で、実機試験に進める制御方針の候補を選ぶ。開始時のカメラ画像と作業指示を与え、各候補が出す連続的な操作値に沿って動画を生成し、候補ごとの推定成功率を出力する。
対象ロボットの画像と時刻を合わせた操作記録を学習用に用意し、作業の成功・失敗ラベルで成否判定を確かめる。カメラの位置などのセンサー条件と操作値の意味をそろえてモデルを適応させ、結果を実機試験の順番を決めるための仮説として扱う。
応用先の候補からNauhに相談できます。
導入時の検証
導入時の検証案 · 対象データでの再評価が必要です。
導入時の検証案：対象ロボットのカメラ画像、時刻を合わせた連続操作値、作業指示、成功・失敗ラベルを小規模に集める。カメラ位置などのセンサー条件と操作値の意味を記録し、対象作業のデータで世界モデルを適応させる。成否判定器はラベル付き動画で確かめる。
候補方針と開始場面を固定してモデル内で複数回試し、同じ条件の実機成功率を基準にする。方針の順位と成功率の差、腕と物体の動きのずれ、失敗を成功とした割合を測る。物体の外観や操作の傾向を変えた条件も別に調べ、過大評価の有無を記録する。
限界と課題
著者らは、ロボットの腕や把持部の操作を映像に反映できる一方、物体との接触を写実的に生成することは難しいと述べる。また、LIBEROで学習時と異なる操作を与えた場合、成功率を過大評価したと報告している。
編集上の検証事項は、対象ロボットのカメラ画像と操作記録でも動きが合うか、物体の形や外観を変えたとき成否判定が崩れないかである。実ロボット方針の成功率との高い相関は要旨で報告されているが、確認できた本文の範囲では、その係数や試行条件は示されていない。
出典
元のタイトル・要旨を確認する（英語）
WorldGym: World Model as An Environment for Policy Evaluation
Evaluating robot control policies is difficult: real-world testing is costly, and handcrafted simulators require manual effort to improve in realism and generality. We propose a world-model-based policy evaluation environment (WorldGym), an autoregressive, action-conditioned video generation model which serves as a proxy to real world environments. Policies are evaluated via Monte Carlo rollouts in the world model, with a vision-language model providing rewards. We evaluate a set of VLA-based real-robot policies in the world model using only initial frames from real robots, and show that policy success rates within the world model highly correlate with real-world success rates. Moreoever, we show that WorldGym is able to preserve relative policy rankings across different policy versions, sizes, and training checkpoints. Due to requiring only a single start frame as input, the world model further enables efficient evaluation of robot policies' generalization ability on novel tasks and environments. We find that modern VLA-based robot policies still struggle to distinguish object shapes and can become distracted by adversarial facades of objects. While generating highly realistic object interaction remains challenging, WorldGym faithfully emulates robot motions and offers a practical starting point for safe and reproducible policy evaluation before deployment.
論文本体の取得範囲に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。解説更新：2026-10-01