新着研究 / Robotics / VLM
作業の進み具合で計画・動作・未来予測を結ぶLAW、失敗軌跡の成功部分も学習に活用
LAW
LAWの原論文から掲載した図です。細部はクリックして拡大できます。
原論文の図の説明を読む
Figure 1 : Overview of the LAW agent.
概要
- 部分作業の進行を共通の手掛かりにし、計画、候補動作の評価、完了監視を異なる頻度で動かす。
- 映像と行動に専用・共有の処理を設け、最近と節目の観測を詳しく記憶する。
- RoboTwin50課題で平均94.21%、実機の長期3課題で65%の成功率を報告した。
補足:編集した模式図で仕組みを確認する
VISUAL EXPLAINER
図でつかむ、LAWの仕組み
- 01指示と観測履歴
- 02残り部分作業の計画
- 03未来と動作候補の生成
- 04価値評価と実行監視
原論文の説明をもとにした模式図です。処理の細部は省略しています。
研究の背景
長いロボット作業では、物をつかむ動作が良くても、つかめたかの判断を誤れば後の工程が崩れる。最初に作った言語計画だけでは現在の進捗を把握できず、短期の動作生成だけでは何のための動きかを見失いやすい。
LAWは、意味のある部分作業の進捗を計画と制御の共通インターフェースにする。すべてを毎回大きなモデルへ判断させる代わりに、役割に応じた頻度で推論と実行を結び付ける。
手法
視覚言語モデルには計画、状態評価、動作価値の役割別の適応部を設ける。計画部が残り工程を示し、未来の映像と動作を予測する世界行動モデルが候補を作り、価値部が現在の目標に照らして評価・統合する。状態部は実行と並行して完了を判定し、次の工程へ切り替える。
世界行動モデルでは映像専用・行動専用と共有の専門処理を組み合わせる。記憶は両モデル用の二系列を持ち、直近と工程境界の観測は詳細に、古い観測は圧縮して保存する。価値学習は部分作業の境界で区切り、後で全体が失敗した軌跡でも先に成功した工程の信号を残す。
新規性
計画、進捗判定、行動評価を部分作業の意味にそろえ、それぞれを別の時間間隔で動かす点が中心だ。完了監視を動作と並行させるため、判断待ちで制御を止める負担を減らす。
失敗した一連の軌跡を丸ごと低価値とせず、成功した途中工程を価値学習へ使う点も特徴だ。モデル構造だけでなく、教師信号の区切り方を作業の段階へ合わせている。
従来手法との違い
著者らはFast-WAMやπ0.5などと比較し、同じLAW内で視覚言語モデルを別のモデルへ置き換えた変種も調べる。20億パラメータの専用VLMが大きな参照モデルを使う変種より良かったと報告する。
これは言語モデル一般の能力順位ではなく、LAWの役割と学習・入力条件での比較だ。世界行動モデルをOpenWAM-alphaへ置き換えた結果も別に示し、標準構成の成績と分けている。
実験結果
著者らによるRoboTwin50課題の平均成功率は94.21%で、Fast-WAMを2.38ポイント上回った。OpenWAM-alphaを基盤にした構成では95.56%になった。シミュレーションの集計と実機結果は区別する必要がある。
最大九つの意味的な部分作業を含む実機3課題では平均65%で、π0.5は28.33%、Fast-WAMは25%だった。状態評価は約60msで実行と並行し、その並列化による推論スループット改善は15%と報告された。
応用の可能性
編集上の応用案 · 論文が実証した用途とは区別しています。
編集上の応用案:製造セルで、部品取得、挿入、容器配置を連続して行う作業を対象にする。入力は全体指示と観測履歴、出力は次工程と実行する動作候補にし、完了確認を制御と並行させる。
途中で取得に成功し最後の配置に失敗した記録も、成功工程の評価学習へ利用できるかを試す。対象セルに必要な工程境界と完了の定義を人が整え、汎用的な自律作業の実証とは分けて導入する。
導入時の検証
導入時の検証案 · 対象データでの再評価が必要です。
導入時の検証案:少数の連続工程を用意し、初期計画だけの方式、同期監視、非同期監視を同じ動作生成器で比較する。成功・失敗の軌跡に工程境界を付け、価値学習の区切り方も比較する。
全体成功率、工程別成功率、早すぎる切替、失敗の見逃し、待ち時間を記録する。非同期の判定が古い工程や古い画像を参照しないかも確認し、速度改善と判断誤りを合わせて評価する。
限界と課題
標準ベンチマークと実機三課題の成績から、未知の道具や任意の長期作業への対応まで保証できない。工程境界の注釈や価値学習の準備が必要で、専用VLMの小ささだけで全体の計算負担を表せない。
編集上の確認課題は、完了の曖昧な工程、失敗からの再計画、長時間の記憶圧縮による情報損失だ。未来予測と候補評価が良好でも、個々の動作の物理的安全や全状況での成功を保証する仕組みではない。
出典
元のタイトル・要旨を確認する(英語)
LAW: Unifying Language, Action, and World Modeling for Agentic Physical Intelligence
World-action models jointly predict actions and future world states, but long-horizon manipulation further requires language reasoning to plan subtask objectives, assess execution progress, and guide action selection. We present LAW, a closed-loop VLM--WAM framework that unifies language reasoning, action generation, and world modeling through semantic subtask progress. Within the LAW agent, a hybrid-expert vision-language model plans the remaining subtasks, estimates the values of and fuses actions proposed by a world-action model, and asynchronously assesses execution status to support continued execution and subtask transitions. Within the world-action model, Mixture-of-Transformer Experts integrates modality-specific and shared computation for joint video--action modeling. Dual-stream hierarchical visual memory maintains temporal context for both models, while subtask-local value learning aligns action evaluation with semantic objectives and preserves supervision from successful prefixes of failed trajectories. LAW achieves 94.21% average success across 50 RoboTwin tasks. Replacing the WAM backbone with OpenWAM-$alpha$ further raises the average success rate to 95.56%, establishing a new open-source state of the art on RoboTwin. Despite having only 2B parameters, our VLM also outperforms variants using Embodied-R1.5 and GPT-5.5 High. On three long-horizon real-robot tasks, LAW achieves 65% average success, compared with 28.33% for $pi_{0.5}$ and 25% for Fast-WAM.
論文本体の取得範囲に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。収集:2026-10-19




