表示
超・人工知能研究所 Super AI Research Lab トップへ超・人工知能研究所AI Research Lab / ぱそ太郎工事中

since
平成38年9月29日

← 検索結果に戻る

双腕ロボット向けRho、機体への適応と作業への適応を分ける

Rho

保存した記事を見るこのブラウザに保存します。無料会員で端末間の同期・フォルダ整理
原論文の図

Rhoの原論文から掲載した図です。細部はクリックして拡大できます。

原論文の図の説明を読む

Figure 1 : Rho’s physical dual-arm robot embodiments. YAM Box is common in research labs, FR3 Duo’s usage straddles research and industry, and UR AI Trainer is an emerging standard setup for industrial bimanual manipulation tasks. Midtrained checkpoints for all three are available at https://huggingface.co/collections/microsoft/rho

出典:Rho / arXiv ↗

概要

  • Rhoは複数機体での事前学習、機体ごとの中間学習、個別作業への適応を分けた双腕ロボット向けVLAである。
  • 著者らは、中間学習により所定の成功率へ達する作業別データ量が半分になったと報告する。
  • 修正例から内部機構だけを更新する運用中の適応も示したが、導入先の機体と作業で再評価が必要。
補足:編集した模式図で仕組みを確認する

VISUAL EXPLAINER

図でつかむ、Rhoの仕組み

左から右へ読む
  1. 01画像・指示・機体状態
  2. 02視覚と言語を解釈
  3. 03行動列を生成
  4. 04双腕の動作

原論文の説明をもとにした模式図です。処理の細部は省略しています。

研究の背景

ロボットへ画像と指示を与えて動作を作るには、物を見分ける力と、機体固有の腕の動かし方の両方が要る。未知の作業を覚えさせる際、機体の違いまで同時に学ぶと、多くの実演が必要になりやすい。

Rhoは双腕の作業向けに、広い事前学習、機体ごとの中間学習、個別作業への適応を分ける。作業の導入に必要な追加データを減らせるかが実用上の焦点になる。

手法

Rhoはカメラ画像、文章の指示、現在のロボット状態を受け取るVLAモデルである。VLAは視覚・言語・行動を結びつける方式を指す。画像と指示の情報を行動生成部へ渡し、次の複数時点の動きをまとめた「行動チャンク」を出す。行動生成部は、雑音から連続的な動作値へ変換するよう学ぶ。

学習では、複数機体の実演から基礎モデルを作り、YAM Box、UR AI Trainer、FR3 Duoの各機体について幅広い作業で中間学習した後、個別作業に合わせて調整する。運用中の修正例を使う場合は、行動生成部を固定し、現在の観測に応じた生成開始点を選ぶ内部機構だけを更新する。

新規性

Rhoの中心的な設計は、さまざまなロボットでの事前学習後、特定の機体を幅広い作業で動かす中間学習を挟み、最後に個別作業へ適応する順序にある。機体ごとの観測や操作の違いを、毎回の作業学習へ持ち込まない狙いだ。

追加の運用中適応では、行動を作る主要部分を固定し、観測に応じてその入力を選ぶ小さな内部部分だけを修正例から学ぶ。著者らは三つの双腕機体向けのモデルを用意した。

従来手法との違い

比較の軸は、一般モデルRho-baseを作業へ直接適応する場合と、対象機体で中間学習したRhoを適応する場合である。著者らは、同じ成功率の水準に達するために必要な作業別の学習データが、中間学習により半分になったと報告する。

既存の重み公開VLAモデルとの比較も、シミュレーションと実機で行った。ただし、確認できた本文の範囲では作業別の成功率表を確認できず、どの比較対象に何ポイント勝ったかまでは示せない。

実験結果

著者らはRoboTwin、LIBERO、RoboEvalのシミュレーションと、三種類の双腕実機で構成や学習順序を評価した。報告では、機体ごとの中間学習によって、ある成功率へ達するための作業別学習データ量が、基礎モデルを直接調整する場合の半分になった。

運用中の適応では、修正した実行例が最少15回でも、事前の作業調整で扱いにくかった状況へ対応できたと著者らは述べる。確認できた本文の範囲では、その条件別の成功率や試行数を示す結果表がなく、改善幅の細かな比較はできない。

応用の可能性

編集上の応用案 · 論文が実証した用途とは区別しています。

編集上の応用案:双腕ロボットに、部品を決まった位置へ置く作業を覚えさせる。入力は複数カメラの画像、作業指示、関節などの状態と実演記録で、出力は次に実行する一連の腕の動きにする。

対象機体用に中間学習済みのRhoから作業別の調整を始め、失敗しやすい配置条件を記録する。運用中に担当者が正しい動きを示した回だけを修正例として追加し、元の作業条件と周辺条件で成功率の変化を確かめる。

応用先の候補からNauhに相談できます。

導入時の検証

導入時の検証案 · 対象データでの再評価が必要です。

導入時の検証案:まず対象機体に合うRhoの中間学習済みモデルを選び、一つの作業と成功条件を固定する。同じ実演記録を使い、基礎モデルから直接調整する条件を基準として、必要な実演数と作業成功率を比べる。

次に、配置を少し変えた条件で失敗例を集め、修正した実行例を追加した前後を測る。元の条件での成功率も同時に確認し、追加適応が既にできていた動作を損なわないかを見る。

限界と課題

著者らは、未知の作業や新しい環境で既存の視覚・言語・行動モデルをそのまま動かした場合の成功率は低く、適応が必要だと位置づける。Rhoの中間学習も機体ごとの広い実演データを使っており、少数の作業別実演だけで全工程を作れるという結果ではない。

編集上の確認点は、対象機体のカメラ配置、動作表現、作業範囲が公開された機体用モデルと合うかである。修正例15回という結果を別の作業へ一般化せず、失敗時の停止条件とともに実機で測り直す必要がある。

応用先の候補
研究内容と応用案に基づく分類です。業界での導入実績を示すものではありません。

出典

元のタイトル・要旨を確認する(英語)

Rho: A Foundation for Efficiently Adaptable VLA Models

General-purpose physical AI models must combine broad visual and linguistic capabilities with precise control across robot embodiments and efficient adaptation to downstream tasks. We introduce Rho, a family of open-weights VLA models for bimanual manipulation designed for data-light task adaptation on 3 embodiments representative of dual-arm robots across research labs and the industry -- YAM Box, UR AI Trainer, and FR3 Duo. We systematically ablate Rho's action-expert architecture and training recipe, and show in controlled simulation and physical-robot experiments that embodiment midtraining improves downstream adaptation. The resulting Rho variants for YAM Box, UR AI Trainer, and FR3 Duo match or outperform existing open-weights VLAs and achieve the strongest overall performance across the tasks, embodiments, and baselines evaluated in this report. We further demonstrate the Rho model family's built-in capacity for online adaptation: an internal latent policy learns from corrective feedback to select observation-conditioned noise inputs for the frozen flow-matching action expert. With as few as 15 corrected episodes, adapting this lightweight module enables Rho to handle task situations at the fringe of its offline finetuning distribution. Together, these results position Rho as both a strong general-purpose robotic manipulation model and a practical foundation for adaptation. We release the base Rho model and the embodiment-specific checkpoints to facilitate Rho's deployment in research experiments and practical industrial use cases.

論文本体の取得範囲に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。収集:2026-10-01