アーカイブ / LLM / AI Agent / Robotics
異種ロボットを作業ごとに組み直し、実行結果で計画を更新するCLiMRS
CLiMRS
CLiMRSの原論文から掲載した図です。細部はクリックして拡大できます。
原論文の図の説明を読む
Figure 1: Overview. We present CLiMRS, an adaptive group negotiation framework among multiple LLMs that enables multi-robot collaboration through a grouping–planning–execution–feedback loop, and CLiMBench, a heterogeneous multi-robot collaboration benchmark in simulation with challenging long-horizon assembly tasks.
概要
- CLiMRSは機体ごとの言語モデル担当を作業別の小集団に編成し、観測と実行結果を使って計画を更新する。
- 著者らのCLiMBench評価では、固定した四課題を各五回実行し、平均成功率1.000、平均ステップ数8.8を報告した。
- 実機への適用では、簡略化された観測を現場のセンサー情報に置き換え、推論時間と通信待ちを測る必要がある。
補足:編集した模式図で仕組みを確認する
VISUAL EXPLAINER
図でつかむ、CLiMRSの仕組み
- 01作業指示と観測
- 02小集団の編成
- 03機体別指令の協議
- 04技能実行
- 05結果と観測の記録
原論文の説明をもとにした模式図です。処理の細部は省略しています。
研究の背景
異なる技能を持つロボットが製品を組み立てるには、部品を探し、障害物を除き、搬送して組み付ける手順を分担する必要がある。部品が見えなかったり技能の実行に失敗したりすると、最初の担当割りだけでは作業を進められない。
CLiMRSは、能力の異なる機体で長い作業を進めるための計画方式である。著者らは、作業中の観測と実行結果を使って集団の組み方や次の指令を更新する課題に取り組んだ。
手法
CLiMRSでは、各ロボットに大規模言語モデル(文章で指示や観測を扱うモデル)の担当を置く。全体計画役は作業指示、機体の能力、現在の観測、対話履歴から部分作業を作り、小集団へ割り当てる。例えば、離れた部品の搬送と組み付けを、機体の技能や位置を踏まえて振り分ける。
各集団の管理役は観測を基に協議し、機体ごとの技能と実行条件を決める。実行役は指令が機体の制約に合うか確認し、実行可能なら技能を動かし、そうでなければその回は待機する。実行の成否、更新された環境観測、対話は記憶部に入り、次回の集団編成と指令に使われる。
新規性
CLiMRSは、各ロボットに大規模言語モデルの担当を置き、部分作業に応じて小集団を動的に編成する。集団内の協議で機体別の技能指令を決め、複数の部分作業を並行して計画する。
実行結果、環境観測、対話履歴を次の計画に戻す仕組みも組み込んだ。著者らは併せて、技能の実行失敗が起こり得る組立課題の評価環境CLiMBenchを提示した。
従来手法との違い
比較対象のDMRS-1Dはロボット間の対話、CMRSは単一の言語モデル、COHERENTは計画役とフィードバック役を使う。CLiMRSでは全体の担当割りに続き、各小集団の管理役が機体別の指令を決める。
COHERENTの評価環境は技能の成功を前提とする。CLiMBenchは物理シミュレーター内で技能を実行し、失敗や同時作業の衝突を扱う。二つの環境の数値は、同じ課題条件で得た成績として比較できない。
実験結果
著者らはCOHERENTの評価環境とCLiMBenchで、成功率(SR)と平均ステップ数(AS)を測った。前者は技能が必ず成功する設定で、三種類の機体を使う課題では両方式のSRが1.000、ASはCLiMRSが13.1、COHERENTが16.1だった。
CLiMBenchでは場面を固定した四課題を各五回実行し、手作業で求めた最小ステップ数の二倍以内の完成を成功とした。著者らの表ではCLiMRSの平均SRが1.000、ASが8.8、最良の比較対象COHERENTは0.700、15.8で、ASの減少率は44.30%だった。
応用の可能性
編集上の応用案 · 論文が実証した用途とは区別しています。
編集上の応用案:部品が複数の区画にある組立セルで、搬送車、障害物を移す機体、組立アームの担当と順序を検討する。入力は組立指示、各機体の技能、位置と作業状態の観測とし、出力は小集団の割り当て、技能指令、実行後の再計画案とする。
位置・状態を得るセンサーと、完成・技能失敗を判定する評価用ラベルが必要になる。計画器用の追加学習データは本文で指定されておらず、技能を現場向けに再学習する場合のデータ要件も別途定める。観測形式と既存技能の実行条件を現場に合わせる必要がある。
導入時の検証
導入時の検証案 · 対象データでの再評価が必要です。
導入時の検証案:組立セルの一作業を選び、作業指示、機体別の技能、位置・状態の観測を入力形式にまとめる。必要なセンサーがそれらを取得できるか確認し、観測と技能の実行結果を次の計画へ渡せるよう接続する。
完成・技能失敗の評価用ラベルを用意し、単一の計画役による割り当てを基準に、同じ課題で成功率、完了までのステップ数、計画待ち時間を比べる。計画器用の追加学習データは本文で指定されていない。技能を再学習するなら必要なデータと現場への適応手順を別途定義し、試験条件に記録する。
限界と課題
著者らは、言語モデルの推論時間を技能の実行時間に比べて無視できると仮定し、通信遅延と計算費用を明示的に扱っていないと述べる。CLiMBenchではセンサー入力と知覚処理もシミュレーション上で簡略化している。
編集上の検証事項は、実機の観測誤差、通信待ち、推論時間が再計画と完了時間に与える影響である。CLiMBenchの定量比較は場面設定を固定した四課題を各五回実行した結果であり、異なる部品配置や長期運用への適用は別途確かめる必要がある。
出典
元のタイトル・要旨を確認する(英語)
Leveraging Adaptive Group Negotiation for Heterogeneous Multi-Robot Collaboration with Large Language Models
Multi-robot collaboration tasks often require heterogeneous robots to work together over long horizons under spatial constraints and environmental uncertainties. Although Large Language Models (LLMs) excel at reasoning and planning, their potential for coordinated control has not been fully explored. Inspired by human teamwork, we present CLiMRS (Cooperative Large-Language-Model-Driven Heterogeneous Multi-Robot System), an adaptive group negotiation framework among LLMs for multi-robot collaboration. This framework pairs each robot with an LLM agent and dynamically forms subgroups through a general proposal planner. Within each subgroup, a subgroup manager leads perception-driven multi-LLM discussions to get commands for actions. Feedback is provided by both robot execution outcomes and environment changes. This grouping-planning-execution-feedback loop enables efficient planning and robust execution. To evaluate these capabilities, we introduce CLiMBench, a heterogeneous multi-robot benchmark of challenging assembly tasks. Our experiments show that CLiMRS surpasses the best baseline, achieving over 40% higher efficiency on complex tasks without sacrificing success on simpler ones. Overall, our results demonstrate that leveraging human-inspired group formation and negotiation principles significantly enhances the efficiency of heterogeneous multi-robot collaboration. Our code is available here: https://github.com/song-siqi/CLiMRS.
論文本体の取得範囲に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。解説更新:2026-10-01




