表示
超・人工知能研究所 Super AI Research Lab トップへ超・人工知能研究所AI Research Lab / ぱそ太郎工事中

since
平成38年9月29日

← 検索結果に戻る

受動輪のスケートで推進・旋回する人型ロボットの強化学習制御

Reinforcement Learning-Based Control for an Inline Skating Humanoid Robot

保存した記事を見るこのブラウザに保存します。無料会員で端末間の同期・フォルダ整理

概要

  • 市販のインラインスケートを履いた人型ロボットに、受動輪を使う推進と旋回を強化学習で獲得させた。
  • 著者らは標準的な歩行動作に比べてCoTが最大50%低下したと報告するが、比較条件の詳細は確認できない。
  • 学習済み方策をBooster T1へ追加学習なしで移し、バランス維持、外力への対応、速度を保った旋回を実機で示したと報告する。
補足:編集した模式図で仕組みを確認する

VISUAL EXPLAINER

図でつかむ、Reinforcement Learning-Based Control for an Inline Skating Humanoid Robotの仕組み

左から右へ読む
  1. 01滑走指令
  2. 02学習済み制御方策
  3. 03スケートの姿勢制御
  4. 04推進・旋回動作

原論文の説明をもとにした模式図です。処理の細部は省略しています。

研究の背景

この研究は、人型ロボットに動力のないインラインスケートを履かせ、推進と旋回を制御する課題を扱う。受動輪は車輪自体を駆動できないため、脚とスケートの姿勢を変えながら、倒れずに滑る動作を作る必要がある。

滑走が使えれば歩行と異なる移動手段になる。ただし、床と車輪の接触を模した環境で学んだ制御が実機でも働くか、また歩行より移動効率がよいかを確かめる必要がある。

手法

著者らは、市販のインラインスケートを従来の足の代わりに装着した人型ロボット向けに、強化学習で制御方策を訓練した。強化学習は、試行した動作に与える報酬を手掛かりに制御を学ぶ方法で、方策は制御を選ぶ規則を指す。例えば旋回の指令に対し、学習済み方策がスケートの位置と向きを調整し、曲がる動作につなげる。6自由度とは位置の3方向と向きの3方向である。

学習には転がり方に着目した報酬を設け、成功状況に応じて指令の難しさを変える。車輪を球形と楕円体で表す幾何モデルも訓練と検証に用いた。著者らによると、人の動作データ、模倣学習、事前に決めた運動の型は使っていない。方策が受け取る観測項目や、関節への具体的な出力形式は確認できた本文の範囲では不明である。

新規性

著者らが主張する前進は、市販のインラインスケートを足の代わりに装着した人型ロボットで、受動輪による推進と旋回を学習し、実機に移した点にある。スケートの位置と向きについて6自由度の制御を行う。

滑走動作は人の動作データの模倣や、事前に決めた運動の型に頼らず、報酬の設計から生じたという。著者らは、車輪の縁側を使う推進動作をその特徴として挙げている。

従来手法との違い

著者らは先行研究を、四足ロボットまたは車輪を能動的に回す方式が中心だったと位置付ける。本研究では人型ロボットの受動輪を対象に、スケートの位置と向きを制御して推進・旋回する。先行方式との同条件の性能比較は、確認できた本文の範囲では示されていない。

性能面では、標準的な歩行動作を比較対象とし、移動効率の指標であるCost of Transport(CoT)が最大50%低下したと著者らは報告する。比較時の速度、路面、算出方法は確認できない。

実験結果

著者らは、標準的な歩行動作との比較でCoTが最大50%低下したと報告する。また、学習済み方策を追加学習なしで実機へ移す「ゼロショット転移」をBooster T1で行い、動的なバランス維持、加えられた外力への対応、速度を保った旋回を示したという。

確認できた本文の範囲では、評価コース、試行回数、速度、CoTの算出方法とばらつき、外力の大きさは示されていない。したがって、50%という値が異なる路面や機体でも得られるか、実機動作の成功率がどの程度かは判断できない。

応用の可能性

編集上の応用案 · 論文が実証した用途とは区別しています。

編集上の応用案:広い屋内通路を巡回する人型ロボットで、直進区間と曲がり角の通過を試す。巡回経路から作る移動指令を入力とし、出力となる滑走動作について到達位置、旋回中の速度、転倒の有無を記録する。

適応には、対象機体とスケートの形状、床との接触を反映した学習環境と、そこで得る試行データが要る。元研究は人の動作データや模倣用ラベルを使わない。必要な機体センサー、観測項目、指令の形式は確認できた本文の範囲では特定できず、導入先で確認する。

応用先の候補からNauhに相談できます。

導入時の検証

導入時の検証案 · 対象データでの再評価が必要です。

導入時の検証案:対象機体、スケート、想定する床の接触を反映した環境を用意し、移動指令に対する試行データで方策を学習する。人の動作ラベルは元研究の方法では不要だが、必要な機体センサー、観測値、制御出力は確認できた本文の範囲では不明なので、実装前に特定する。

小規模な直進・旋回コースで、同じ機体の標準的な歩行を基準にCoTを同条件で測る。到達率、転倒回数、旋回中の速度も記録する。外力への対応と、床や車輪を変えた場合の動作は条件を分けて確かめ、結果を混同しない。

限界と課題

著者らは、受動輪に伴う不安定さと、シミュレーションで接触を計算する際に生じる不自然な挙動を課題として挙げる。球形と楕円体の車輪モデル、指令の難度調整、転がりへの報酬を用いたと説明するが、それぞれの寄与は確認できた本文の範囲では分からない。

編集上の検証事項は、CoTの測定条件とばらつき、速度別の安定性、路面や車輪が変わった場合の動作である。外力への対応も、力の大きさや試行回数が分からないため、運用時の耐性を判断するには追加の測定が要る。

研究内容と応用案に基づく分類です。業界での導入実績を示すものではありません。

出典

元のタイトル・要旨を確認する(英語)

Reinforcement Learning-Based Control for an Inline Skating Humanoid Robot

As humanoid robots become increasingly dynamic, coupling them with reinforcement learning offers a promising approach to solving the complex, underactuated mechanics of passive inline skating. Equipping a humanoid robot with passive inline skating wheels presents an opportunity to combine the versatile agility of humanoids with the high-speed, energy-efficient locomotion strategies utilized by human skaters. In this paper, we train and deploy a reinforcement learning control policy that enables novel locomotion strategies for a humanoid robot modified to equip consumer inline skates instead of conventional feet. Unlike previous work limited to quadrupedal robots or actively driven wheels, our system allows for precise 6-DoF control of the skates to execute dynamic, edge-driven propulsion strategies. Our skating strategies emerge entirely from our reward structure, without reliance on human motion data, imitation learning, or kinematic priors. We overcome the inherent instability of passive wheels and simulation contact artifacts by utilizing different geometric wheel models (spherical and ellipsoidal) during training and validation, along with a custom success-based command curriculum and a specialized rolling reward. Consequently, our policy demonstrates up to a 50% reduction in Cost of Transport (CoT) compared to standard walking gaits. The resulting policy successfully transfers zero-shot to the physical Booster T1 hardware. Real-world deployments demonstrate dynamic balance, the ability to reject active physical perturbations, and agile locomotion strategies capable of turning at speed. A video of our results can be found at https://www.youtube.com/watch?v=-_APcOS7uFo.

論文要旨に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。解説更新:2026-10-01