アーカイブ / Robotics
三つの動作を順に学ぶ四脚ロボットで、制御器に残るニューロン群を調べる
Persistent Self-like Subnetwork
Persistent Self-like Subnetworkの原論文から掲載した図です。細部はクリックして拡大できます。
原論文の図の説明を読む
Figure 1: Continual learning produces a stable self-like core. Compared to a single-task baseline, multi-behavior training yields a subnetwork that remains stable across behaviors (“persistent self”), while other components vary. Representative results from the first hidden layer of each network shown.
概要
- 同じ四脚ロボットに三動作を順に学ばせ、共通の観測を入力した際の内部活動から、動作をまたいで残るニューロン群を追跡した。
- 著者らは、複数動作の条件で最大群と残りの群の平均持続性に16.9パーセントポイントの差を報告している。
- 「自己に似た部分」は内部構造の持続性を指す名称であり、意識や自己認識を測定したものではない。
補足：編集した模式図で仕組みを確認する
VISUAL EXPLAINER
図でつかむ、Persistent Self-like Subnetworkの仕組み
- 01四脚機体と動作報酬
- 02三動作を順次学習
- 03共通観測で活動比較
- 04群と持続点を出力
原論文の説明をもとにした模式図です。処理の細部は省略しています。
研究の背景
ロボットの制御器は、機体の状態などの観測値から動作を選ぶニューラルネットワークで作られる。ただ、その内部で身体に共通する情報と個別の動作に関わる情報がどう分かれるかは、出力だけでは分かりにくい。
動作を順に学ぶ「継続学習」では、後の学習で前の内部表現が変わりうる。著者らは、動作の切り替えを経ても残る構造を測り、同じ身体を使う制御器の共通部分を調べた。
手法
シミュレーション上の同じ四脚ロボットに、歩行、その場での回転、上下への跳躍を順に学ばせる。各段階では直前の方策、つまり観測から動作を選ぶ仕組みの重みを引き継ぎ、動作ごとに報酬を変える。学習後は各動作の観測から共通の入力集合を作り、各段階の制御器へ同じ入力を与えて内部の活動を記録する。
次に、一緒に活動しやすいニューロンを群に分け、段階をまたいで似たニューロンを対応付ける。各対応について、活動の似方と、他のニューロンとの活動関係の似方を平均して持続性の点数にする。群ごとの大きさと平均点を出力し、最大の群を著者らは「自己に似た部分」と呼ぶ。
新規性
著者らは、身体モデルを専用の部品として組み込まず、動作を順に学んだ制御器から、動作が変わっても活動の傾向が残るニューロン群を抽出したと主張する。
「自己に似た部分」は、その持続性に付けた操作上の名称である。群が身体を表すという解釈は示されているが、意識や自己認識を測定した結果ではない。
従来手法との違い
主な比較は、同じ四脚機体で歩行・その場での回転・上下への跳躍を順に学ぶ条件と、歩行だけを続ける条件である。単一動作の対照条件には回転のみ、跳躍のみも用意し、学習段階の総数をそろえた。
歩行のみの条件では群の対応が細かく分かれ、複数動作の条件では大きな群が動作をまたいで追跡できた、と著者らは報告する。この差は、示された機体と訓練条件での比較である。
実験結果
著者らは平らな地面の四脚ロボットで、歩行・回転・跳躍を順に学ぶ条件と歩行のみの条件について、50サイクルにわたる群の大きさと平均持続性を比較した。複数動作の条件は独立した10回、歩行のみの条件は8回の実行を集計している。
著者らは、複数動作の条件で最大群と残りの群の平均持続性に16.9パーセントポイントの差があり、99％信頼水準で支持されたと報告する。実機で三動作が可能なことも確認したが、実機の内部構造を同じ方法で測ったという記述ではない。
応用の可能性
編集上の応用案 · 論文が実証した用途とは区別しています。
編集上の応用案：同じ四脚機体へ新しい移動動作を追加する際、既存の制御器のどの群が変化したかを記録する。入力は動作ごとの学習済み制御器と共通の観測集合、出力は群の大きさと持続性の一覧とする。
学習には各動作の観測・行動・報酬と動作段階の区別が要る。正解行動の人手ラベルは前提としない。観測に必要なセンサー項目は対象機体で確定し、観測と行動の定義や報酬を合わせてから解析する。
応用先の候補からNauhに相談できます。
導入時の検証
導入時の検証案 · 対象データでの再評価が必要です。
導入時の検証案：対象機体で歩行だけを続ける制御器と、歩行・回転・跳躍を順に学ぶ制御器を用意する。各動作の観測・行動・報酬、段階の区別をそろえ、同じ観測集合で群の大きさと持続性を測る。
人手の正解行動ラベルは不要な設計とし、必要なセンサー項目と観測・行動の定義は対象機体に合わせて確定する。追加動作への適応は、安定群を保存する条件と全体を更新する条件で、新旧の動作成績を同じ条件で比較する。
限界と課題
著者らは、扱った動作が三種類であること、同時に活動しやすいニューロンを調べる方法では機能上の役割をすべて捉えられないことを述べる。制御器が大きすぎても小さすぎても、安定群を明瞭に見分けにくいとしている。
編集上の検証事項は、異なる身体や広い動作群での再現性と、群の保存が新しい動作の学習に役立つかである。要旨は保存・損傷の効果と三種類のロボットでの確認に言及するが、確認できた本文の範囲では、その条件と数値を照合できない。
出典
元のタイトル・要旨を確認する（英語）
Evidence of an Emergent "Self" in Continual Robot Learning
A key challenge to understanding self-awareness has been a principled way of quantifying whether an intelligent system has a concept of a "self", and if so how to differentiate the "self" from other cognitive structures. We propose that the "self" can be isolated by seeking the invariant portion of cognitive process that changes relatively little compared to more rapidly acquired cognitive skills - because our self is the most persistent aspect of our experiences. We used this principle to analyze the cognitive structure of robots under two conditions: One robot learns a constant task, while a second undergoes continual learning under variable tasks. We find that robots subjected to continual learning develop an invariant subnetwork that is significantly more stable (p < 0.001) compared to the control, and that this subnetwork is also functionally important: preserving it aids adaptation while damaging it impairs performance. We validate this pattern across three different robots spanning locomotion and manipulation.
論文本体の取得範囲に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。解説更新：2026-10-01