アーカイブ / Robotics
歩行中に結合を更新する神経回路、未訓練の路面と脚の損傷でどう動いたか
Bio-Inspired Plastic Neural Network with Weight Normalization
Bio-Inspired Plastic Neural Network with Weight Normalizationの原論文から掲載した図です。細部はクリックして拡大できます。
原論文の図の説明を読む
Fig. 1 : A neural network with Hebbian plasticity (a) is trained to control a robot in simulation and then transferred to a physical robot. A dung beetle (b) and a gecko-like robot (c) were used as experimental complex platforms in this study.
概要
- 神経活動に応じて歩行中の結合重みを更新し、層ごとの最大絶対値で正規化する。
- フンコロガシ型実機では、提案回路の１個体が約７cm/秒で歩いた。比較方式の動きに関する結果節と考察節の表現には差がある。
- 平坦路で訓練したヤモリ型は、未訓練の凹凸路面と脚の関節を固定した条件でも歩行した。
補足：編集した模式図で仕組みを確認する
VISUAL EXPLAINER
図でつかむ、Bio-Inspired Plastic Neural Network with Weight Normalizationの仕組み
- 01関節角・接地・姿勢
- 02神経活動と重み更新
- 03層ごとの正規化
- 04次の関節位置指令
原論文の説明をもとにした模式図です。処理の細部は省略しています。
研究の背景
シミュレーションで歩行を学んだ回路は、実機での接地や機体の状態が異なると、想定どおり進めないことがある。学習時に見なかった路面や脚の損傷も課題となる。こうした未経験の条件を分布外と呼ぶ。
ヘッブ学習は、神経回路の活動に応じて結合の強さを動作中に変える仕組みである。ただし更新を重ねると重みが過大になり、回路が不安定になり得る。著者らは重みを正規化した回路を脚式実機で調べた。
手法
フンコロガシ型では、18個の関節角、６本の足の接地、胴体の向き３値を回路に入力し、18関節の位置指令を計算する。神経が活動するたびに、結合の両端の活動に基づくヘッブ則で重みを更新する。例えば足の接地情報は回路の活動に入り、その後の指令と重みの変化に関わる。
更新量を定める規則は、シミュレーションで前進速度や姿勢などを評価しながら進化戦略で調整する。進化戦略は、候補の規則を試し、評価の高い方向へ調整する方法である。更新した重みは層ごとの最大絶対値で割って大きさをそろえる。ヤモリ型では関節数に合わせて入出力を変更した。
新規性
著者らの主張する進歩は、神経活動に応じて結合の重みを変えるヘッブ学習を、18自由度と16自由度の脚式実機の歩行制御に適用した点にある。自由度は、独立して動かせる関節の数を指す。
更新で重みが過大になるのを抑える正規化を組み込み、平坦路で訓練した回路を未訓練の凹凸路面や脚の関節を固定した条件でも試した。重みの変化も主成分分析で調べている。
従来手法との違い
フンコロガシ型の比較対象は、歩行中に重みを更新しない前向き回路と、過去の情報を内部状態に保持するLSTMである。シミュレーションでの訓練成績は前向き回路と提案回路で似ており、LSTMの最終平均成績がやや良かった。
実機試験では提案回路の個体が最速だった。結果節は他の２方式が20秒間で開始位置からほぼ進まなかったとする一方、考察節は低速で直進しない歩行と記しており、表現に差がある。正規化方式の比較では、最大絶対値を使う方式の訓練成績が良かった。
実験結果
著者らは18自由度のフンコロガシ型で３方式を各５回訓練し、各方式の成績上位３個体を実機で試した。提案回路の１個体は約７cm/秒で歩いた。正規化方式は訓練成績で比較され、最大絶対値を使う方式が標準偏差を使う方式を上回った。
16自由度のヤモリ型は平坦路で500世代訓練し、１mを移動する試験を５回記録した。著者らの報告速度は平坦路で約12cm/秒、木片を並べた未訓練の凹凸路面で約６cm/秒。平坦路で脚の関節を固定した条件では、左前脚と右後脚が各約５cm/秒、両前脚が約４cm/秒だった。
応用の可能性
編集上の応用案 · 論文が実証した用途とは区別しています。
編集上の応用案：屋内点検用の脚式ロボットが、平坦な通路から凹凸のある区画へ進む場面を想定する。関節角、足の接地、胴体の向きを入力し、各関節の位置指令を出す。必要なセンサーが機体にあることが前提となる。
対象機体を模した平坦路のシミュレーションを学習元とし、関節指令の正解ラベルは使わず、前進と姿勢を評価して更新規則を調整する。関節数に合わせて入出力を変更し、凹凸区画への適用可否を別途確かめる。点検性能の改善は未検証の仮説である。
応用先の候補からNauhに相談できます。
導入時の検証
導入時の検証案 · 対象データでの再評価が必要です。
導入時の検証案：対象機体で関節角、足の接地、胴体の向きを取得できるか確認する。対象機体の平坦路シミュレーションを学習元とし、関節数に合わせて入出力を設定する。関節指令の正解ラベルは使わず、前進と姿勢の評価から更新規則を調整する。
比較基準には、同じ入力を使う重み固定の前向き回路を置く。平坦路と管理した凹凸路面で移動距離、速度、転倒の有無、関節指令の急変を同条件で記録する。損傷条件は機体で安全に再現できる場合に限り、別項目として測る。
限界と課題
著者らは、ヤモリ型が凹凸路面を歩く際の関節指令は滑らかではないと記している。また、別の最適化法であるPPOとの直接比較は、PPO向けの報酬設計が別途必要として実施していない。
編集上の検証事項は、長時間の運転でも重みと動作が安定するか、別の凹凸や損傷位置でも歩けるか、急な関節指令が機体にどう影響するかである。示された速度は記載された機体と条件での結果であり、点検用途への適合性は対象機体で調べる必要がある。
出典
元のタイトル・要旨を確認する（英語）
Bio-Inspired Plastic Neural Networks for Zero-Shot Out-of-Distribution Generalization in Complex Animal-Inspired Robots
Artificial neural networks can be used to solve a variety of robotic tasks. However, they risk failing catastrophically when faced with out-of-distribution (OOD) situations. Several approaches have employed a type of synaptic plasticity known as Hebbian learning that can dynamically adjust weights based on local neural activities. Research has shown that synaptic plasticity can make policies more robust and help them adapt to unforeseen changes in the environment. However, networks augmented with Hebbian learning can lead to weight divergence, resulting in network instability. Furthermore, such Hebbian networks have not yet been applied to solve legged locomotion in complex real robots with many degrees of freedom. In this work, we improve the Hebbian network with a weight normalization mechanism for preventing weight divergence, analyze the principal components of the Hebbian's weights, and perform a thorough evaluation of network performance in locomotion control for real 18-DOF dung beetle-like and 16-DOF gecko-like robots. We find that the Hebbian-based plastic network can execute zero-shot sim-to-real adaptation locomotion and generalize to unseen conditions, such as uneven terrain and morphological damage.
論文本体の取得範囲に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。解説更新：2026-10-01