表示
超・人工知能研究所 Super AI Research Lab トップへ超・人工知能研究所AI Research Lab / ぱそ太郎工事中

since
平成38年9月29日

← 検索結果に戻る

乗員の希望を運転判断に反映する、LLMと強化学習の二段構成

Fast-Slow Architecture for Human-Centric Autonomous Driving

保存した記事を見るこのブラウザに保存します。無料会員で端末間の同期・フォルダ整理
原論文の図

Fast-Slow Architecture for Human-Centric Autonomous Drivingの原論文から掲載した図です。細部はクリックして拡大できます。

原論文の図の説明を読む

Fig. 1: The LLM interprets high-level human intent and generates structured guidance, while the RL module integrates this guidance with environmental context to make optimal, human-aligned decisions.

出典:Fast-Slow Architecture for Human-Centric Autonomous Driving / arXiv ↗

概要

  • LLMが乗員の指示と交通状況、似た過去の場面を参照し、希望を構造化した指示に変える。
  • 強化学習側が周辺車両の情報から行動を選び、安全判定を経て車両操作につなぐ。
  • 著者らの3種類のシミュレーションでは加速度変動が比較対象より小さい。実路試験は今後の課題である。
補足:編集した模式図で仕組みを確認する

VISUAL EXPLAINER

図でつかむ、Fast-Slow Architecture for Human-Centric Autonomous Drivingの仕組み

左から右へ読む
  1. 01乗員指示・交通状況
  2. 02場面記述と類似例検索
  3. 03LLMで希望を構造化
  4. 04強化学習と安全判定
  5. 05操舵・加減速

原論文の説明をもとにした模式図です。処理の細部は省略しています。

研究の背景

「急いでいる」という乗員の言葉だけでは、いつ加速し、いつ追い越すべきかは決まらない。希望する行動が周辺車両との距離や車線の状況によって危険になることもある。

著者らは、従来の運転判断では乗員ごとの希望を十分に扱いにくい点を課題とする。言葉の解釈と、刻々と変わる交通状況への判断を異なる速さで行うため、役割を分けた構成を検討した。

手法

遅い層のLLM(大規模言語モデル)は、乗員の指示、道路と近くの車両を文章にした場面記述、記憶から検索した似た過去の場面を受け取る。そこから希望を機械が扱える形式の指示に変える。例えば「急いでいる」という発話を、現在の交通状況と合わせて追い越しに関する指示へ変換する事例が示されている。

速い層の強化学習は、行動の結果に与える報酬から判断を学ぶ方法である。車両の位置・速度と構造化された指示を入力し、減速、巡航、加速、左右への移動から行動を選ぶ。行動は距離・速度・車線の占有状況による安全判定を通り、PID制御器が操舵と加減速に変える。PIDは目標との差に応じて操作量を調整する方式である。

新規性

著者らの提案は、乗員の言葉を解釈する遅い層と、周辺車両を見て行動を選ぶ速い層をつなぐ構成である。構造化した希望を、運転判断の入力に加える。

速い層には安全判定を置き、危険な行動を除外する。著者らは、状況に応じてLLMの指示を延期・変更できる協調の仕組みも特徴としている。

従来手法との違い

学習中の報酬はDQN、PPO、A2Cと比較され、著者らは提案手法が3場面とも最も高い値で安定したと報告する。行動指標の表には、言語モデルを使うDiLuも含まれる。

同表では提案手法の加速度変動が3場面とも最小だった。一方、合流場面の平均速度は提案手法が14.51 m/s、DQNが18.69 m/sである。快適さを示す指標での優位を、速度や安全性全体の優位とは同一視できない。

実験結果

著者らはHighway-EnvとGymnasiumを組み合わせたシミュレーションで、4車線の高速道路、右側からの合流、対向車がいる2方向道路を評価した。各場面で交通条件などを変えた少なくとも100回の走行を生成し、各モデルを10万ステップ学習させた。

表の加速度変動は高速道路で提案手法0.38、PPO 0.41、合流で0.32、PPO 1.96、2方向道路で0.19、PPO 0.30だった。著者らは成功率が全場面で最高と述べる。確認できた本文の範囲では、成功率と衝突率の数値、および希望への一致率の数値は示されていない。

応用の可能性

編集上の応用案 · 論文が実証した用途とは区別しています。

編集上の応用案:高速道路の走行シミュレーターで、乗員が「右の車線を希望」と入力する場面を試す。周辺車両の位置・速度と車線情報から希望車線を判断に反映し、選んだ行動、安全判定の結果、実際の車線を記録する。

必要な入力は、センサー観測に相当する周辺車両のデータと乗員の指示である。希望車線の正解ラベルを評価用に用意し、対象の道路表現、指示形式、学習時の報酬を調整する。実交通での効果は別途検証する。

応用先の候補からNauhに相談できます。

導入時の検証

導入時の検証案 · 対象データでの再評価が必要です。

導入時の検証案:まず論文の3道路場面をシミュレーターで再現する。周辺車両の位置・速度、車線占有、乗員の指示を入力とし、希望車線を示す評価用ラベルと走行記録を用意する。対象場面に合わせて指示形式と、安全・速度・急操作・希望車線への一致に関する報酬を調整する。

DQN、PPO、A2Cを比較基準に、同じ交通条件で成功率、衝突率、加速度変動、希望車線への一致率を測る。さらに観測の欠落や誤差を加え、危険な行動を安全判定が除外できるか記録する。実車への適用判断には別の検証が要る。

限界と課題

著者らは今後、声の調子や身ぶりなどの入力、知覚誤差や部分的な観測を取り入れ、実路試験へ進む方針を述べる。今回の評価はシミュレーションであり、実車での安全性を示すものではない。

編集上の検証事項は、曖昧な指示の解釈違い、観測に誤差がある場合の安全判定、指示を延期した際の乗員への伝達である。成功率の図と衝突率・希望遵守に関する記述はあるが、確認できた本文の範囲では、それらの数値を読み取れない。

応用先の候補
研究内容と応用案に基づく分類です。業界での導入実績を示すものではありません。

出典

元のタイトル・要旨を確認する(英語)

Towards Human-Centric Autonomous Driving: A Fast-Slow Architecture Integrating Large Language Model Guidance with Reinforcement Learning

Autonomous driving has made significant strides through data-driven techniques, achieving robust performance in standardized tasks. However, existing methods frequently overlook user-specific preferences, offering limited scope for interaction and adaptation with users. To address these challenges, we propose a "fast-slow" decision-making framework that integrates a Large Language Model (LLM) for high-level instruction parsing with a Reinforcement Learning (RL) agent for low-level real-time decision. In this dual system, the LLM operates as the "slow" module, translating user directives into structured guidance, while the RL agent functions as the "fast" module, making time-critical maneuvers under stringent latency constraints. By decoupling high-level decision making from rapid control, our framework enables personalized user-centric operation while maintaining robust safety margins. Experimental evaluations across various driving scenarios demonstrate the effectiveness of our method. Compared to baseline algorithms, the proposed architecture not only reduces collision rates but also aligns driving behaviors more closely with user preferences, thereby achieving a human-centric mode. By integrating user guidance at the decision level and refining it with real-time control, our framework bridges the gap between individual passenger needs and the rigor required for safe, reliable driving in complex traffic environments.

論文本体の取得範囲に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。解説更新:2026-10-01