アーカイブ / LLM / AI Agent
作業状況に応じて助言を作り、不要なら控えるAIエージェントのメモリ
Mem-π
Mem-πの原論文から掲載した図です。細部はクリックして拡大できます。
原論文の図の説明を読む
Figure 1 : Comparison of (a) workflow-based memory systems, where memory operations are governed by predefined retrieval and update pipelines, (b) learning-based memory systems, where memory operations are jointly optimized with downstream agent outcomes, and (c) our Mem- π \pi , which models memory as a generative policy π mem \pi_{\text{mem}} separate from the downstream agent and internalizes reusable experience through offline experience distillation and online adaptation distillation.
概要
- Mem-πは操作役とは別のモデルで現在の状況に合う助言を生成し、不要なら助言を控える。
- 過去の助言例で学んだ後、助言あり・なしの作業結果と助言候補同士を比べて出力を調整する。
- 著者らのテキスト入力評価では、WebArenaのタスク成功率はメモリなし27.1%、RAG 31.4%、Mem-π 43.1%だった。
補足：編集した模式図で仕組みを確認する
VISUAL EXPLAINER
図でつかむ、Mem-πの仕組み
- 01作業指示と観測
- 02助言の要否を判断
- 03必要なら助言を生成
- 04操作役へ渡す
原論文の説明をもとにした模式図です。処理の細部は省略しています。
研究の背景
Mem-πは、AIエージェントの作業中に、その時点の状況に合う助言を作る。AIエージェントとは、指示と環境の情報を受けて操作を進める仕組みである。過去の経験をそのまま検索すると、似た記録でも現在の画面や依頼に合わないことがある。
助言は最終回答ではなく、次の操作に影響する。そこで著者らは、何を助言するかに加え、助言そのものが必要かを判断する専用モデルを設けた。
手法
Mem-πは、作業指示と環境の観測を受け取り、操作役とは別のモデルで短い助言を作る。観測には画面のテキスト表現を使え、利用できる場合は画像も含められる。例えばWeb操作では、依頼と現在の画面を基に助言を作って操作役の入力に加える。不要と判断すれば追加せず、操作役は元の情報で進める。
学習は二段階で行う。まず過去の状況と助言の組から、助言文の作り方を学ぶ。次に強化学習、つまり作業の成否を手掛かりに出力を調整する方法を使う。同じ状況で助言する場合としない場合を実行して要否を学び、生成した助言同士を比べて内容を調整する。長すぎる助言には減点も与える。
新規性
Mem-πは、保存済みの経験を検索して渡す代わりに、別のモデルが現在の指示と観測に合わせて助言を生成する。助言を出さない選択も、モデルの出力として明示する。
学習では、同じ状況で助言する場合としない場合の作業結果を比べ、助言の要否を調整する。助言する場合は候補同士も比較し、判断部分と助言文に別々の学習信号を与える。
従来手法との違い
著者らは、メモリを使わないエージェント、経験を検索するRAGとMem0、学習でメモリ操作を調整するMemory-R1とMemRLを比較した。RAGは経験バンクからBM25という語句に基づく検索法で一件を取得し、Mem-πは状況に合わせて文を生成する。
学習を伴う手法には訓練側のタスクと助言を使い、RAGとMem0の検索先も訓練側に限定した。報告された差は、この条件で保留した評価タスクに対するものであり、別の業務や経験バンクでも同じ差が出るとは判断できない。
実験結果
著者らはWeb操作のWebArenaとWorkArena、端末操作のLifelongAgentBench、文章で指示する家庭内作業のALFWorldで評価した。指標はタスク成功率で、訓練タスクと評価タスクを分けた。主な結果表は、gpt-5.4-miniを操作役とし、テキストだけを入力した条件である。
この条件でWebArenaはメモリなし27.1%、RAG 31.4%、MemRL 34.0%、Mem-π 43.1%だった。著者らは、WorkArenaで42.0%から50.3%、ALFWorldで85.3%から91.6%、LifelongAgentBenchで26.8%から36.7%への変化も報告する。助言あり・なしを組にした学習を外すと、WebArenaは38.3%だった。
応用の可能性
編集上の応用案 · 論文が実証した用途とは区別しています。
編集上の応用案：社内の申請フォームを操作するエージェントに、入力時点の短い助言を渡す。入力は申請内容と画面のテキスト観測、出力は「この欄を先に確認する」といった助言、または助言しない判断とする。画面画像も使う設計なら、その取得が必要になる。
準備する学習データは、過去の作業指示・画面状態・助言の組と、助言あり・なしの試行に付けた完了・未完了のラベルである。業務画面に合わせて助言例で学習し、作業結果で調整する。効果は導入先で確かめる必要がある。
応用先の候補からNauhに相談できます。
導入時の検証
導入時の検証案 · 対象データでの再評価が必要です。
導入時の検証案：一種類のフォーム作業を選び、訓練用の作業指示、画面のテキスト観測、過去の助言を組にする。各試行に完了・未完了のラベルを付け、助言文を学習した後、助言あり・なしの作業結果で要否を調整する。画像を使う場合は画面画像と対応する観測データも集める。
保留した作業では、助言なしと、同じ経験記録から一件を検索する方式を基準にする。タスク成功率、助言しない割合、助言後に失敗した件数、助言の長さを記録し、画面の種類ごとに確認する。
限界と課題
著者らは、状況が曖昧な場合、根拠が弱い場合、学習時と異なる場合に、生成した助言が役立たず、誤った手掛かりが操作に伝わり得ると指摘する。助言を控える仕組みはこの問題への対処だが、誤った助言を完全に防ぐという報告ではない。
編集上の検証事項として、対象業務で成否ラベルを一貫して付けられるか、画面変更後も助言が適切かを確認したい。確認できた本文の範囲では、長期運用での更新方法や、実際の社内システムに移した際の効果は判断できない。
出典
元のタイトル・要旨を確認する（英語）
Mem-$π$: Adaptive Memory through Learning When and What to Generate
We present Mem-$π$, a framework for adaptive memory in large language model (LLM) agents, where useful guidance is generated on demand rather than retrieved from external memory stores. Existing memory-augmented agents typically rely on similarity-based retrieval from episodic memory banks or skill libraries, returning static entries that often misalign with the current context. In contrast, Mem-$π$ uses a dedicated language or vision-language model with its own parameters, separate from the downstream agent, to generate context-specific guidance for complex tasks. Conditioned on the current agent context, the model jointly decides when to produce guidance and what guidance to produce. We train it with a decision-content decoupled reinforcement learning (RL) objective, enabling it to abstain when generation would not help and otherwise produce concise, useful guidance. Across diverse agentic benchmarks spanning web navigation, terminal-based tool use, and text-based embodied interaction, Mem-$π$ consistently outperforms retrieval-based and prior RL-optimized memory baselines, achieving over 30% relative improvement on web navigation tasks.
論文本体の取得範囲に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。解説更新：2026-10-01