新着研究 / AI Agent
共有作業を二つのAIが交代で改善、HMAがセッションを区切って機械学習の長期探索を続ける
Humanize MLE Agents
Humanize MLE Agentsの原論文から掲載した図です。細部はクリックして拡大できます。
原論文の図の説明を読む
Figure 1: HMA overview. (A) Declining output tokens per response accompany diminishing score gains, indicating decelerating single-agent exploration; harness gains can vanish or reverse as models improve. (B) HMA alternates native agents after at most k k experiments, resetting context while preserving shared work and candidates for final review. The motor analogy illustrates options A A and B B alternately energizing shared state X i X_{i} toward the final result E ^ \widehat{E} . The CR-SMDP view captures how complementary options can extend exploration beyond single-agent limits.
概要
- 二つのエージェントが共有作業場所を引き継ぎ、セッションごとに文脈を初期化する。
- 各セッションの実験数を制限し、過去のコードや候補を保持したまま交代して最後に候補を見直す。
- MLE-benchの75課題で最高構成のメダル獲得率78.2%を報告するが、交代順や比較予算に条件差がある。
補足：編集した模式図で仕組みを確認する
VISUAL EXPLAINER
図でつかむ、Humanize MLE Agentsの仕組み
- 01共有コードと候補
- 02一方が実験を実行
- 03文脈を初期化して交代
- 04候補を最終見直し
原論文の説明をもとにした模式図です。処理の細部は省略しています。
研究の背景
機械学習の開発では、動くコードを作った後も実験を繰り返して精度を上げる必要がある。著者らは単一セッションが長くなると、出力トークン数と進歩が減る傾向を観察した。また特定モデルに合わせた実行支援の利点が、新しいモデルで弱まる場合もある。
HMAは手順を細かく追加する代わりに、担当するAIのセッションを交代させる。コード、学習済み候補、評価結果を共有場所に残し、別の担当が新しい文脈から既存の成果を改善する。長時間の探索を作業の引継ぎで支える発想だ。
手法
二つのエージェントを交互に動かし、各セッションに最大k回の実験を割り当てる。セッションの文脈は初期化するが、共有作業場所のコードやモデルは保持する。次の担当は残った成果を読み、実装や実験を更新する。前の担当が再び戻る場合も、他方の変更が新しい探索の出発点になる。
主実験ではkを五にして六時間の総予算を使い、最後の十五分を候補の見直しへ確保する。理論では、文脈の再初期化と持続する作業状態を持つ意思決定過程として交代を扱う。例えば一方が新しい特徴量を見つけ、他方が設定を詰めるように、発見と改善を別の担当へ渡せる。
新規性
タスク専用の知識や追加支援の設計を増やさず、既存エージェントの標準実行環境を交代で使う点が中心だ。文脈を消すことと作業成果を消すことを分け、後者を共有して相補性を利用する。
交代が単独の参照上限を超える十分条件、実験予算の境界、セッション上限が利点を保つ条件を解析する。これは条件付きの説明で、任意の二モデルを交代させれば必ず改善する保証ではない。
従来手法との違い
同じ六時間予算の構成要素となる単独エージェントに加え、既発表の専門的な機械学習ワークフローと比較する。後者は十二〜二十四時間の報告値で、モデルと実行支援も異なるため、予算を揃えた単独比較とは分けて読む。
最良構成は単独最良72.4%を上回る78.2%だった。同じ二モデルでも開始順を逆にすると73.3%となり、引継ぎの順序は結果に影響する。複数構成の改善も、各要素の平均を基準にするか強い方を基準にするかを区別する。
実験結果
著者らは75のKaggle課題を含むMLE-benchを使い、任意のメダルを得た課題の割合を評価した。各試行は六時間、一基のA10で実行する。最良構成78.2%は公開基準70.2%より8.0ポイント高く、その時間予算の四分の一だった。
五つの異種ペアにまたがる六構成は、構成要素の平均に対しメダル率を平均6.4ポイント改善した。最終見直しは450試行で選択の8.9%を変更し、メダル結果を311から319へ増やした。補足のカーネル最適化例は878サイクルだが、単一事例の転用根拠である。
応用の可能性
編集上の応用案 · 論文が実証した用途とは区別しています。
編集上の応用案は、社内の予測モデルを限られた時間で試作する開発工程だ。入力は固定したデータ分割、コード、実験記録、出力は再現可能な候補と比較表にする。二つの担当AIが実験数で区切って交代し、前の改善を引き継ぐ。
最終候補は担当者が検証集合で確認し、共有記録から選択理由を追えるようにする。実験が長く続いたことを成果とせず、独立した評価で改善が残るかを判断する。企業データへの効果はこのベンチマークだけでは分からない。
応用先の候補からNauhに相談できます。
導入時の検証
導入時の検証案 · 対象データでの再評価が必要です。
導入時の検証案では、漏洩のない固定分割と実験上限を用意し、単独担当と交代担当を同じ時間予算で比べる。交代順と一セッションの実験数を変え、前の成果を読む時間も総予算へ含める。
検証性能、実験成功率、改善候補の保存、最終選択の誤り、計算費用を測る。出力トークン数は参考値として残すが、推論の質そのものとはみなさない。最終見直しの有無も比較し、良い途中候補を選び損ねないか確認する。
限界と課題
本文でいう推論の強さは平均出力トークン数を代理としており、内容の正確さを直接測る指標ではない。専門的なワークフローとの比較は既発表値で、基盤モデルと予算が異なる点も制約になる。
編集上の検証課題は、文脈を初期化して失う判断理由、共有成果の読み取り負担、異種モデルの相性だ。ペアと開始順に依存する改善を一般化せず、複数試行で安定性を確認する。補足の高速化事例だけで他の開発全般への効果を断定しない。
出典
元のタイトル・要旨を確認する（英語）
Humanize MLE Agents: Multi-Agent Session Alternation Beyond Single-Agent Limits
Existing LLM-based agent approaches for long-horizon machine learning engineering (MLE) often use context engineering, implemented through custom harnesses that manage tools, skills, and accumulated experience. However, we find that as single-session execution lengthens, the agent's reasoning intensity declines alongside slowing progress, summarized as long-horizon deceleration, and the benefits of these custom harnesses vanish as the underlying model improves, summarized as harness staleness. These findings suggest that their benefits may not persist across versions, which motivates a workflow-level approach in which agents build on one another's work across sessions. We model these alternating agent sessions as a context-reset semi-Markov decision process (CR-SMDP) and establish sufficient conditions for alternation to exceed single-agent reference limits, derive an explicit experiment-budget bound, and characterize when session caps preserve this advantage. Guided by this analysis, we introduce Humanize MLE Agents (HMA), which alternates two agents on a shared workspace, limits each session to at most k experiments and resets the context between sessions, without additional task-specific harness or prior knowledge supplements. Across 75 Kaggle tasks in MLE-bench, HMA reaches a state-of-the-art any-medal rate of 78.2%, exceeding the strongest open-source baseline by 8.0 points with a quarter of its time budget. Moreover, among six configurations spanning five heterogeneous agent pairs, HMA improves any-medal rate over the constituent baselines by 6.4 points on average, demonstrating cross-pair generality. A supplementary case on kernel optimization reaches 878 cycles, within 1.6% of the community leaderboard leader, demonstrating applicability beyond MLE.
論文本体の取得範囲に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。収集：2026-10-12