アーカイブ / LLM
有害な生成を抑える介入を、成分ごとに選ぶGAPS
GAPS
概要
- GAPSは、介入時点の判断に加え、活性値を動かす成分を静的・動的な二つのゲートで選ぶ。
- 著者らの固定した能力条件では、Gemma-3の有害な生成の割合はDSAS単独の3.52％からDSAS＋GAPSの0.48％になった。
- 業務で試すには、望ましい例と避けたい例のラベル付き対照データを用意し、抑制効果と回答品質を同じ入力で測る必要がある。
補足：編集した模式図で仕組みを確認する
VISUAL EXPLAINER
図でつかむ、GAPSの仕組み
- 01対照例の活性値
- 02識別成分を固定
- 03生成中の値を判定
- 04隠れ状態を更新
原論文の説明をもとにした模式図です。処理の細部は省略しています。
研究の背景
言語モデルの有害な続き文や特定概念への言及を抑える方法に、生成中の「隠れ状態」を調整する活性操作がある。隠れ状態とは、モデルが文章を処理する途中で持つ数値の並びで、各数値をここでは成分と呼ぶ。
同じ調整を不要な場面や成分にも加えると、文章の自然さや知識問題への応答に影響しうる。文脈を見て介入時点を選ぶ方法はあるが、介入すると全成分を動かす。そこで、動かす成分も選ぶことが課題となる。
手法
まず、望ましい振る舞いと避けたい振る舞いの対照例から、各成分の活性値を集める。両群の平均値の差を、値を動かす方向とする。静的ゲートはAUROCという、両群の値をどれだけ区別できるかを示す指標を成分ごとに計算し、区別に使える成分を事前に選ぶ。
生成中は、選ばれた成分の現在値を両群それぞれの正規分布と照らす。正規分布とは、平均付近の値ほど現れやすいとする分布である。避けたい側で生じた可能性が高い成分だけに、方向ベクトルを適用する。例えば有害な続き文を抑える場合、この成分ごとの判定を生成の各段階で行い、CASTまたはDSASによる介入時点の判断と組み合わせる。
新規性
GAPSは、生成のどの時点で介入するかを決めるCASTやDSASに、隠れ状態のどの成分を動かすかという判断を加える。事前に成分を選ぶ静的ゲートと、生成中の値を見て毎回判断する動的ゲートを組み合わせる。
両ゲートの統計量は、介入方向を求める対照例から推定する。著者らによると、生成時に増える計算量は、１トークン当たり隠れ状態の成分数に比例する。
従来手法との違い
介入なしのモデルを基準に、通常の活性操作は生成中に同じ方向ベクトルを加える。CASTは条件に合うかを判定して介入し、DSASは望ましくない振る舞いの検出結果に応じて介入の強さを変える。ただし、介入時にはどちらも全成分にベクトルを適用する。
著者らはCAST単独とCAST＋GAPS、DSAS単独とDSAS＋GAPSを比較した。成分の現在値が避けたい概念の典型的な範囲に入るかで決める「範囲ゲート」も、各ゲートの効果を調べる比較対象に含めている。
実験結果
著者らはGemma-3（4B）とQwen-3（1.7B）の第15層で、RealToxicityPromptsの有害な続き文と、OneSeCの七概念の除去を評価した。有害性は各入力から10件生成し、分類器が有害と判定した割合で測定。能力面にはWikipedia文のパープレキシティと、MMLUの正答選択肢に与えた平均確率を用いた。
著者らの表では、パープレキシティの増加を介入なしの５％以内、MMLU指標の低下を３％以内に収めた条件で、Gemma-3の有害な生成の割合は介入なし6.52％、DSAS単独3.52％、DSAS＋GAPS 0.48％だった。概念除去は各概念の介入なしの値を100％として評価し、著者らは両モデルで介入強度を変えた比較でも、CAST・DSASへの追加が能力と抑制の両立を維持または改善したと報告する。
応用の可能性
編集上の応用案 · 論文が実証した用途とは区別しています。
編集上の応用案：顧客向け回答の下書きを作る言語モデルで、有害な表現を抑えられるか試す。入力は問い合わせ文、出力は回答案とし、生成中の活性値にGAPSを適用する。担当者が回答案を確認してから利用する運用を想定する。
業務に合わせるには、望ましい回答例と避けたい回答例を集め、それぞれに人がラベルを付けた対照データが要る。追加のセンサーは使わない。業務語彙を含む例から介入方向とゲートの統計量を推定し直す必要があり、この用途での効果は論文の実験からは確認できない。
応用先の候補からNauhに相談できます。
導入時の検証
導入時の検証案 · 対象データでの再評価が必要です。
導入時の検証案：業務文から望ましい回答例と避けたい回答例を集め、人がラベルを確認する。その対照データを使い、対象モデルで介入方向と二つのゲートに必要な統計量を推定する。必要な入力は文章とラベルで、追加のセンサーは使わない。
同じ問い合わせ集合で、介入なし、DSAS単独、DSAS＋GAPSの回答を比べる。有害と判定された割合に加え、人による回答の適切さの評価と、通常の質問への回答品質を記録する。業務データで介入強度と判定基準を調整し、抑制効果と品質への影響を併記して採否を判断する。
限界と課題
編集上の検証事項：動的ゲートは、各成分の活性値について、望ましい例と避けたい例それぞれの分布を正規分布で近似する。業務文書の対照データでもこの近似が適切か、例の選び方によって判定が変わらないかを確かめる必要がある。著者らがこれらを限界として報告したという意味ではない。
確認できた本文の範囲で評価対象となったのは、二つのモデル、有害表現の抑制、七つの概念の除去である。別の業務への適用結果は示されていない。分類器や言語モデルによる判定が、その業務での人の判断と合うかも検証事項となる。
出典
元のタイトル・要旨を確認する（英語）
GAPS: Dimension-Level Gates for Conditional Activation Steering
Activation steering suppresses undesired behaviors in language models by adding a steering vector to the hidden state during generation. Recent conditional methods such as CAST and DSAS improve the behavior-capability trade-off by deciding when to intervene, but once active, they apply the full dense vector to all hidden dimensions, regardless of whether a neuron carries concept information or already lies in the desired regime. We introduce dimension-level conditioning as a complementary axis of selectivity that also decides which neurons to intervene on. Our method, GAPS (Gated Activation steering via Posterior and Separability), combines two training-free gates: a static separability gate that restricts steering to neurons with statistically reliable concept information (via AUROC), and a dynamic posterior gate that steers a neuron only when its current activation is better explained by the undesired concept under a Gaussian model. The gates add O(D) overhead per token, and they plug into existing conditional methods. On toxicity mitigation (RealToxicityPrompts) and concept removal (OneSeC) with Gemma-3 (4B) and Qwen-3 (1.7B), GAPS consistently matches or improves the Pareto front of its token-level counterparts; under a fixed capability budget, DSAS+GAPS reduces Gemma-3's toxicity rate from 6.52% to 0.48%, versus 3.52% for DSAS alone. Ablations attribute most of the gain to the posterior gate.
論文本体の取得範囲に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。解説更新：2026-10-01