表示
超・人工知能研究所 Super AI Research Lab トップへ超・人工知能研究所AI Research Lab / ぱそ太郎工事中

since
平成38年9月29日

← 検索結果に戻る

画像分類器の中間値を順位別の基準に置き換え、分布外画像を検知するRAS

Ranked Activation Shift (RAS)

保存した記事を見るこのブラウザに保存します。無料会員で端末間の同期・フォルダ整理
原論文の図

Ranked Activation Shift (RAS)の原論文から掲載した図です。細部はクリックして拡大できます。

原論文の図の説明を読む

Figure 2 : Overview of RAS. At setup time, RAS computes a reference vector 𝝁 \bm{\mu} by sorting each ID train sample by intensity and then averaging across all. At inference time, each sample’s activations are shifted so that their ranked activation intensities match 𝝁 \bm{\mu} . Subsequently, they are passed to the classifier and the chosen OoD scorer is used.

出典:Ranked Activation Shift (RAS) / arXiv ↗

概要

  • RASは通常画像の中間値から順位別の平均基準を作り、判定画像の中間値をその基準へ置き換える。
  • 著者らのOpenOOD評価では、CIFAR-10とResNet18でEBO単独よりAUROCとFPR@TPR95が改善した。
  • ImageNetとResNet50では調整済みSCALEのAUROCがRASを上回った。順位の並べ方にも本文内で食い違いがある。
補足:編集した模式図で仕組みを確認する

VISUAL EXPLAINER

図でつかむ、Ranked Activation Shift (RAS)の仕組み

左から右へ読む
  1. 01通常画像の中間値
  2. 02順位別の平均基準
  3. 03判定画像の値を置換
  4. 04分類出力と検知スコア

原論文の説明をもとにした模式図です。処理の細部は省略しています。

研究の背景

画像分類器は、学習時に見ていない種類の画像にも既知の分類名を返し得る。分布外検知は、学習時と異なる画像を見つけるため、分類結果とは別にスコアを付ける方法だ。想定外の入力を人が確認する運用に関わる。

既存の分類器を再学習せず、最終段直前の中間値を調整する手法がある。中間値とは、画像を分類する途中でモデルが作る数値の列を指す。著者らは、その分布がデータやモデルで異なり、従来法の検知性能が安定しない点を課題としている。

手法

事前に、学習時と同じ分布の画像を既存の分類器へ通し、最終段直前の中間値を取り出す。画像ごとに値を順位順に並べ、同じ順位の値を画像間で平均して基準を保存する。基準の計算には画像の正解ラベルを使わない。

判定時は、例えば製品画像の中間値を順位付けし、各値を基準の同順位の値へ置き換える。置き換えた値は元の位置に戻して分類器の最終段へ渡し、その出力からEBOなどで検知スコアを求める。順位の昇順と降順が本文内で食い違うため、基準作成時と判定時に同じ並べ方を使う点を実装時に確認する。

新規性

RASは、分類器を再学習せず、通常画像の中間値を順位ごとに平均した基準へ、判定画像の中間値を置き換える。値を切り詰める位置や拡大率を決める調整値は使わない。

著者らは、中間値に負の値があると拡大手法の前提が崩れる場合を分析した。RASは値の正負を前提とせず、基準より高い値を下げる操作と低い値を上げる操作の両方を含む。

従来手法との違い

ReActは高い中間値を切り詰め、ASHの各方式は一部の値を削除し、SCALEは値を拡大する。著者らによると、これらの比較手法は調整値を持ち、報告された比較値には別に用意した分布外画像で調整した設定が使われた。RASに必要なのは、通常画像から作る基準である。

主な比較では、各手法を分類器の最終段の直前に適用し、EBOで検知スコアを計算した。EBOは各分類候補への出力値をまとめて採点する方法だ。RASと比較手法の差は、このモデル、データ、採点条件の範囲で読む必要がある。

実験結果

著者らはOpenOODを使い、CIFAR-10、CIFAR-100、ImageNet-200、ImageNetの通常画像と、それぞれに対応する近い分布外画像、遠い分布外画像で評価した。指標はAUROCとAUPRが高いほど、真陽性率95%時の偽陽性率FPR@TPR95が低いほど良い。

最終段直前に適用しEBOで採点した著者らの表では、CIFAR-10とResNet18でRASのAUROCは90.24、FPR@TPR95は40.16。EBO単独はそれぞれ90.00、48.24だった。一方、ImageNetとResNet50ではRASのAUROCは86.55で、調整済みのSCALEの90.42を下回った。

応用の可能性

編集上の応用案 · 論文が実証した用途とは区別しています。

編集上の応用案:製造ラインの既存カメラ画像を分類するモデルに、想定外の画像を確認担当へ回す補助判定を加える。入力は製品画像、出力は分類結果と分布外検知スコアとし、スコアが低い画像を確認画面に表示する。

既存モデルの学習には分類名を付けた対象ラインの画像が必要で、RASの基準作成には通常画像とその中間値を使う。基準作成時の正解ラベルや追加センサーは要らない想定だ。撮影条件や対象品が変われば、基準が合うかを再評価してから運用する。

応用先の候補からNauhに相談できます。

導入時の検証

導入時の検証案 · 対象データでの再評価が必要です。

導入時の検証案:対象ラインの通常画像を集め、分類名付き画像で学習した既存分類器から中間値を取得し、RASの順位別基準を作る。評価には別の通常画像と想定外画像を用意し、両者を区別できる正解ラベルを付ける。入力は既存カメラ画像とし、追加センサーは使わない。

同じ評価画像でEBO単独とRAS併用を比べ、AUROC、FPR@TPR95、通常画像の分類正解率を測る。撮影条件別にも結果を確認し、許容する見逃し件数と誤通知件数を基に確認担当へ回すスコアの境界を決める。条件が変わった際は基準の再作成を検討する。

限界と課題

著者らの表では、ImageNetとResNet50の組み合わせでRASは比較手法中の最良値ではない。通常画像の分類精度をほぼ維持したとの記述はあるが、確認できた本文の範囲では、その根拠とされる補足表の数値は読めない。

編集上の検証事項:手法説明には順位を昇順とする記述があり、別の式と手順には降順とある。実装前に基準と判定画像の並べ方を確認する必要がある。対象現場での検知性能、撮影条件が変わった後の基準更新、確認担当へ回す境界も別途検証したい。

研究内容と応用案に基づく分類です。業界での導入実績を示すものではありません。

出典

元のタイトル・要旨を確認する(英語)

Ranked Activation Shift for Post-Hoc Out-of-Distribution Detection

State-of-the-art post-hoc out-of-distribution detection methods rely on intermediate layer activation editing. However, they exhibit inconsistent performance across datasets and models. We show that this instability is driven by differences in the activation distributions, and identify a failure mode of scaling-based methods that arises when penultimate layer activations are not rectified. Motivated by this analysis, we propose RAS, a hyperparameter-free post-hoc method that replaces sorted activation magnitudes with a fixed in-distribution reference profile. Our simple plug-and-play method shows strong and consistent performance across datasets and architectures without assumptions on the penultimate layer activation function, and without requiring any hyperparameter tuning, while empirically preserving in-distribution classification accuracy. We further analyze what drives the improvement, showing that both inhibiting and exciting activation shifts independently contribute to better out-of-distribution discrimination.

論文本体の取得範囲に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。解説更新:2026-10-01