アーカイブ / Computer Vision
忘却した画像クラスの認識は戻るか――実画像なしで調べるSFRA
Source-Free Relearning Audit (SFRA)
Source-Free Relearning Audit (SFRA)の原論文から掲載した図です。細部はクリックして拡大できます。
原論文の図の説明を読む
Figure 1 : Comparison of our proposed SFRA applied to state-of-the-art unlearning methods on TinyImageNet with a ViT-B/16 backbone and class 160 160 as the forget class. Forget accuracy is shown before unlearning (Original), after unlearning (Unlearned), and after SFRA (Relearned). Some methods remain robust to relearning, whereas others exhibit substantial recoverability.
概要
- SFRAは、忘却後の画像分類モデルに認識可能な特徴が残っているかを、分類器の再学習で調べる。
- 更新には人工的な特徴を使い、忘却クラスや保持クラスの実画像は使わない。
- 著者らのCIFAR-10・ResNet-18のNegative Gradient実験では、忘却クラス正解率の平均がSFRA更新前の7.52%から更新後の56.76%になった。
補足:編集した模式図で仕組みを確認する
VISUAL EXPLAINER
図でつかむ、Source-Free Relearning Audit (SFRA)の仕組み
- 01忘却後のモデル
- 02人工特徴を生成
- 03確信度で選別
- 04分類器を更新
- 05再学習後のモデル
原論文の説明をもとにした模式図です。処理の細部は省略しています。
研究の背景
SFRAは、画像分類モデルから特定の種類を忘却させた後、その認識が戻り得るかを調べる。消す対象を忘却クラス、残す対象を保持クラスと呼ぶ。忘却クラスの正解率が低くても、内部には区別に使える特徴が残っている可能性がある。
最後の分類器の判定だけが変わっていれば、後から小さな更新で認識が戻るかもしれない。このため、忘却直後の正解率に加え、忘却後のモデルがどれほど再学習しやすいかも確認する。
手法
SFRAは、画像を数値に変換する部分を固定し、最後にクラスを判定する分類器だけを更新する。モデル内部を読めることと忘却クラス名が分かることを前提に、分類器へ入る数値の並びである「特徴」をランダムに作る。分類器が各候補をどのクラスらしいと判定するかを計算し、保持クラスごとに候補を集める。
たとえば「犬」を忘却したモデルなら、各保持クラスと強く判定された候補にはそのクラス名を付ける。同じ保持クラスに判定された候補のうち、確信度が低いものには「犬」のラベルを付け直す。両方を使って分類器を更新し、更新後のモデルを得る。実画像とそのラベルは更新に使わず、正解率を測る段階で使う。
新規性
SFRAは、忘却後のモデルだけで人工的な特徴を作り、分類器の更新によって認識が戻るかを調べる。著者らは、人工的な特徴と実際の忘却クラスの特徴の平均的な向きが十分にそろうと、1回の更新で忘却クラスの判定上の差が広がる十分条件を示した。
さらに、忘却クラスの回復と保持クラスの精度維持を合わせた再学習スコア(RS)を導入し、同じ忘却クラスを除いて訓練し直したモデルとの差も報告する。
従来手法との違い
比較対象のPRAは、忘却クラスの実画像5枚から代表的な特徴を作り、分類器を復元する。SFRAは実画像を使わず、忘却後の分類器の確信度で人工的な特徴を選ぶ。著者らは同じ忘却後のモデルと忘却クラスの分割で両手法を比較した。
別の対照は、忘却クラスを学習から除いて訓練し直したモデルである。SFRAで認識が戻っても、一般的な画像の特徴を利用できただけかもしれない。この対照との差は、忘却後のモデルに固有の回復しやすさを検討するために使う。
実験結果
著者らはCIFAR-10、CIFAR-100、TinyImageNetと、ResNet-18、ViT-B/16、Swin-Tを用いた。確認できた本文の範囲では、ResNet-18の単一クラス忘却を比較した表を確認できる。保持クラスの正解率は忘却クラス間の平均±標準偏差、忘却クラスの正解率は最小・平均・最大で示される。
CIFAR-10のNegative Gradientでは、忘却後の忘却クラス正解率の平均は7.52%、保持クラスは90.12±1.50%だった。著者らのSFRA更新後はそれぞれ56.76%、89.20±1.84%である。RSの最大値は0.76、同じ忘却クラスの再訓練モデルとのRSの差の最大値は+0.55。これらの最大値は、正解率の平均とは集計方法が異なる。
応用の可能性
編集上の応用案 · 論文が実証した用途とは区別しています。
編集上の応用案:工場の外観画像分類モデルで、廃止した不良種別を忘却させた後の監査に使う。入力は忘却後のモデルと対象種別、出力は分類器を更新したモデルと、別に測定する再認識の結果とする。
元の学習には検査カメラの画像と不良種別のラベルが必要だ。監査の更新には実画像を渡さず、評価時だけ独立したラベル付き画像を使う。最終分類層がSFRAの想定に合うかを確認し、合わなければ適用方法を調整する。現場での有効性は未検証である。
応用先の候補からNauhに相談できます。
導入時の検証
導入時の検証案 · 対象データでの再評価が必要です。
導入時の検証案:対象種別を忘却した画像分類モデルを複製し、更新前の正解率を基準値にする。モデル内部と対象種別名を用意してSFRAで分類器だけを更新し、対象種別の正解率の回復幅と、残す種別の正解率の変化を測る。
元の学習に必要なデータは、検査カメラの画像と種別ラベルである。カメラの撮影条件も記録し、評価には更新で使わない独立したラベル付き画像を用意する。分類器の出力に対象種別があるか確認する。対象種別を除いた訓練データがあれば、訓練し直した対照モデルとも同じ条件で比較する。
限界と課題
著者らの理論上の条件は、人工的な忘却クラス用の特徴による分類器の1回の更新を扱い、最終的な再学習の成功を保証しない。人工的な特徴は実画像の特徴が存在する範囲から外れ得る。再認識に成功しても、元の訓練画像を記憶していた証明にはならない。
編集上の検証事項は、対象モデルの内部と忘却クラス名にアクセスできるか、独立したラベル付き評価画像を確保できるかである。訓練し直した対照モデルを用意できなければ、そのモデルとの回復しやすさの差は測れない。
出典
元のタイトル・要旨を確認する(英語)
Source-Free Class Relearning: Diagnosing Forgetting in Class Unlearning
Class unlearning aims to remove a model's ability to recognize designated forget classes while preserving performance on retain classes. However, low forget accuracy after unlearning does not necessarily mean the class structure has been erased. Approximate unlearning methods can alter classifier decision boundaries while leaving recoverable structure in the representation. Prior work has shown that forget classes can be recovered, but existing approaches require real forget or retain samples, auxiliary data, or reference checkpoints. We study class relearning in a strictly source-free setting, asking whether a forget class can be recovered through a classifier-head update using only the unlearned model. Our approach rests on a theoretical analysis establishing a sufficient alignment condition under which a single gradient step on a synthetic probe set increases the expected logit margin of the forget class. Building on this, we propose a white-box Source-Free Relearning Audit (SFRA), which generates candidate embeddings in representation space and uses model-guided confidence filtering to construct high-confidence retain probes and low-confidence boundary-adjacent probes that are relabelled as the forget class. Gaussian sampling and Softmax confidence are used by default, while ablations with alternative proposal distributions and uncertainty criteria show that recoverability is not specific to these choices. To quantify recoverability, we introduce the Relearning Score (RS), which jointly measures forget-class recovery and retain-accuracy preservation, and report class-matched $Δ$RS relative to a retrained reference. Experiments on CIFAR-10, CIFAR-100, and TinyImageNet with ResNet-18, ViT-B/16, and Swin-T show that several unlearning methods exhibit substantial source-free recoverability, and that for a subset of methods this recoverability exceeds the matched retrained reference.
論文本体の取得範囲に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。解説更新:2026-10-01




