アーカイブ / Computer Vision / Audio
画像・音声の分類モデルから指定クラスを忘れさせるGPPU
Graph-Propagated Projection Unlearning
Graph-Propagated Projection Unlearningの原論文から掲載した図です。細部はクリックして拡大できます。
原論文の図の説明を読む
Figure 1 : As we apply GPPU to the discriminative model, the model misclassified apple as orange while speaker 1 as speaker 3.
概要
- GPPUは近い特徴を結ぶグラフから忘却対象クラスの方向を求め、射影と特徴抽出器末尾の微調整を組み合わせる。
- 著者のCIFAR-10・ViT-L/16で「猫」を忘れる実験では、FA 0.12、RA 93.52、実行時間31.8秒と報告された。
- 実務では対象クラスの正解率だけでなく、保持クラスの判定と対象情報の残存を検証する必要がある。
補足：編集した模式図で仕組みを確認する
VISUAL EXPLAINER
図でつかむ、Graph-Propagated Projection Unlearningの仕組み
- 01ラベル付き画像・音声
- 02近い特徴を結ぶ
- 03忘却方向を求める
- 04射影と末尾更新
- 05更新後の分類モデル
原論文の説明をもとにした模式図です。処理の細部は省略しています。
研究の背景
GPPUは、学習済みの画像・音声分類モデルから、指定した種類に関する学習内容を取り除くための手法である。分類モデルは入力を商品や音声コマンドなどの種類に振り分けるが、運用中に特定の種類を判定対象から外したい場合がある。
対象データを除いてモデル全体を学習し直す方法には計算時間がかかる。そこで、対象クラスの判定を抑えながら、残すクラスの正解率をどの程度維持できるかが実務上の焦点となる。
手法
学習済みモデルにラベル付き画像または音声を通し、各入力を数値の並びである「特徴」に変える。特徴の向きが近い入力同士を結ぶ近傍グラフを作り、隣接する特徴を１回だけ混ぜる。忘れるクラスの特徴の平均から、そのクラスを表す方向を求める。例えば猫の画像クラスを外すなら、猫とラベル付けされた画像の特徴を使う。
次に、特徴からその方向に沿う成分を引く「直交射影」で、対象に結び付く成分を抑える。射影だけではモデル内の特徴は変わらないため、著者は忘れるクラスの特徴がその方向を向かないよう特徴抽出器の末尾を微調整する。同時に、残すクラスのラベル付きデータを使って分類性能の維持を図る。出力は更新された分類モデルである。
新規性
GPPUは、学習済みモデルの特徴から近いもの同士を結び、周囲の特徴を反映したうえで忘却対象クラスの方向を求める。著者は、画像と音声の分類モデルに共通する手順として提案する。
さらに、その方向の成分を取り除く射影に加え、モデルが作る特徴そのものを変えるため、特徴抽出器の末尾を微調整する。射影だけでは内部表現に対象情報が残るという問題に対応した構成である。
従来手法との違い
比較対象として、画像実験の表にはGradient Ascent、Fisher Forgetting、Negative Gradient、PBU、Bad Teaching、SalUnが載る。これらに対しGPPUは、特徴の近傍関係から忘却方向を定め、射影と限定した層の更新を組み合わせる。
CIFAR-10・ViT-L/16の表では、GPPUはPBUより忘却対象の正解率と実行時間が低く、保持対象の正解率は高い。ただし、これは表に示された単一クラス忘却の条件での比較であり、別のクラスや運用環境にも当てはまるとはいえない。
実験結果
著者は画像６データセットで、ViT-L/16とResNet-50を使った単一クラス忘却の結果を示す。表の指標は忘却対象の正解率FA、保持対象の正解率RA、実行時間などである。CIFAR-10・ViT-L/16で「猫」を忘れる条件では、GPPUのFAは0.12、RAは93.52、実行時間は31.8秒だった。
同じ条件のPBUはFAが5.68、RAが92.09、実行時間が245.8秒で、更新前モデルのRAは94.05である。確認できた本文の範囲では、概要は音声ベンチマークを２件と記す一方、データセット一覧には３件載り、件数が一致しない。音声の結果表や各指標の詳細な定義も確認できない。
応用の可能性
編集上の応用案 · 論文が実証した用途とは区別しています。
編集上の応用案。社内の商品画像分類で、扱いを終えた商品カテゴリを判定対象から外す場面を想定する。入力は既存モデルと、対象カテゴリおよび残すカテゴリのラベル付き学習画像で、出力は更新後の分類モデルとする。
画像から特徴を抽出できる層を特定し、両カテゴリの画像を分けてGPPUを適用する。追加センサーは想定しないが、元画像とラベルが必要である。対象カテゴリに似た商品への影響を含め、業務で使えるかは別途検証する。
応用先の候補からNauhに相談できます。
導入時の検証
導入時の検証案 · 対象データでの再評価が必要です。
導入時の検証案。対象商品と残す商品のラベル付き学習画像、別に分けた評価画像、既存の分類モデルを用意する。画像分類の試行に追加センサーは想定しない。まず画像から特徴を取り出す層と、更新できる末尾の層を確認する。
GPPUで更新したモデルを、元モデルおよび対象カテゴリを除いて学習し直したモデルと同じ評価画像で比べる。対象・保持カテゴリ別の正解率、処理時間、似た商品の誤分類を測る。必要なラベルの品質を点検し、許容する正解率の変化を業務側で先に決める。
限界と課題
著者は、推論時の射影だけではモデルの重みが変わらず、内部表現に対象クラスの情報が残ると説明する。また、グラフ上で特徴を何度も伝播すると異なるクラスが混ざるおそれがあるため、伝播を１回に制限している。
編集上の検証事項は、更新後の特徴から対象情報を取り出せるか、似たクラスの判定にどれほど影響するかである。低い忘却対象正解率だけで情報の消去を確定できない。複数クラスを同時に忘れる場合や、時間をおいて順に忘れる場合の結果も、この範囲では判断できない。
出典
元のタイトル・要旨を確認する（英語）
Graph Propagated Projection Unlearning: A Unified Framework for Vision and Audio Discriminative Models
The need to selectively and efficiently erase learned information from deep neural networks is becoming increasingly important for privacy, regulatory compliance, and adaptive system design. We introduce Graph-Propagated Projection Unlearning (GPPU), a unified and scalable algorithm for class-level unlearning that operates across both vision and audio models. GPPU employs graph-based propagation to identify class-specific directions in the feature space and projects representations onto the orthogonal subspace, followed by targeted fine-tuning, to ensure that target class information is effectively and irreversibly removed. Through comprehensive evaluations on six vision datasets and two large-scale audio benchmarks spanning a variety of architectures including CNNs, Vision Transformers, and Audio Transformers, we demonstrate that GPPU achieves highly efficient unlearning, realizing 10-20x speedups over prior methodologies while preserving model utility on retained classes. Our framework provides a principled and modality-agnostic approach to machine unlearning, evaluated at a scale that has received limited attention in prior work, contributing toward more efficient and responsible deep learning.
論文本体の取得範囲に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。解説更新：2026-10-01