アーカイブ / Computer Vision
画像のラベル誤りを学習中の予測の変化から探すSEI
Signed Entropy Integral
Signed Entropy Integralの原論文から掲載した図です。細部はクリックして拡大できます。
原論文の図の説明を読む
Figure 1: Training dynamics of prediction entropy for correctly labeled versus mislabeled samples. Left: Nevus images from the ISIC dataset, comparing correctly labeled samples (ground truth: nevus; given label: nevus) with mislabeled samples (ground truth: nevus; given label: other skin lesion categories). Right: Grade 4 diabetic retinopathy (DR) images from the DeepDRiD dataset. In both cases, correctly labeled samples exhibit steadily decreasing entropy throughout training, while mislabeled samples maintain persistently high entropy, demonstrating the potential of entropy as an indicator for noisy label detection.
概要
- SEIは学習中の予測の迷いと付与ラベルとの一致を合算し、誤ラベル候補を順位付けする。
- CheXpertで著者らが報告した誤ラベル検出のF1値は83.59％だった。
- 低いSEIだけでラベルを削除せず、正しい難例との区別を人手で確認する用途が考えられる。
補足：編集した模式図で仕組みを確認する
VISUAL EXPLAINER
図でつかむ、Signed Entropy Integralの仕組み
- 01画像と付与ラベル
- 02各時点の予測を記録
- 03符号付きの迷いを合算
- 04点検候補を抽出
原論文の説明をもとにした模式図です。処理の細部は省略しています。
研究の背景
画像分類では、画像と正解ラベルの組を使ってモデルを学習する。ラベルを誤った画像が混じると、モデルがその例に合わせて不要な特徴まで覚え、別の画像への予測に影響し得る。
医用画像では見た目が似た病変や判定者間の違いがあり、全件を人手で再確認する負担は大きい。誤りらしい例を先に示せれば、点検の対象を絞れる。
手法
SEIはSigned Entropy Integralの略で、学習中の予測を画像ごとに集計する。エントロピーは、各クラスへの予測確率がどれほど分散しているかを表す値である。著者らは各時点で、最も確率が高い予測が付与ラベルと一致すれば正、不一致なら負の値を付け、全時点で足し合わせる。
例えば、正しいが判別しにくい画像は初期に不一致でも、後半に予測がラベルと合えば負の値を一部相殺する。誤ラベルの画像は不一致が続くと値が低くなる。さらに、一部の画像を人工的な補助クラスに付け替え、そのSEIの平均を判定の境界として、境界より低い画像を候補にする。
新規性
SEIは、予測の迷いの大きさだけでなく、モデルの予測が付与ラベルと一致するかによって符号を変える。一時点の値ではなく学習期間を通じて足し合わせ、誤ラベル候補を順位付けする。
著者らは、迷いが大きいが正しくラベル付けされた難例と、誤ラベル例を区別する狙いでこの統計量を導入した。判定の境界には、人工的に別の補助クラスへ付け替えた例の平均値を使う。
従来手法との違い
比較対象には、学習損失、予測値、事前学習した画像表現などから誤ラベルを探す既存手法が含まれる。SEIの内部比較では、符号を付けないエントロピーの合計や、学習途中・終了時の一回だけの値も調べた。
著者らの表では、医用画像3データセットの人工的なラベル誤り条件でSEIのF1値が各比較法を上回った。学習期間を通じた一致・不一致を使うことが、単発の予測より有効だったという報告である。
実験結果
著者らは皮膚画像のISIC、眼底画像のDeepDRiD、前立腺組織画像のPANDAで、10～50％のラベルを人工的に変えた条件を評価した。主要指標のF1値は、誤り候補を当てる精度と取り逃しの少なさを合わせた値である。例えば誤り率10％の一様な変更では、SEIはISICで50.44％、DeepDRiDで45.20％、PANDAで72.57％だった。
実際の診療由来ラベルと専門医の多数決を比べたCheXpertでは、著者らはSEIのF1値83.59％を報告し、表中の次点は80.34％だった。本文には医用画像4種類の評価があり、人工的な誤りの主表は3種類を扱う。
応用の可能性
編集上の応用案 · 論文が実証した用途とは区別しています。
編集上の応用案：画像分類用データのラベル点検で、専門家が優先して見直す候補を選ぶ。入力は画像、現在のラベル、学習中に各時点で記録したクラス別予測確率。出力は画像ごとのSEIと、値が低い順に並んだ点検リストとする。
点検者は画像と付与ラベル、必要な元記録を照合し、訂正か維持かを決める。低いSEIは誤りの確定ではなく、確認順を決める指標として使う。
応用先の候補からNauhに相談できます。
導入時の検証
導入時の検証案 · 対象データでの再評価が必要です。
導入時の検証案：ラベルを人手で再確認できる小さな画像集合を用意し、通常の学習過程で各画像の予測確率を記録する。付与ラベルとの不一致回数を単純に数える方法を基準に、SEIによる候補順位と比べる。
上位から一定件数を点検したときに見つかる実際の誤り数、正しい難例の混入数、点検時間を測る。しきい値を変えた場合の候補数と、訂正後の分類性能も確認する。
限界と課題
著者らは、補助クラスを使ったしきい値の決め方には経験的な部分が残ると認めている。また、迷いの大きさだけでは、難しい正例と誤ラベル例を分けにくいことを示した。報告された主要な比較には、人工的にラベルを変えた条件が多い。
編集上の確認点は、実際のラベル誤りでも点検候補が適切に上位へ来るか、珍しいが正しい画像を過度に疑わないかである。候補を除外する前に、人による判定と下流の分類性能を確かめたい。
出典
元のタイトル・要旨を確認する（英語）
On Revisiting Entropy for Identifying Mislabeled Images
Mislabeled samples in training datasets severely degrade the performance of deep networks, as overparameterized models tend to memorize erroneous labels. We address this challenge by proposing a novel approach for mislabeled data detection that leverages training dynamics. Our method is grounded in the key observation that correctly labeled samples exhibit consistent entropy decrease during training, while mislabeled samples maintain relatively high entropy throughout the training process. Building on this insight, we introduce a signed entropy integral (SEI) statistic that captures both the magnitude and temporal trend of prediction entropy across training epochs. SEI is broadly applicable to classification networks and demonstrates particular effectiveness when integrated with contrastive language-image pretraining (CLIP) architectures. Through extensive experiments on four medical imaging datasets -- a domain particularly susceptible to labeling errors due to diagnostic complexity -- spanning diverse modalities and pathologies, we demonstrate that SEI achieves state-of-the-art performance in mislabeled data identification, outperforming existing methods while maintaining computational efficiency and implementation simplicity. Our code is available at https://github.com/MedAITech/SEI.
論文本体の取得範囲に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。解説更新：2026-09-29