アーカイブ / Computer Vision
カプセル内視鏡画像の出血を判定し、位置と領域を示すColonNet
ColonNet
ColonNetの原論文から掲載した図です。細部はクリックして拡大できます。
原論文の図の説明を読む
Fig. 1: Architecture of Proposed model
概要
- DenseNet121で出血の有無と位置を囲む矩形を推定し、別のU-Netで領域マスクを作る。
- 著者らの表では判定の正解率は、淡い出血を含む49枚のTest set 1で0.4898、515枚のTest set 2で0.8175だった。
- 小さな出血や複数箇所の表示に課題があり、導入先の画像で見逃しと医師の確認時間を検証する必要がある。
補足：編集した模式図で仕組みを確認する
VISUAL EXPLAINER
図でつかむ、ColonNetの仕組み
- 01内視鏡画像
- 02DenseNet121の特徴抽出
- 03判定・矩形推定／U-Net分割
- 04出血判定・矩形・マスク
原論文の説明をもとにした模式図です。処理の細部は省略しています。
研究の背景
ColonNetは、カプセル内視鏡の動画から取り出した画像について、消化管出血の有無と場所を示す手法である。カプセル内視鏡は、飲み込んだ小型カメラで消化管内を撮影する検査を指す。
著者らによると、一回の動画は約5万7000～10万フレームに及び、専門医が順に確認するには約2～3時間かかる。大量の画像から淡い出血や小さな出血を見つける作業を支えるため、候補箇所を示すことに意味がある。
手法
入力は動画から切り出した画像である。224×224画素の画像をDenseNet121に通し、色や形など判断に使う情報を数値化した「特徴」を取り出す。その特徴を二つの経路に渡し、一方で出血の有無、もう一方で候補箇所を囲む矩形を推定する。
別の枝ではU-Netが画像を縮小して情報を集め、拡大しながら細部を復元する。出力する領域マスクは、出血と推定した画素を示す画像である。例えば赤い斑点が写る一枚から、判定、斑点を囲む矩形、形に沿うマスクを得る。学習時は出血画像で矩形推定を先に学習し、判定の学習ではDenseNet121と矩形推定側の重みを固定する。U-Netは別に学習する。
新規性
著者らの提案は、出血の有無、位置を囲む矩形、画素単位の領域マスクを、DenseNet121とU-Netを組み合わせた構成から得る点にある。判定結果に加えて、医師が画像上の候補箇所を確かめるための表示を用意できる。
矩形推定、判定、領域分割は順に、または別々に学習する。確認できた本文の範囲では、この構成自体の効果を切り分けた比較結果は示されていない。
従来手法との違い
著者らは画像特徴を取り出す部分にVGG19、ResNet、DenseNetを試した。判定ではVGG19とResNetがわずかに良く、矩形による検出ではDenseNetが良かったとして、DenseNetを選んだ。各方式の比較数値は示されていない。
CLAHEという局所的な明暗補正や、画像の形を変える膨張・収縮処理も試したが、淡い出血の情報が失われ、誤判定につながったと報告する。この試行結果が別の撮影条件にも当てはまるかは未確認である。
実験結果
著者らはMISAHUBのAuto-WCBleedGen Challenge Version V2を用いた。学習用の出血・非出血画像2618枚を8対2で学習と検証に分けた。Test set 1は淡く、判別しにくい出血を含む49枚、Test set 2は出血領域の大きさが異なる515枚である。
著者らの表では、Test set 1と2の順に、判定のAccuracy（正解率）が0.4898と0.8175、矩形検出のIoU（予測領域と正解領域の重なり）が0.1254と0.6315、領域分割のDice係数（重なりを測る指標）が0.1767と0.6833だった。75チーム中で最高成績と述べるが、順位の評価条件や他チームの数値は本文で確認できない。
応用の可能性
編集上の応用案 · 論文が実証した用途とは区別しています。
編集上の応用案：カプセル内視鏡動画から切り出した画像を読影支援画面に入れ、出血判定、候補を囲む矩形、領域マスクを元画像と並べて表示する。医師が候補画像を開き、周辺のフレームも見て判断する流れを想定する。
導入先のカプセル内視鏡画像と、出血の有無、位置の矩形、領域マスクの正解ラベルが必要になる。MISAHUBの学習画像を出発点とし、導入先の画像で調整と検証を行う案であり、読影成績の改善は仮説である。
応用先の候補からNauhに相談できます。
導入時の検証
導入時の検証案 · 対象データでの再評価が必要です。
導入時の検証案：まずMISAHUB V2の学習画像について、出血有無のラベル、位置を示す矩形、領域マスクを確認する。導入先のカプセル内視鏡からも画像を集め、医師の確認を受けて同じ種類の正解ラベルを付け、画像の違いに応じた調整や再学習の要否を調べる。
基準は、候補提示なしで医師が確認する現行手順とする。学習に使わない患者の画像で、出血の見逃し、矩形とマスクの重なり、医師の確認時間を測る。特に小さな出血と複数箇所の出血を分けて記録する。
限界と課題
著者らは、泡や画像の雑音、周囲の手掛かりの不足が解釈を難しくすると述べる。小さな出血の検出が難しく、複数の出血箇所がある画像では最大の領域だけを矩形で囲むことがあるとも報告した。
編集上の検証事項は、患者や撮影機器が異なる画像での見逃しと、複数箇所を示せるかである。患者単位でのデータ分割、医師の読影時間への影響、判定結果を臨床でどう扱うかは、確認できた本文の範囲では分からない。
出典
元のタイトル・要旨を確認する（英語）
ColonNet: A Hybrid Of DenseNet121 And U-NET Model For Detection And Segmentation Of GI Bleeding
This study presents an integrated deep learning model for automatic detection and classification of Gastrointestinal bleeding in the frames extracted from Wireless Capsule Endoscopy (WCE) videos. The dataset has been released as part of Auto-WCBleedGen Challenge Version V2 hosted by the MISAHUB team. Our model attained the highest performance among 75 teams that took part in this competition. It aims to efficiently utilizes CNN based model i.e. DenseNet and UNet to detect and segment bleeding and non-bleeding areas in the real-world complex dataset. The model achieves an impressive overall accuracy of 80% which would surely help a skilled doctor to carry out further diagnostics.
論文本体の取得範囲に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。解説更新：2026-10-01