表示
超・人工知能研究所 Super AI Research Lab トップへ超・人工知能研究所AI Research Lab / ぱそ太郎工事中

since
平成38年9月29日

← 検索結果に戻る

手・手首のX線画像から7つの骨を切り出し、骨粗鬆症を予測する手法

Segmentation-for-Classification and Self-Supervised Learning

保存した記事を見るこのブラウザに保存します。無料会員で端末間の同期・フォルダ整理
原論文の図

Segmentation-for-Classification and Self-Supervised Learningの原論文から掲載した図です。細部はクリックして拡大できます。

原論文の図の説明を読む

Figure 1: Illustration of framing a hand X-ray osteoporosis screening problem through (a) segmentation, (b) self-supervised pre-training, and (c) downstream classification task.

出典:Segmentation-for-Classification and Self-Supervised Learning / arXiv ↗

概要

  • 手・手首のX線画像から尺骨、橈骨、5本の中手骨を切り出し、骨別の予測確率を平均して個人単位の判定を出す。
  • ラベルなしの骨画像で特徴を事前学習し、DXA由来の判定ラベルで最終分類層を学習する。
  • DXAと対応する192人の画像を分類に用いたが、確認できた本文の範囲では分類成績の数値は確認できない。
補足:編集した模式図で仕組みを確認する

VISUAL EXPLAINER

図でつかむ、Segmentation-for-Classification and Self-Supervised Learningの仕組み

左から右へ読む
  1. 01手・手首X線画像
  2. 027骨の領域分割
  3. 03骨画像で事前学習
  4. 04骨別確率の平均
  5. 05個人の予測

原論文の説明をもとにした模式図です。処理の細部は省略しています。

研究の背景

骨粗鬆症は骨密度や骨量が減り、骨折しやすくなる病気である。骨密度を測る標準的な検査であるDXAは、二種類のX線を使う。著者らは、この検査を受けにくい人もいるため、手・手首のX線画像から骨粗鬆症を予測する方法を調べた。

手の画像には、第二中手骨の皮質の厚さから求める2MCIという指標がある。ただし寸法の手作業による測定には時間がかかり、この指標だけでは病気の特徴を十分に捉えられない可能性がある。

手法

まず、画素ごとに骨の領域を示す「分割」により、尺骨、橈骨、5本の中手骨の画像を得る。分割器は複数の候補と重みを出し、「最適輸送」という分布間の隔たりを測る枠組みで、予測と領域ラベルを近づけるよう学習する。学習用の領域ラベルは、専門家の助言を受け、画像分割モデルSAMへの手動指示を使って作成した。

次に、各骨画像の見え方を変えた画像から共通の特徴を学ぶ。骨粗鬆症ラベルを使わず特徴を学ぶ段階を「自己教師あり事前学習」といい、骨が写るよう各切り出し画像に非ゼロ画素を少なくとも10%含める。その後、事前学習済みの特徴抽出部を固定し、DXA由来のラベルで最終分類層を学習する。骨別のクラス確率を平均し、最も高いクラスを個人の予測とする。

新規性

著者らの提案は、手・手首のX線画像から尺骨、橈骨、5本の中手骨を分割し、骨ごとの画像を分類に使う構成にある。分割器は複数の候補とその重みを出し、骨の境界の予測に幅があることを扱う。

さらに、骨がほとんど写らない画像を事前学習に使わないよう、切り出し方を調整した。分割、骨画像による事前学習、個人単位の判定を一連の手順として組み合わせている。

従来手法との違い

手のX線画像を使う従来の指標には、第二中手骨の皮質の厚さに基づく2MCIがある。著者らの方法では、その寸法を手作業で測る工程に代えて、対象の骨を画像から分割し、分類器へ入力する。

学習方法について著者らは、骨粗鬆症ラベルを使う通常の教師あり学習に対し、骨画像から先に特徴を学ぶ事前学習の利点を述べている。確認できた本文の範囲では比較結果の表がなく、両者の成績差や、2MCIとの直接比較の有無は確認できない。

実験結果

著者らは、DXAの結果と対応付けた192人の手のX線画像を分類に用いた。骨粗鬆症のラベルは、DXAから求めたTスコアがマイナス2.5未満かどうかで定めた。別のラベルなし手X線画像1154枚は、骨の分割器の学習と分類器の事前学習に使った。

著者らは人単位で学習80%、検証10%、試験10%に分け、検証時のマクロF1が最も高いモデルを試験に用いると記している。マクロF1は、各クラスのF1を同じ重みで平均する指標である。確認できた本文の範囲では結果表がなく、分類成績の数値、既存手法との差、分割に失敗した画像での成績は確認できない。

応用の可能性

編集上の応用案 · 論文が実証した用途とは区別しています。

編集上の応用案:整形外科で撮影済みの手・手首X線画像から、DXA検査を検討するための補助情報を表示する。入力は既存画像、出力は個人単位の予測と、判定に使えた骨領域の一覧とし、医師が画像と併せて確認する流れを想定する。

準備するデータは、専門家が確認した骨領域ラベル、患者ごとのDXA由来の判定ラベル、ラベルなしの手のX線画像である。追加の撮影センサーは想定せず、施設の画像条件に合わせて分割器と分類器を調整する。診療上の効果は、この案とは別に検証が必要である。

応用先の候補からNauhに相談できます。

導入時の検証

導入時の検証案 · 対象データでの再評価が必要です。

導入時の検証案:同じ患者の手・手首X線画像とDXA由来の判定を対応付け、患者単位で学習用と評価用を分ける。専門家が確認した骨領域ラベルで分割器を調整し、ラベルなし画像で特徴を事前学習した後、DXAラベルで分類層を調整する。画像以外の追加センサーは想定しない。

比較の基準には、同じ評価用患者を使う、事前学習なしの分類器を置く。マクロF1、骨粗鬆症の見逃し件数、必要な骨領域を取り出せなかった件数を記録する。7つの骨がそろわない画像の判定方法を事前に定め、DXAの代用ではなく検査を検討する補助情報として評価する。

限界と課題

著者らは、手の置き方や装身具、医療器具の影響で、対象とする7つの骨画像をすべて得られない例があったと記している。一方、示された個人単位の判定式は7つの骨別確率の平均であり、欠けた場合の集約方法は確認できた本文からは分からない。

編集上の検証事項は、骨が欠けた画像の扱い、施設や撮影条件が変わったときの成績、DXA由来の判定との食い違い方である。確認できた本文の範囲では分類成績の数値と外部施設での評価を確認できず、診療での有用性は判断できない。

研究内容と応用案に基づく分類です。業界での導入実績を示すものではありません。

出典

元のタイトル・要旨を確認する(英語)

Osteoporosis Prediction from Hand X-ray Images Using Segmentation-for-Classification and Self-Supervised Learning

Osteoporosis is a widespread and chronic metabolic bone disease that often remains undiagnosed and untreated due to limited access to bone mineral density (BMD) tests like Dual-energy X-ray absorptiometry (DXA). In response to this challenge, current advancements are pivoting towards detecting osteoporosis by examining alternative indicators from peripheral bone areas, with the goal of increasing screening rates without added expenses or time. In this paper, we present a method to predict osteoporosis using hand and wrist X-ray images, which are both widely accessible and affordable, though their link to DXA-based data is not thoroughly explored. We employ a sophisticated image segmentation model that utilizes a mixture of probabilistic U-Net decoders, specifically designed to capture predictive uncertainty in the segmentation of the ulna, radius, and metacarpal bones. This model is formulated as an optimal transport (OT) problem, enabling it to handle the inherent uncertainties in image segmentation more effectively. Further, we adopt a self-supervised learning (SSL) approach to extract meaningful representations without the need for explicit labels, and move on to classify osteoporosis in a supervised manner. Our method is evaluated on a dataset with 192 individuals, cross-referencing their verified osteoporosis conditions against the standard DXA test. With a notable classification score, this integration of uncertainty-aware segmentation and self-supervised learning represents a pioneering effort in leveraging vision-based techniques for the early detection of osteoporosis from peripheral skeletal sites.

論文本体の取得範囲に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。解説更新:2026-10-01