アーカイブ / Computer Vision / Generative AI
将来の脳MRIを予測するProgFormer:全体構造と局所変化を分けて処理
ProgFormer
ProgFormerの原論文から掲載した図です。細部はクリックして拡大できます。
原論文の図の説明を読む
Figure 1: Longitudinal brain MRI prediction paradigms. (a) Latent-space methods encode MRI scan before prediction and decode the predicted representation back to voxel space. (b) Direct volumetric methods use a unified backbone to produce a dense prediction, requiring the same backbone to model brain structure and progression-related changes across spatial scales. (c) ProgFormer retains a coarse pathway that performs the primary volumetric prediction at the patch level, serving a role similar to the unified backbone in (b). A fine pathway then uses the coarse patch representations as spatio-temporal grounding for voxel-level refinement.
概要
- ProgFormerは、過去の脳MRIと年齢などを条件に、将来の三次元MRIをボクセル空間で生成する。
- パッチ単位で全体構造と撮影間の関係を扱い、その情報を参照してパッチ内の細部を補正する。
- ADNIの1枚入力では、ProgFormer-SのPSNRはCounterSynthを上回り、SSIMは下回った。
補足:編集した模式図で仕組みを確認する
VISUAL EXPLAINER
図でつかむ、ProgFormerの仕組み
- 01過去MRI・属性・雑音
- 02パッチの時空間処理
- 03パッチ内の補正
- 04速度で反復更新
- 05将来MRI
原論文の説明をもとにした模式図です。処理の細部は省略しています。
研究の背景
ProgFormerは、過去の脳の構造MRI(磁気共鳴画像)から将来のMRIを予測する方法である。同じ人の脳では多くの構造が撮影間で保たれる一方、疾患に関わる変化は海馬や脳室の周辺など一部に現れる。
全体像が似ていても、小さな境界の移動や画像の濃淡の変化を捉えられるとは限らない。著者らは、個人に固有の脳の形を保ちながら、局所の変化にも対応することを課題に据えた。
手法
入力は過去のMRIと撮影年齢、直近の診断情報、性別、予測対象年齢である。例えば過去に複数回撮影した人の次回画像を予測する場合、粗い経路はMRIと生成途中の画像を小さな立方体のパッチに分ける。同じ撮影時点の位置関係と、同じ位置のパッチが撮影順にどう変わったかを扱う。
細かい経路は、各パッチ内のボクセルを処理し、粗い経路の表現を参照して細部を補正する。両経路は画像を変える方向と量に当たる「速度場」を推定して足し合わせる。学習時は雑音から正解の将来MRIへ向かう変化を教師信号にする。予測時はガウス雑音から始め、推定した速度場に沿って画像を段階的に更新する。
新規性
ProgFormerは、三次元脳MRIを圧縮せず、画像の最小単位であるボクセルの空間で将来像を生成する。パッチ単位で脳全体の構造と撮影間の関係を扱い、その表現をパッチ内の細部を処理する経路に渡す。
両経路の出力を合わせて画像の変化を推定するため、別途学習した画像用オートエンコーダーを必要としない。粗い予測を局所的な補正の手掛かりにする構成が、著者らの提案の中心である。
従来手法との違い
著者らによると、潜在空間を使う既存手法はMRIを圧縮した表現で予測し、画像に復元する。この圧縮と復元が細部の保持に影響し得る。ProgFormerはボクセル空間で直接予測し、別の画像復元工程を置かない。
既存の直接予測手法については、単一の出力経路で全体構造と局所変化を扱うと整理している。ProgFormerはパッチを扱う粗い経路と、パッチ内のボクセルを扱う細かい経路を組み合わせる。ただし、この構成上の違いだけで個々の疾患変化の予測精度は判断できない。
実験結果
著者らはADNI、AIBL、OASISで、過去のMRI1枚から将来像を予測する設定と、過去の画像列から最後の画像を予測する設定を評価した。表の指標はPSNR、SSIM、R-MAEで、SSIMは0~100の尺度で示される。
ADNIの1枚入力では、ProgFormer-SのPSNRは26.39±1.68でCounterSynthの26.19±2.64を上回る一方、SSIMは93.56±2.12で同手法の93.71±1.93を下回った。確認できた本文の範囲では、対象者数、データの分割方法、学習条件の詳細は確認できない。
応用の可能性
編集上の応用案 · 論文が実証した用途とは区別しています。
編集上の応用案:研究用の縦断データから、同一人物の過去の三次元脳MRIと各撮影年齢、直近の診断情報、性別、予測対象年齢を入力し、将来MRIの候補を作る。実際の次回MRIが得られた症例で、候補と実画像を並べて局所変化を点検する用途を想定する。
必要なのは時系列のMRI画像と対応する記録、学習時の正解となる将来画像である。学習用画像の解剖学的な領域ラベルは、本文と同様にSynthSegで作って損失の重みに使う。対象施設の画像に合わせた調整と検証が必要で、この用途での有効性は未確認である。
応用先の候補からNauhに相談できます。
導入時の検証
導入時の検証案 · 対象データでの再評価が必要です。
導入時の検証案:同一人物の過去と将来の三次元脳MRI、撮影年齢、直近の診断情報、性別をそろえた研究用データを用意する。MRI画像が必要な入力であり、別種のセンサーは本文の入力にない。学習用の将来画像にはSynthSegで領域ラベルを作り、損失の重みに使う。
撮影条件と画像の位置合わせを確認し、対象データに合わせて学習・調整する。過去のMRIをそのまま将来像とする基準と比較し、実際の将来MRIに対するPSNR、SSIM、R-MAEを測る。全体の値に加え、関心領域のずれと予測までの期間別の結果を記録する。
限界と課題
確認できた本文の範囲では、著者がProgFormer固有の制約として明示した記述は見当たらない。表の画像一致度は、予測像が臨床判断に使えることや、個人の疾患進行を正確に捉えることを直接示していない。
編集上の検証事項は、撮影条件が異なる画像への適用、海馬などの局所変化の再現、予測までの期間による誤差である。学習時の損失にはSynthSegによる領域ラベルを用いるため、ラベルの品質や領域ごとの重みが結果に与える影響も確かめる必要がある。
出典
元のタイトル・要旨を確認する(英語)
ProgFormer: Hierarchical Voxel Diffusion Transformer for Longitudinal Brain MRI Prediction
Predicting future structural MRI of a brain is challenging because longitudinal changes are often subtle and confined to specific anatomical regions, while most subject-specific brain structure remains stable over time. An effective model should therefore preserve global brain structural consistency while remaining sensitive to fine-grained disease progression. Existing latent-space-based methods improve computational efficiency, but suffer from information loss during their compression-reconstruction procedure. In contrast, direct voxel-space methods avoid latent reconstruction but commonly use a unified prediction pathway to model brain structure and progression-related changes. Subtle local changes may therefore be overshadowed by the dominant stable brain structure. To address these challenges, we propose ProgFormer, a hierarchical voxel-space Diffusion Transformer for longitudinal brain MRI prediction. ProgFormer uses a coarse pathway to perform the primary volumetric prediction from 3D patch tokens. This pathway models overall brain structure and longitudinal context. The fine pathway then uses the coarse representations as spatio-temporal grounding for voxel-level refinement within individual patches. The two pathways jointly estimate a velocity field directly in voxel space through conditional flow matching, enabling end-to-end prediction without a separately learned image autoencoder. The predicted future scan is then generated from Gaussian noise by integrating the estimated velocity field over a sequence of Euler steps. Extensive experimental results on three widely used benchmarks, ADNI, AIBL, and OASIS, under both pairwise and trajectory settings demonstrate favourable performance compared against several state-of-the-art methods.
論文本体の取得範囲に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。解説更新:2026-10-01




