アーカイブ / Computer Vision
衛星画像の特徴学習に地表距離の順位を加えるGeoRank
GeoRank
GeoRankの原論文から掲載した図です。細部はクリックして拡大できます。
原論文の図の説明を読む
Figure 1 : Overview of the proposed plug-in regularization term. Left : A contrastive SSL framework applying contrastive loss L SSL L_{\text{SSL}} to the representation space. Right : The proposed regularization loss term L RankReg L_{\text{RankReg}} for an image x i x_{i} in B B . The order (rank) of distances on the Earth’s surface space R i d \text{R}^{\text{d}}_{i} (measured by Haversine distance d d ) is used as a label for the order (rank) of distances in representation space R i s \text{R}^{\text{s}}_{i} . The hyperparameter m i m_{i} enables the loss when the distance of two locations on Earth is within the radius d max d_{\text{max}} . For simplicity, we denote the full vector 𝐦 i \mathbf{m}_{i} instead of individual entries m i j m_{ij} .
概要
- GeoRankは、衛星画像の撮影地点間の地表距離を近い順に並べ、その順位を画像特徴の類似順位へ反映する。
- 著者らのBEN-V2事前学習・k近傍法評価では、EuroSATのAcc-macが85.09％で、MoCoV2基準値の82.42％を上回った。
- 学習地域と試験地域が異なるS4A-tilesでは基準値を下回ったため、導入先でも地域を分けた評価が必要になる。
補足：編集した模式図で仕組みを確認する
VISUAL EXPLAINER
図でつかむ、GeoRankの仕組み
- 01画像と緯度経度
- 02地表距離と特徴を算出
- 03二つの順位を照合
- 04画像特徴を出力
原論文の説明をもとにした模式図です。処理の細部は省略しています。
研究の背景
GeoRankは、位置情報が付いた多波長衛星画像から、分類などに使う画像特徴を学ぶ方法である。自己教師あり学習とは、画像ごとの正解ラベルを使わず、データ自体から学習の手掛かりを作る方法をいう。未ラベル画像を事前学習に使える点が、衛星画像の利用で重要になる。
衛星画像には撮影地点の座標が付く一方、地域や撮影時期によって見え方が変わる。著者らは、画像同士の関係を学ぶ際に地表上の位置関係も使い、後続の課題に使える特徴を得ようとした。
手法
入力は、各画像に緯度・経度が付いた未ラベルの多波長衛星画像である。土台となる対照型自己教師あり学習は、同じ画像から作った異なる見え方などを手掛かりに特徴を学ぶ。GeoRankは、複数画像を一度に処理する「バッチ」の中で、座標から地球表面に沿った距離を計算する。
各画像を起点に他の画像を地表距離の近い順に並べ、画像を数値で表した「特徴」の似ている順序と照合する。例えば地点Aが地点Bより近ければ、Aの画像特徴もより似るよう、順位のずれを学習時の損失に加える。指定した半径より遠い地点にはこの条件を適用せず、学習後の特徴を分類などに渡す。
新規性
GeoRankの新しさは、撮影地点間の球面上の距離を近い順に並べ、その順位を画像特徴の類似順位へ反映する正則化項にある。正則化項とは、元の学習目標に加えて、特徴の並び方を促す条件をいう。
地理的距離の値そのものを画像特徴の距離に合わせる方式と異なり、GeoRankは相対的な順序を使う。著者らは、この項を複数の対照型自己教師あり学習方式に追加できると示している。
従来手法との違い
Ayushらの方式は、座標を事前にクラスタへ分け、どのクラスタに属するかを学習する。GeoRankは事前のクラスタ分けを使わず、地表距離から求めた順位を学習中に照合する。GeoBasicは地表距離の値と画像特徴間の距離を直接合わせる、著者らの比較用方式である。
BEN-V2で事前学習した表では、GeoRankはMoCoV2の基準値を七つの評価列のうち六つで上回った。ただしS4A-tilesでは35.17％で、基準値の35.42％を下回る。比較できる範囲は、表に示されたデータと評価条件に限られる。
実験結果
著者らはBEN-V2またはSSL4EO-S12で事前学習し、分類と領域分割の課題を評価した。単一ラベル分類と領域分割にはクラス別正解率のマクロ平均（Acc-mac）、複数ラベル分類にはクラス別平均適合率のマクロ平均（AP-mac）を用いた。報告値は異なる初期値による五回の平均である。
BEN-V2事前学習後、近い特徴から予測するk近傍法で評価した表では、EuroSATのAcc-macはGeoRankが85.09％、MoCoV2基準値が82.42％だった。BEN-V2のAP-macは59.19％対58.14％、S4A-tilesのAP-macは35.17％対35.42％である。いずれも著者らが報告した、この条件での結果である。
応用の可能性
編集上の応用案 · 論文が実証した用途とは区別しています。
編集上の応用案：農地の土地被覆を衛星画像から分類する業務で、分類器に渡す画像特徴の事前学習にGeoRankを試す。入力には、緯度・経度が付いた対象地域の未ラベルSentinel-2多波長画像を使う。多波長画像は、複数の波長帯で地表を記録した画像である。
学習した特徴を使って分類器を作り、現地調査などで土地被覆ラベルを付けた別の画像で評価する。対象地域の画像、座標、判定ラベルの確保と、撮影時期に合う前処理が必要になる。この業務で精度が上がるかは未検証である。
応用先の候補からNauhに相談できます。
導入時の検証
導入時の検証案 · 対象データでの再評価が必要です。
導入時の検証案：対象業務と同じ取得条件のSentinel-2多波長画像を集め、各画像の緯度・経度を確認する。未ラベル画像と座標で事前学習し、土地被覆を現地確認などで判定したラベル付き画像を評価用に分ける。画像の前処理とGeoRankを適用する半径は、導入先の条件に合わせて設定する。
同じ学習画像、学習方式、評価分割で、GeoRankを加えた場合と加えない場合を比較する。地域を混ぜた分割に加えて地域を分けた分割でも、課題に合うAcc-macまたはAP-macを測る。座標が欠けた画像数と地域別の成績差も記録し、利用地域で効果が再現するか判断する。
限界と課題
著者らは、S4A-tilesでは学習画像がスペイン、試験画像がフランスに由来し、地理的な正則化の利点が明確でないと述べる。表でもGeoRankはMoCoV2の基準値を下回った。地域が重ならない条件では、位置に基づく特徴の並びが評価に役立ちにくいというのが著者らの説明である。
編集上の検証事項として、導入先の地域で地理的な近さと画像内容の関係が保たれるかを確かめたい。座標の誤差、撮影時期、対象地域の分け方、順位を適用する半径が成績に与える影響も、この結果だけでは判断できない。
出典
元のタイトル・要旨を確認する（英語）
Rank-based Geographical Regularization: Revisiting Contrastive Self-Supervised Learning for Multispectral Remote Sensing Imagery
Self-supervised learning (SSL) has become a powerful paradigm for learning from large, unlabeled datasets, particularly in computer vision (CV). However, applying SSL to multispectral remote sensing (RS) images presents unique challenges and opportunities due to the geographical and temporal variability of the data. In this paper, we introduce GeoRank, a novel regularization method for contrastive SSL that improves upon prior techniques by directly optimizing spherical distances to embed geographical relationships into the learned feature space. GeoRank outperforms or matches prior methods that integrate geographical metadata and consistently improves diverse contrastive SSL algorithms (e.g., BYOL, DINO). Beyond this, we present a systematic investigation of key adaptations of contrastive SSL for multispectral RS images, including the effectiveness of data augmentations, the impact of dataset cardinality and image size on performance, and the task dependency of temporal views. Code is available at https://github.com/tomburgert/georank.
論文本体の取得範囲に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。解説更新：2026-10-01