表示
超・人工知能研究所 Super AI Research Lab トップへ超・人工知能研究所AI Research Lab / ぱそ太郎工事中

since
平成38年9月29日

← 検索結果に戻る

参照頻度で画像の走査順を変える水中画像補正「RD-UIE」

RD-UIE

保存した記事を見るこのブラウザに保存します。無料会員で端末間の同期・フォルダ整理
原論文の図

RD-UIEの原論文から掲載した図です。細部はクリックして拡大できます。

原論文の図の説明を読む

Figure 1. Underwater images contain localized semantic structures, global repetitive patterns and flat low-frequency backgrounds. While fixed scanning ignores these spatial heterogeneities, our relation-driven scan adaptively prioritizes structurally and semantically important regions, enabling efficient and context-aware state propagation.

出典:RD-UIE / arXiv ↗

概要

  • RD-UIEは、学習した参照位置の選択頻度でMambaの走査順を変え、入力依存の畳み込みと組み合わせて水中画像を補正する。
  • 著者らの参照画像付き三集合では、平均PSNRが27.54 dBで、WMambaの26.99 dBを0.55 dB上回った。
  • 入力の題名・要約はVRS-UIEを記す一方、確認できた本文はRD-UIEを扱う。両者の方式と実験結果は混同できない。
補足:編集した模式図で仕組みを確認する

VISUAL EXPLAINER

図でつかむ、RD-UIEの仕組み

左から右へ読む
  1. 01水中画像
  2. 02画像特徴の抽出
  3. 03参照頻度で走査
  4. 04局所特徴と段階間融合
  5. 05補正画像

原論文の説明をもとにした模式図です。処理の細部は省略しています。

研究の背景

RD-UIEは、水中で撮影した画像の色の偏りや細部の見えにくさを補正する手法だ。水中では光の波長によって減衰の仕方が異なり、生物の観察などに使う画像でも色や内容が損なわれる。

著者らは、一様に見える広い水域と、小さくても重要な魚の輪郭や反復模様が同じ画像に含まれる点に着目した。特徴を決まった順番で読む方式では、場所ごとに異なる構造上の重要性を反映しにくいという問題設定である。

手法

画像を縮小しながら特徴を取り出し、復元する構造で補正画像を作る。中核のDS-Mambaは、特徴上の各位置から参照先へのずれを学習し、各位置が選ばれた頻度で特徴を並べ替える。Mambaは特徴を列として順に読み、内部に保持する情報を更新する仕組みだ。例えば輪郭上の位置が多く選ばれれば、その頻度が走査順に反映される。

同じ処理ブロックの別の枝では、idConvが入力の特徴に応じて畳み込みの重みを変える。畳み込みとは、近くの画素の情報をまとめる計算を指す。二つの枝の結果を合わせ、CABで色の成分に対応する特徴を調整する。さらにCFBが、細部を含む浅い段階と、広い文脈を含む深い段階の特徴を結び、画像を復元する。

新規性

著者らの主張する新規性は、学習した参照位置の選択頻度に応じて、Mambaが画像特徴を読む順序を動的に並べ替える点にある。画像内の構造的な関係を走査順へ反映し、重要な領域から情報を伝えることを狙う。

この走査を入力依存の畳み込みと二つの枝で組み合わせ、CFBで異なる段階の特徴を融合する。提案は走査順の変更を含む補正モデル全体であり、各部品だけの効果は確認できた本文の範囲では切り分けられない。

従来手法との違い

著者らは、従来のMamba系手法で使われる固定の走査順が、水中画像の局所的な輪郭や離れた領域間の関係に十分適応しにくいと説明する。RD-UIEでは、参照頻度による並べ替えに加え、入力に応じて重みが変わる畳み込みで局所情報を処理する。

数値比較の対象にはWMambaを含む六手法がある。参照画像付きの三つのテスト集合ではRD-UIEの平均PSNRがWMambaを上回るが、この差だけから各構成要素の寄与や実際の処理速度は判断できない。

実験結果

著者らはUIEBの830組とLSUIの3,300組の対応画像を学習に使い、画像を256×256にそろえた。参照画像付きのTestU、TestL、TestEはそれぞれ60組、975組、481組。対応画像との一致をPSNR、構造の近さをSSIM、画素値の二乗誤差をMSEで測った。

三集合の表記上の平均は、RD-UIEがPSNR 27.54 dB、SSIM 0.897、MSE 56.87で、WMambaは順に26.99 dB、0.878、58.27だった。PSNR差は0.55 dB。参照画像のないU45、C60、Color7では、著者らの表で平均UCIQEが0.603、UIQMが3.079、NIQEが5.347だった。

応用の可能性

編集上の応用案 · 論文が実証した用途とは区別しています。

編集上の応用案:海中調査の静止画像を補正し、魚やサンゴを担当者が確認するための閲覧画像を作る。入力は撮影した原画像、出力は補正画像とし、担当者が両者を並べて色と輪郭を確認してから利用する。

対象海域の原画像と、それぞれに対応する望ましい補正画像を学習データとして用意する必要がある。この対応画像が教師ラベルとなる。撮影画像以外の追加センサーは想定せず、現場の水質や照明に合うよう調整する。見やすさの向上は検証すべき仮説である。

応用先の候補からNauhに相談できます。

導入時の検証

導入時の検証案 · 対象データでの再評価が必要です。

導入時の検証案:対象海域で撮った補正前の静止画像と、人が選んだ対応する目標画像を集め、学習用と評価用に分ける。目標画像が必要な教師ラベルであり、追加センサーは前提としない。撮影条件の違いを含む現場画像でモデルを調整する。

同じ評価画像に未補正画像、WMamba、RD-UIEを適用して比較する。目標画像がある分ではPSNR、SSIM、MSEを測り、担当者が原画像と照合して魚の輪郭や背景の色も確認する。同じ入力条件で処理時間を記録し、画質と運用上の速さを別々に判定する。

限界と課題

著者らが明示するのは、従来の固定走査が水中画像の構造や領域間の関係に適応しにくいという課題である。これはRD-UIE自体の失敗条件を示した記述ではない。参照画像のない評価では、平均UCIQEは別方式と同値で、平均NIQEはWMambaより高く、最良ではない。

編集上の検証事項:入力の題名と要約はVRS-UIEおよびWMamba比で平均0.89 dBの改善を記す一方、確認できた本文はRD-UIEおよび平均0.55 dBの改善を記す。両者の対応関係が不明なため、本稿の方式説明と実験値は本文のRD-UIEに限って帰属させる。

研究内容と応用案に基づく分類です。業界での導入実績を示すものではありません。

出典

元のタイトル・要旨を確認する(英語)

VRS-UIE: Value-Driven Reordering Scanning for Underwater Image Enhancement

State Space Models (SSMs) have emerged as a promising backbone for vision tasks due to their linear complexity and global receptive field. However, in the context of Underwater Image Enhancement (UIE), the standard sequential scanning mechanism is fundamentally challenged by the unique statistical distribution characteristics of underwater scenes. The predominance of large-portion, homogeneous but useless oceanic backgrounds can dilute the feature representation responses of sparse yet valuable targets, thereby impeding effective state propagation and compromising the model's ability to preserve both local semantics and global structure. To address this limitation, we propose a novel Value-Driven Reordering Scanning framework for UIE, termed VRS-UIE. Its core innovation is a Multi-Granularity Value Guidance Learning (MVGL) module that generates a pixel-aligned value map to dynamically reorder the SSM's scanning sequence. This prioritizes informative regions to facilitate the long-range state propagation of salient features. Building upon the MVGL, we design a Mamba-Conv Mixer (MCM) block that synergistically integrates priority-driven global sequencing with dynamically adjusted local convolutions, thereby effectively modeling both large-portion oceanic backgrounds and high-value semantic targets. A Cross-Feature Bridge (CFB) further refines multi-level feature fusion. Extensive experiments demonstrate that our VRS-UIE framework sets a new state-of-the-art, delivering superior enhancement performance (surpassing WMamba by 0.89 dB on average) by effectively suppressing water bias and preserving structural and color fidelity. Furthermore, by incorporating efficient convolutional operators and resolution rescaling, we construct a light-weight yet effective scheme, VRS-UIE-S, suitable for real-time UIE applications.

論文本体の取得範囲に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。解説更新:2026-10-01