アーカイブ / Computer Vision
霧の濃さが場所ごとに違う画像を、領域単位で復元するAPI
API
APIの原論文から掲載した図です。細部はクリックして拡大できます。
原論文の図の説明を読む
Figure 1 : Visual comparison of dehazing results on real-world images. Unlike synthetic data, haze in real-world scenes typically exhibits diverse distributions, including dense haze (first row), non-uniform haze (second row), and light haze (third row). Our method produces more realistic and comprehensive dehazing results than previous state-of-the-art approaches.
概要
- AHGは霧の濃さと分布を変えた学習画像を作り、DHRは小領域ごとに復元処理を調整する。
- 著者らの四つの対応画像データセットでの評価では、APIのPSNRとSSIMが表中の比較手法を上回った。
- 実務適用には、学習・評価画像の分離を確認し、対象カメラで細部や色の変化を検証する必要がある。
補足：編集した模式図で仕組みを確認する
VISUAL EXPLAINER
図でつかむ、APIの仕組み
- 01霧画像
- 02前段の領域補正
- 03U-Net処理
- 04後段の領域補正
- 05復元画像
原論文の説明をもとにした模式図です。処理の細部は省略しています。
研究の背景
APIは、霧で見えにくくなった一枚の画像を復元する手法だ。霧は画像の明暗差を弱め、色も変えるため、人による確認や物体検出などの後続作業に影響する。
実際の場所で、同じ場面の霧あり画像と鮮明画像を大量に集めるのは難しい。著者らは、合成した霧と実際の霧の違いに加え、濃い霧や部分的な霧が一枚の中に混在することを課題とした。
手法
学習時にはAHGが、対応する霧画像と鮮明画像から場所ごとの霧の濃さを表すマップを推定する。二つのマップを混ぜ、なだらかな模様を作るPerlinノイズで地域差を加えて、追加の霧画像を生成する。例えば、同じ鮮明画像に濃さや偏りが異なる霧を重ねた学習例を作る。
復元を担うDHRは、画像の特徴をパッチと呼ぶ小領域に分け、U-Netの前後で補正する。U-Netは画像の特徴を縮小・拡大しながら処理する網だ。各領域では位置と周波数の特徴を調べ、元の特徴と補正結果を混ぜる割合を調整する。学習には、鮮明画像に近づけ、複数の霧画像から遠ざけるMNCD損失も使う。
新規性
著者らの主張は、霧の濃さを変えた学習画像を作るAHGと、画像内の小領域ごとに処理を調整するDHRを、一つの復元手法に組み合わせた点にある。実画像の学習例が少なく、霧の分布も一様ではないという二つの課題に対応する。
さらにMNCD損失を導入し、複数の霧画像を比較対象として使う。復元画像と鮮明画像の関係を、画素の位置に関わる特徴と、模様の細かさに関わる周波数の特徴の両方で学習する。
従来手法との違い
比較表には、GridDehazeNetやDEANetなど、著者らのデータで公式実装を使って学習した手法が含まれる。RIDCP、CORUN、PTTD、IPCは公開済みの学習済み重みを追加調整せずに評価しており、全手法の学習条件が同じではない。
APIは学習時にAHGで霧画像を増やし、復元時にはU-Netという画像処理網の前後に小領域ごとの補正を置く。比較表の差は、この学習データの追加と処理構造を合わせた結果として読む必要がある。
実験結果
著者らは、対応する鮮明画像があるDense-Haze、NH-Haze、O-Haze、I-Hazeで評価した。APIのPSNRは順に16.184、20.652、25.960、23.158、SSIMは0.720、0.803、0.954、0.934で、表中の比較手法をいずれも上回る。PSNRは画素値の近さ、SSIMは画像構造の似かよりを測る指標だ。
四データセット平均の部品除去実験では、基準構成のPSNR 19.322、SSIM 0.814に対し、全構成は21.488、0.852だった。Fattal、RTTS、URHIでは著者らが視覚比較を示した。確認できた本文の範囲では、学習用と評価用の画像の具体的な分割は分からない。
応用の可能性
編集上の応用案 · 論文が実証した用途とは区別しています。
編集上の応用案：屋外設備の定点カメラ画像を、点検担当者が確認する前に復元する。入力は霧のある撮影画像、出力は原画像と並べて確認する復元画像とし、設備の状態を自動判定する用途とは分ける。
対象カメラで撮った霧画像と、同じ場面に対応する鮮明画像の組を学習用に集める。霧の濃淡と部分的な霧を区別するラベルを付け、現場画像に合わせて調整する。必要な撮影源は定点カメラとし、輪郭や色の変化は担当者が確認する。
応用先の候補からNauhに相談できます。
導入時の検証
導入時の検証案 · 対象データでの再評価が必要です。
導入時の検証案：対象カメラの霧画像と、同じ場面に対応する鮮明画像を集め、学習用と評価用に分ける。評価用には霧の濃淡や部分的な霧を示すラベルを付ける。追加センサーは使わず、AHGを含む学習手順で対象画像に合わせて調整する。
補正前の画像と、同じ学習画像で作った単純な復元モデルを基準にする。保管した評価画像でPSNRとSSIMを測り、霧の区分別にも集計する。担当者には原画像と復元画像を並べて示し、輪郭の欠落や不自然な色の件数を記録する。
限界と課題
確認できた本文の範囲では、著者らは明示的な限界を列挙していない。学習と評価の両方に四つの対応画像データセットを使ったと記す一方、画像をどう分割したかは示されていない。鮮明画像との対がない三つのデータセットでは視覚比較を示している。
編集上の検証事項は、学習画像と評価画像の分離、別のカメラや気象条件での再現性、復元による細部や色の変化だ。また、部品除去実験の全構成のSSIMは表2で0.852、MNCDの重みを調べた表3では同じPSNR 21.488の行が0.849となっており、差の理由を確認したい。
出典
元のタイトル・要旨を確認する（英語）
API: Empowering Generalizable Real-World Image Dehazing via Adaptive Patch Importance Learning
Real-world image dehazing is a fundamental yet challenging task in low-level vision. Existing learning-based methods often suffer from significant performance degradation when applied to complex real-world hazy scenes, primarily due to limited training data and the intrinsic complexity of haze density distributions.To address these challenges, we introduce a novel Adaptive Patch Importance-aware (API) framework for generalizable real-world image dehazing. Specifically, our framework consists of an Automatic Haze Generation (AHG) module and a Density-aware Haze Removal (DHR) module. AHG provides a hybrid data augmentation strategy by generating realistic and diverse hazy images as additional high-quality training data. DHR considers hazy regions with varying haze density distributions for generalizable real-world image dehazing in an adaptive patch importance-aware manner. To alleviate the ambiguity of the dehazed image details, we further introduce a new Multi-Negative Contrastive Dehazing (MNCD) loss, which fully utilizes information from multiple negative samples across both spatial and frequency domains. Extensive experiments demonstrate that our framework achieves state-of-the-art performance across multiple real-world benchmarks, delivering strong results in both quantitative metrics and qualitative visual quality, and exhibiting robust generalization across diverse haze distributions.
論文本体の取得範囲に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。解説更新：2026-10-01