アーカイブ / Computer Vision
霧の道路画像を除霧して車両を検出するYOLO-Vehicle-Pro
YOLO-Vehicle-Pro
YOLO-Vehicle-Proの原論文から掲載した図です。細部はクリックして拡大できます。
原論文の図の説明を読む
Fig. 1 : Weather condition challenges in autonomous driving scenarios. (a) Clear weather environment (Scene a) and (b) hazy environment (Scene b), where low visibility in hazy conditions leads to reduced image contrast and blurred object contours.
概要
- YOLO-Vehicleは道路画像と交通関連の文章から得た特徴を合わせ、対象の種類と位置を検出する。
- YOLO-Vehicle-Proは画像特徴の抽出前に除霧部を加え、霧で見えにくい道路画像を対象とする。
- 著者らはFoggy CityscapesでmAP@50を82.3%、43 FPSと報告するが、確認できた本文からは比較手法との差や検出用正解データの詳細を判断できない。
補足:編集した模式図で仕組みを確認する
VISUAL EXPLAINER
図でつかむ、YOLO-Vehicle-Proの仕組み
- 01霧の道路画像と文章
- 02画像の除霧
- 03画像と文章の特徴統合
- 04車両の種類と位置
原論文の説明をもとにした模式図です。処理の細部は省略しています。
研究の背景
YOLO-Vehicle-Proは、霧で見えにくい道路画像から車両などの位置と種類を検出する手法である。物体検出とは、画像内の対象を見つけ、その範囲を枠で示す処理を指す。
運転時の判断に検出結果を使うには、見落としだけでなく処理にかかる時間も問題になる。著者らは、霧によって画像の濃淡の差が弱まり輪郭がぼやけることを課題とし、画像と文章を使う検出器、除霧処理、車載側とクラウド側の計算分担を提案した。
手法
YOLO-Vehicle-Proは、霧画像をまず除霧部に通し、その後で画像と文章から特徴を抽出する。特徴とは、検出の手がかりになる数値表現である。画像側はYOLOv8を使って複数の大きさの特徴を取り出し、文章側は交通関連の記述を数値表現に変える。例えば「赤いセダン」という記述と道路画像を入力する。
両方の特徴を対応づけて統合し、検出部が対象の有無、種類、画像内の位置を示す枠を出す。除霧部は画像内の位置や特徴の種類に応じて注目する箇所を調整する。提案されたシステム構成では車載側が撮影と初期処理を担い、霧など複雑な状況では計算の一部をクラウド側へ移す。
新規性
YOLO-Vehicleは、道路画像の特徴と車両に関する文章の特徴を合わせて検出する。著者らは、異なる大きさの対象を扱う画像特徴の抽出と、交通分野の文章で調整した文章特徴の抽出を組み合わせた。
YOLO-Vehicle-Proは、その画像特徴抽出の前に除霧処理を加える。除霧部では、画像内の位置と特徴の種類に応じて注目する箇所を調整し、霧で見えにくい画像を後段の検出に渡す。
従来手法との違い
著者らが実験の比較対象として挙げるのは、Edge YOLO、YOLOv6、YOLOv8、YOLO-Worldである。YOLO-Vehicle自体はYOLOv8を画像特徴の抽出に使い、別に抽出した文章特徴を合わせて検出する構成を取る。
YOLO-Vehicle-Proでは、霧画像に対して画像特徴を取り出す前に除霧部が働く。確認できた本文の範囲では比較結果の表がなく、挙げられた各手法に対する精度や速度の差は数値で判断できない。
実験結果
著者らはKITTIでYOLO-Vehicle-v1sのaccuracyを92.1%、検出速度を226 FPS、推論時間を12ミリ秒と報告する。FPSは1秒当たりに処理する画像数である。ただし、accuracyの集計方法と、速度・推論時間それぞれの測定条件は確認できた本文の範囲では分からない。
霧画像については、Foggy CityscapesでYOLO-Vehicle-ProのmAP@50を82.3%、検出速度を43 FPSと報告する。mAP@50は予測枠と正解枠の重なりが50%以上という基準で集計する検出指標である。データセット表にはFoggy Cityscapesの注釈種別が「Image Dehaze」とあり、検出評価に用いた正解データの詳細は確認できない。
応用の可能性
編集上の応用案 · 論文が実証した用途とは区別しています。
編集上の応用案:霧が出やすい道路区間の記録映像を、車両の見落としがないか点検する。道路画像と「大型貨物車」など対象を表す文章を入力し、車両の種類と位置を示す枠を点検担当者に提示する。
対象区間の晴天・霧天画像、車両の正解枠と種類のラベル、文章と画像の対応例を用意して調整する。除霧部の調整には霧画像と鮮明画像も必要になる。記録映像での点検は応用案であり、この用途で見落としが減るかは別途確かめる。
導入時の検証
導入時の検証案 · 対象データでの再評価が必要です。
導入時の検証案:対象区間で使う道路画像を晴天と霧天で集め、車両の種類と位置を正解ラベルとして付ける。文章入力の調整には車両の記述と対応する画像を、除霧部の調整には霧画像と鮮明画像を用意する。本文は、除霧の学習に画像同士の一対一の対応を要しない方式を述べている。
同じ評価画像で、画像による検出を基準に提案手法の見落とし、誤検出、処理時間を比べる。霧の濃さ別に結果を記録し、クラウドへ処理を移す場合は通信を含む時間も測る。提案システム全体を試すなら、本文にあるRGB-Dカメラ、車両姿勢用の補助センサー、レーダーを使う構成も確認する。
限界と課題
著者らが明示する課題は、従来の検出法が霧など視界の悪い条件で性能を落とすことである。提案手法について、霧の濃さ別の失敗例や、クラウドへの処理移管が遅延に与える影響は、確認できた本文の範囲では定量的に分からない。
編集上の検証事項は、文章が画像と食い違う場合の検出、通信が途切れた場合の動作、測定環境ごとの処理時間である。Foggy Cityscapesは評価文で検出指標が報告される一方、データセット表の注釈種別は「Image Dehaze」と記されており、評価に使った正解枠と対象画像の内訳も確認が必要だ。
出典
元のタイトル・要旨を確認する(英語)
YOLO-Vehicle-Pro: A Cloud-Edge Collaborative Framework for Object Detection in Autonomous Driving under Adverse Weather Conditions
With the rapid advancement of autonomous driving technology, efficient and accurate object detection capabilities have become crucial factors in ensuring the safety and reliability of autonomous driving systems. However, in low-visibility environments such as hazy conditions, the performance of traditional object detection algorithms often degrades significantly, failing to meet the demands of autonomous driving. To address this challenge, this paper proposes two innovative deep learning models: YOLO-Vehicle and YOLO-Vehicle-Pro. YOLO-Vehicle is an object detection model tailored specifically for autonomous driving scenarios, employing multimodal fusion techniques to combine image and textual information for object detection. YOLO-Vehicle-Pro builds upon this foundation by introducing an improved image dehazing algorithm, enhancing detection performance in low-visibility environments. In addition to model innovation, this paper also designs and implements a cloud-edge collaborative object detection system, deploying models on edge devices and offloading partial computational tasks to the cloud in complex situations. Experimental results demonstrate that on the KITTI dataset, the YOLO-Vehicle-v1s model achieved 92.1% accuracy while maintaining a detection speed of 226 FPS and an inference time of 12ms, meeting the real-time requirements of autonomous driving. When processing hazy images, the YOLO-Vehicle-Pro model achieved a high accuracy of 82.3% mAP@50 on the Foggy Cityscapes dataset while maintaining a detection speed of 43 FPS.
論文本体の取得範囲に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。解説更新:2026-10-01




