アーカイブ / Computer Vision / VLM / Generative AI
炎の有無だけでなく周囲の状況も記録する画像・動画データセット
DetectiumFire
DetectiumFireの原論文から掲載した図です。細部はクリックして拡大できます。
原論文の図の説明を読む
Figure 1 : Screenshot of the fire annotation tool. The tool displays each image alongside the original GPT-generated caption and allows human annotators to edit and finalize a concise, domain-specific prompt.
概要
- 炎の位置に加え、燃焼物、周辺環境、危険度を記した画像・動画データセットを提案した。
- 著者らは約2万2500枚の画像と約2500本の動画を報告し、重複率は比較対象より低いと述べた。
- 現場利用には、管理された火と危険な火の見分け方、見逃し率、誤警報率の再評価が要る。
補足:編集した模式図で仕組みを確認する
VISUAL EXPLAINER
図でつかむ、DetectiumFireの仕組み
- 01火災画像と動画
- 02重複除去と選別
- 03位置と状況を注釈
- 04学習・評価用データ
原論文の説明をもとにした模式図です。処理の細部は省略しています。
研究の背景
DetectiumFireは、炎が写った画像や動画と、その場面を説明する注釈を集めたデータセットである。炎を囲む枠だけでは、何が燃え、周囲へ広がりそうかを学習・評価しにくい。
例えばろうそくの火と室内の延焼では、同じ「炎あり」でも扱いが違う。著者らは、制御された火、危険な火、火に見えやすい別の光景を含め、火災場面の理解を調べられる資源を作った。
手法
著者らはウェブ上の画像・動画や既存データを集め、重複や低品質の例を除いた。人が炎の位置を枠で示し、文章には燃焼物、周辺環境、危険度を記した。文章の下書きにはGPT-4oを使い、注釈者が確認・修正した。危険度は、危険なしから高リスクまで四段階で扱う。
さらに実画像と文章の組で画像生成モデルを調整し、生成した画像を人が選別して注釈を付けた。出力には実画像、動画、合成画像、説明文などが含まれ、物体検出や、画像から状況を答えるモデルの学習と評価に使われる。
新規性
DetectiumFireは、炎の位置を示す枠だけでなく、燃えている物、周辺環境、危険度を文章で記録する点に特徴がある。制御された炎と広がる火災を含め、検出、画像生成、画像を見て答える課題に同じ資源を使えるようにした。
実画像に加えて拡散モデルで作った画像も収録する。拡散モデルは、文章の条件に沿う画像を段階的に作る生成手法で、著者らは人が選んだ画像の組も学習用に用意した。
従来手法との違い
論文が主に比較するD-Fireは、炎の位置を示す注釈を持つ既存データセットである。著者らは、DetectiumFireのほうが実際の場面の種類が広く、画像の重複も少ないと報告する。重複率は同じ解析ツールでDetectiumFireが0.23、D-Fireが0.55だった。
DetectiumFireは、画像の説明文を使って燃焼物や周辺環境も問える。一方、データの規模や注釈の種類が違うため、重複率の差だけであらゆる現場の火災検知性能が優れるとは言えない。
実験結果
著者らは約2万2500枚の火関連画像と約2500本の実動画を報告し、内訳として約1万4500枚の実画像と約8000枚の合成画像を示した。画像の重複、物体検出、画像生成、画像と言葉による状況判断を評価対象にしている。
物体検出ではYOLOv11mなどを用い、検出精度と再現率を測る設計が記されている。確認できた本文の範囲では、個別モデルの最終スコアを十分に確認できないため、導入時の検出率は示せない。画像生成の比較には770種類の新しい指示文を用いた。
応用の可能性
編集上の応用案 · 論文が実証した用途とは区別しています。
編集上の応用案:建物内の監視画像から、確認を要する炎の場面を担当者に提示する試験に使う。入力はカメラ画像、出力は炎の位置、燃えていると推定した物、周囲の状況、確認を要する理由とする。
例えば調理中の管理された火と、カーテンに燃え移る火を区別する観点を評価項目に入れる。モデルの危険度表示は担当者の確認順を決める補助とし、警報の判断は別の運用規則と人の確認につなぐ。
導入時の検証
導入時の検証案 · 対象データでの再評価が必要です。
導入時の検証案:実際の設置場所に近い画像を、管理された火、危険な火、火に似た非火災の三群に分けて集める。現行の炎検出器を比較対象にし、DetectiumFireで学習した方式の炎の位置と危険度の出力を同じ画像で測る。
見逃し率と誤警報率を群別に記録し、照明、視点、遮蔽の条件でも確認する。説明文の内容を担当者が点検し、位置検出が正しくても危険度の判断を誤る例を切り分ける。
限界と課題
著者らは、説明文を短くして炎に関係する情報へ絞っており、人の所在や火の広がり方を扱う豊かな注釈は今後の課題としている。画像生成の学習条件も広く調整しておらず、生成画像の評価にはGPT-4oを代理の判定者として使った。
編集上は、設置予定のカメラに近い画質・視点での見逃し、夕焼けや強い照明への誤警報、動画で危険度が変化する時の判断を検証したい。データ件数の説明には節ごとに差があるため、利用する内訳も確認が必要である。
出典
元のタイトル・要旨を確認する(英語)
DetectiumFire: A Comprehensive Multi-modal Dataset Bridging Vision and Language for Fire Understanding
Recent advances in multi-modal models have demonstrated strong performance in tasks such as image generation and reasoning. However, applying these models to the fire domain remains challenging due to the lack of publicly available datasets with high-quality fire domain annotations. To address this gap, we introduce DetectiumFire, a large-scale, multi-modal dataset comprising of 22.5k high-resolution fire-related images and 2.5k real-world fire-related videos covering a wide range of fire types, environments, and risk levels. The data are annotated with both traditional computer vision labels (e.g., bounding boxes) and detailed textual prompts describing the scene, enabling applications such as synthetic data generation and fire risk reasoning. DetectiumFire offers clear advantages over existing benchmarks in scale, diversity, and data quality, significantly reducing redundancy and enhancing coverage of real-world scenarios. We validate the utility of DetectiumFire across multiple tasks, including object detection, diffusion-based image generation, and vision-language reasoning. Our results highlight the potential of this dataset to advance fire-related research and support the development of intelligent safety systems. We release DetectiumFire to promote broader exploration of fire understanding in the AI community. The dataset is available at https://kaggle.com/datasets/38b79c344bdfc55d1eed3d22fbaa9c31fad45e27edbbe9e3c529d6e5c4f93890
論文本体の取得範囲に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。解説更新:2026-09-29




