表示
超・人工知能研究所 Super AI Research Lab トップへ超・人工知能研究所AI Research Lab / ぱそ太郎工事中

since
平成38年9月29日

← 検索結果に戻る

監視カメラ映像から建設機械の停止状態を見分ける

Edge-IMI

保存した記事を見るこのブラウザに保存します。無料会員で端末間の同期・フォルダ整理
原論文の図

Edge-IMIの原論文から掲載した図です。細部はクリックして拡大できます。

原論文の図の説明を読む

Figure 1: Three components of Edge-IMI framework

出典:Edge-IMI / arXiv ↗

概要

  • カメラ映像から建設機械を検出・追跡し、枠の動きで停止状態を判定する。
  • 結果表では検出F1が71.75%、停止判定F1が76.42%と報告される。
  • 長い遮蔽とカメラの動きが追跡の課題で、本文と表には検出F1の食い違いがある。
補足:編集した模式図で仕組みを確認する

VISUAL EXPLAINER

図でつかむ、Edge-IMIの仕組み

左から右へ読む
  1. 01監視カメラ映像
  2. 02建設機械を検出
  3. 03同じ機体を追跡
  4. 04停止・稼働を判定

原論文の説明をもとにした模式図です。処理の細部は省略しています。

研究の背景

建設機械が作業せずに待っている時間を把握できれば、機械の使い方や作業順序を見直す材料になる。しかし人が映像を見続けて記録するには手間がかかり、機械ごとにセンサーを追加する方法も現場の条件に左右される。

Edge-IMIは、監視カメラの映像から機械を見つけ、時間を追って同じ機械かを確かめ、停止中かを推定する。現場に近い計算機で映像を処理する「エッジ処理」を想定している。

手法

映像の各コマからYOLOv8が掘削機、ダンプトラック、コンクリートミキサー車を囲む枠を出す。ByteTrackはコマをまたいで枠を対応づけ、機体ごとに追跡IDを付ける。囲む枠は、画像内で機械がある位置と大きさを示す四角形である。

次に一定数のコマについて、枠の面積と中心の移動量を集め、その変動を数値化する。ロジスティック回帰という、少数の数値から二択の確率を出す方法で、停止か稼働かを判定する。論文の学習例では毎秒10コマ、15コマ分の1.5秒を一つの判定区間とした。

新規性

Edge-IMIは、既存の監視カメラ映像を使い、建設機械の検出、同一機体の追跡、停止状態の判定をつなぐ。停止判定は機体の画像そのものを繰り返し詳しく解析する代わりに、追跡で得た枠の面積と中心位置の変化を使う。

著者らは、計算量の小さいロジスティック回帰を最後の判定に用い、CPUで動く現場側の機器を想定した。追加センサーなしで機械の利用状況を推定する構成が提案の中心である。

従来手法との違い

人が映像を見て稼働時間を記録する方法や、機械に搭載したセンサーを使う方法に対し、Edge-IMIは監視映像と現場側の計算機を使う。前後の画像の画素差だけを見る方法では、機械の前を人が横切る場合などに動きと取り違える可能性があると論文は述べる。

処理速度はPyTorch形式とOpenVINO形式でも比べた。ただし、監視方式全体の精度を他の停止判定方式と同じ条件で直接比較した数値は、確認できた本文の範囲では示されていない。

実験結果

著者らはACIDとMOCSから共通する3車種を選び、検出器を評価した。結果表では検出F1が71.75%、mAP50が70.44%、停止判定F1が76.42%、正解率が78.99%である。mAP50は、予測枠と正解枠の重なりが50%以上かを使う検出指標を指す。

停止判定の評価には8例・150コマを用いた。Raspberry Pi 5では、全工程をOpenVINO形式で動かした速度を毎秒8.5コマと報告する。一方、本文には検出F1を88.00%とする箇所もあり、表の値と一致しない。

応用の可能性

編集上の応用案 · 論文が実証した用途とは区別しています。

編集上の応用案:固定カメラがある資材置き場で、ダンプトラックの待機時間を日別に把握する。入力は既存カメラの映像、出力は機体ごとの追跡ID、停止と稼働の判定、各状態の時間集計とする。

現場担当者は、長い停止区間だけ映像と照らして確認し、搬入待ちか作業上必要な停止かを記録する。集計を配車計画の見直しに使う前に、遮蔽で追跡IDが変わった区間を除いて確認する。

応用先の候補からNauhに相談できます。

導入時の検証

導入時の検証案 · 対象データでの再評価が必要です。

導入時の検証案:固定カメラの短い映像を選び、機体の枠、追跡ID、停止・稼働の正解を人手で記録する。まず枠の中心移動量に固定しきい値を置く簡単な方式を基準にし、Edge-IMIと同じ区間で比べる。

車種別の検出F1、追跡IDの切り替わり回数、停止判定の見逃し・誤報、毎秒の処理コマ数を測る。遮蔽、画面端、小さな動きの区間を分けて集計し、現場で使える判定間隔を決める。

限界と課題

著者らは、長い遮蔽の後に掘削機の追跡IDを誤る場合や、小さな動きを見落として一時的に状態を誤る場合を報告する。カメラの向きや拡大率が動くと追跡が乱れうること、作業員が映り込むことも課題に挙げる。

編集上の確認事項は、対象現場での車種別の誤判定率、雨天や夜間の成績、映像を扱う手順である。論文内には検出F1の値や処理時間の記述に食い違いがあるため、実装前に測定条件と表の数値を確認したい。

応用先の候補
研究内容と応用案に基づく分類です。業界での導入実績を示すものではありません。

出典

元のタイトル・要旨を確認する(英語)

Towards Edge-Based Idle State Detection in Construction Machinery Using Surveillance Cameras

The construction industry faces significant challenges in optimizing equipment utilization, as underused machinery leads to increased operational costs and project delays. Accurate and timely monitoring of equipment activity is therefore key to identifying idle periods and improving overall efficiency. This paper presents the Edge-IMI framework for detecting idle construction machinery, specifically designed for integration with surveillance camera systems. The proposed solution consists of three components: object detection, tracking, and idle state identification, which are tailored for execution on resource-constrained, CPU-based edge computing devices. The performance of Edge-IMI is evaluated using a combined dataset derived from the ACID and MOCS benchmarks. Experimental results confirm that the object detector achieves an F1 score of 71.75%, indicating robust real-world detection capabilities. The logistic regression-based idle identification module reliably distinguishes between active and idle machinery with minimal false positives. Integrating all three modules, Edge-IMI enables efficient on-site inference, reducing reliance on high-bandwidth cloud services and costly hardware accelerators. We also evaluate the performance of object detection models on Raspberry Pi 5 and an Intel NUC platforms, as example edge computing platforms. We assess the feasibility of real-time processing and the impact of model optimization techniques.

論文本体の取得範囲に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。解説更新:2026-09-29