表示
超・人工知能研究所 Super AI Research Lab トップへ超・人工知能研究所AI Research Lab / ぱそ太郎工事中

since
平成38年9月29日

← 検索結果に戻る

画像・音声の生成判定と内容説明を一画面で確認するSynthGuard

SynthGuard

保存した記事を見るこのブラウザに保存します。無料会員で端末間の同期・フォルダ整理
原論文の図

SynthGuardの原論文から掲載した図です。細部はクリックして拡大できます。

原論文の図の説明を読む

Fig. 1 : SynthGuard UI overview.

出典:SynthGuard / arXiv ↗

概要

  • 画像と音声の生成検出器を一つの環境で使い、真偽ラベルと百分率の確信度を表示する。
  • 結果画面の説明では、MLLMは媒体の内容を文章化し、真偽ラベルは出さない。ただし音声経路の説明には記述の不一致がある。
  • 画像検出器は顔中心のデータで学習され、現行版に動画検出器はない。確認できた本文に検出精度の数値はない。
補足:編集した模式図で仕組みを確認する

VISUAL EXPLAINER

図でつかむ、SynthGuardの仕組み

左から右へ読む
  1. 01画像・音声を入力
  2. 02検出器を選択
  3. 03媒体を解析
  4. 04判定と説明を表示

原論文の説明をもとにした模式図です。処理の細部は省略しています。

研究の背景

SynthGuardは、画像や音声がAIで生成されたものかを調べるプラットフォームである。なりすましや誤情報が疑われる媒体を扱う際は、判定結果に加え、何を入力し、どの検出器を使ったかを追えることが重要になる。

著者らは、既存サービスには対応形式が限られるものや、結果を理解しにくいものがあると指摘する。そこで画像と音声を同じ窓口で扱い、検出器の結果と媒体の内容説明を表示する仕組みを提案した。

手法

利用者は画像または音声ファイルをアップロードし、検出器を選ぶ。通常の検出器は真偽ラベルと百分率の確信度を返す。画像には画素の特徴を見る方式や、細かな模様の周期性などを調べる周波数解析方式があり、音声検出器は音の高さごとの強さを表すメルスペクトログラムなどを調べる。

別の画面では、MLLM(画像などと文章を結び付けて扱う大規模言語モデル)に質問できる。例えば人物写真を入力すると、検出器の判定に加え、服装や周囲の物の説明を読める。結果画面の説明によれば、この文章は真偽ラベルではなく、媒体の内容を理解するための補助情報である。

新規性

著者らは、画像と音声の生成検出器に、媒体の内容を文章で説明するMLLMを組み合わせた公開プラットフォームを新規性として主張する。検出器を追加しやすい構成も備える。

ただし、内容説明が判定理由を直接示すとは限らない。結果画面の説明では、真偽ラベルは通常の検出器が出し、MLLMは被写体や声の特徴を述べる。

従来手法との違い

著者らの機能比較表では、Resemble.AI、TrueMedia、DeepFake-o-meter v2.0は画像と音声の両方を扱うが、MLLMを使う解析機能はないとされる。他の掲載サービスには画像専用のものもある。

SynthGuardは、研究用の公開環境で両形式の検出とMLLMによる説明を提供する。ただし表が比べるのは対応形式、機能、無料枠であり、検出精度や処理時間の優劣は示していない。

実験結果

著者らは、画像検出器をAI-Faceベンチマークで学習・評価したと記す。画像向けMLLMの解析はForensicsBenchの評価手順に沿うと説明する。音声には合成音声検出器を組み込み、画面には真偽ラベルと百分率の確信度を表示する。

確認できた本文の範囲では、正答率などの測定値、データの分割条件、既存サービスとの同一条件での比較値は示されていない。したがって、表示された確信度の信頼性や、対象媒体ごとの検出性能は数値で判断できない。

応用の可能性

編集上の応用案 · 論文が実証した用途とは区別しています。

編集上の応用案。広報担当者が、公開候補として届いた人物写真と音声メッセージの元ファイルを入力し、形式ごとの判定ラベル、表示された確信度、内容説明を記録する。送信元への照会結果も添え、人が掲載可否を決める。

事前検証には、撮影・録音の由来を確認できる実物と生成物、各ファイルの真偽ラベルが要る。追加センサーは想定しない。自社の対象に顔以外の画像が含まれる場合は、その範囲で使える検出器の選定や調整を検討する。

応用先の候補からNauhに相談できます。

導入時の検証

導入時の検証案 · 対象データでの再評価が必要です。

導入時の検証案。まず追加学習はせず、利用対象に近い顔写真と音声を集める。撮影・録音の由来を確認できる実物と生成物を用意し、各ファイルに真偽ラベルを付ける。画像検出器の学習先として記されたAI-Faceとの差と、音声検出器の学習元を確認する。

追加センサーは使わず、元ファイルと選ぶ検出器を記録する。担当者の通常の目視・聴取判断を基準に、形式別の見逃しと誤警告の件数、説明が送信元への照会に役立った件数を比べる。結果に応じて対象範囲や検出器の選定を見直す。

限界と課題

著者らは、MLLMが偽造検出専用に学習されておらず、細かな痕跡を捉えきれない可能性を挙げる。画像検出器は顔中心の学習データに依存し、風景や作品画像への適用が限られる。現行版に動画検出器はない。

編集上の検証事項は、対象データでの誤判定と、説明文が判断にどこまで役立つかである。また本文では、MLLMが真偽を判定しないという結果画面の説明と、音声の偽造検出にも触れる構成説明が一致しない。音声経路の出力を確認する必要がある。

研究内容と応用案に基づく分類です。業界での導入実績を示すものではありません。

出典

元のタイトル・要旨を確認する(英語)

SynthGuard: An Open Platform for Detecting AI-Generated Multimedia with Multimodal LLMs

Artificial Intelligence (AI) has made it possible for anyone to create images, audio, and video with unprecedented ease, enriching education, communication, and creative expression. At the same time, the rapid rise of AI-generated media has introduced serious risks, including misinformation, identity misuse, and the erosion of public trust as synthetic content becomes increasingly indistinguishable from real media. Although deepfake detection has advanced, many existing tools remain closed-source, limited in modality, or lacking transparency and educational value, making it difficult for users to understand how detection decisions are made. To address these gaps, we introduce SynthGuard, an open, user-friendly platform for detecting and analyzing AI-generated multimedia using both traditional detectors and multimodal large language models (MLLMs). SynthGuard provides explainable inference, unified image and audio support, and an interactive interface designed to make forensic analysis accessible to researchers, educators, and the public. The SynthGuard platform is available at: https://in-engr-nova.it.purdue.edu/

論文本体の取得範囲に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。解説更新:2026-10-01