アーカイブ / Computer Vision
ゴヤ作品の可視画像とX線画像を組み合わせて真贋の手掛かりを調べる方法
Unified Multimodal Feature Extraction with One-Class SVM
Unified Multimodal Feature Extraction with One-Class SVMの原論文から掲載した図です。細部はクリックして拡大できます。
原論文の図の説明を読む
Figure 1: Sample Goya paintings used for training.
概要
- 可視画像とX線画像から各14個の特徴を取り出し、一クラスSVMで真正作品の特徴からの外れを判定する。
- 著者らは真正ゴヤ作品24点を用い、学習用作品での10分割交差検証で平均分類正解率97.8%を報告した。
- 非真正例の内訳と、確保した5作品による最終テストの成績は本文から確認できず、実用時の誤判定率は別途検証が必要である。
補足:編集した模式図で仕組みを確認する
VISUAL EXPLAINER
図でつかむ、Unified Multimodal Feature Extraction with One-Class SVMの仕組み
- 01作品の可視・X線画像
- 02画像の補正
- 03質感特徴の抽出
- 04特徴の結合と判定
原論文の説明をもとにした模式図です。処理の細部は省略しています。
研究の背景
ゴヤ作品には制作時期による作風の変化があり、工房制作や後年の偽作も真贋判断を難しくする。表面の画像だけでは、描き直しや下層の構図など、X線画像に現れる手掛かりを捉えられない。
この研究は、二種類の画像から数値で表せる特徴を取り出し、真正と確認された作品の特徴に新たな作品が合うか調べる方法を検討した。作品を調査する際の補助情報として、表面と内部を合わせて扱う狙いがある。
手法
作品ごとに対応する可視画像とX線画像を入力し、大きさ、明暗差、ノイズを整える。X線画像には露出補正も行う。続いて、近接する画素の濃淡の組み合わせを数えるGLCMと、中心の画素と周囲の明暗関係を表すLBPを使い、質感を数値化する。濃淡のばらつきなども求め、可視画像の色に関する特徴は、X線画像では濃淡の統計量に置き換える。
各画像の14個の特徴を結合し、尺度をそろえた28個の数値を一クラスSVMに渡す。一クラスSVMは、真正作品の特徴が集まる範囲を学び、新たな入力がそこから外れるか判定する手法である。例えば所蔵候補の両画像を処理し、表面と内部の情報を合わせた判定値を得る。
新規性
著者らの提案は、絵画の表面を写す可視画像と内部を示すX線画像に、共通の質感解析を適用する点にある。各画像から14個ずつ特徴を取り出し、28個の数値を一つの判定に使う。
ただし、処理が完全に同一という意味ではない。可視画像の色に関する特徴は、色を持たないX線画像では濃淡の統計量に置き換え、X線画像には露出補正も加えている。
従来手法との違い
著者らは、可視画像だけを使う方法、X線画像だけを使う方法と比較した。学習用作品での10分割交差検証における平均分類正解率は、両画像を使う場合が97.8%、可視画像のみが93.4%、X線画像のみが91.7%と報告している。
交差検証は、データを区分して学習と評価を繰り返す方法である。この比較で確認できるのは、同論文のゴヤ作品と評価条件における差であり、別の画家や撮影条件にも当てはまるとは示されていない。
実験結果
著者らは、真正と確認されたゴヤ作品24点と対応するX線画像を使用したと記す。19点を学習用、5点を最終テスト用とし、学習用では同じ作品の可視画像とX線画像が別の区分に分かれないように10分割交差検証を行った。
著者らが報告する交差検証の平均分類正解率は97.8%(標準偏差1.2%)、適合率97.3%、再現率96.9%、F1値97.1%、偽陽性率0.022である。「Un Gigante」には認証信頼度92.3%を示す。ただし、5点の最終テスト成績と、偽陽性率の評価に使った非真正例の内訳は、確認できた本文の範囲では示されていない。
応用の可能性
編集上の応用案 · 論文が実証した用途とは区別しています。
編集上の応用案:美術館でゴヤ作とされる所蔵候補を調査する際、専門家が詳しく確認する作品の優先順位付けに使う。学習には、真贋の確認結果をラベルとして持つ作品の可視画像と対応するX線画像が必要で、候補作品にも両画像を用意する。
各画像から特徴を取り出してモデルに入力し、真正作品の特徴からの外れを示す判定値と元画像を担当者に提示する。担当者は来歴調査や実物検査で確認する点を整理する。判定値だけで真贋を確定する運用は、ここでの応用案に含めない。
応用先の候補からNauhに相談できます。
導入時の検証
導入時の検証案 · 対象データでの再評価が必要です。
導入時の検証案:まず、専門家による真贋の確認結果をラベルとして持つ作品について、対応する可視画像とX線画像を集める。候補作品にも両画像が必要で、X線撮影の条件と画像の対応関係を記録する。画像を補正した後、論文に沿って特徴を抽出し、真正作品でモデルを学習する。
作品単位で学習用と評価用を分け、可視画像のみの判定を比較基準にする。評価では真正作品を誤って外れとする件数を確認する。偽陽性率を測るには、真贋の確認結果が付いた非真正例も別途必要になる。撮影条件を変えた場合の判定の揺れも調べる。
限界と課題
著者らは真正と確認された24作品というデータ規模を踏まえ、学習用作品内で交差検証を行ったと説明している。一方、報告された偽陽性率0.022を算出するための非真正例の出所と内訳、確保した5作品による最終テストの成績は、確認できた本文の範囲では分からない。
編集上の検証事項は、別の作品群やX線撮影条件でも判定が安定するか、誤判定がどの程度起きるかである。「Un Gigante」の認証信頼度92.3%についても、判定値をその数値に変換した方法を確認する必要がある。
出典
元のタイトル・要旨を確認する(英語)
Integrating Visual and X-Ray Machine Learning Features in the Study of Paintings by Goya
Art authentication of Francisco Goya's works presents complex computational challenges due to his heterogeneous stylistic evolution and extensive historical patterns of forgery. We introduce a novel multimodal machine learning framework that applies identical feature extraction techniques to both visual and X-ray radiographic images of Goya paintings. The unified feature extraction pipeline incorporates Grey-Level Co-occurrence Matrix descriptors, Local Binary Patterns, entropy measures, energy calculations, and colour distribution analysis applied consistently across both imaging modalities. The extracted features from both visual and X-ray images are processed through an optimised One-Class Support Vector Machine with hyperparameter tuning. Using a dataset of 24 authenticated Goya paintings with corresponding X-ray images, split into an 80/20 train-test configuration with 10-fold cross-validation, the framework achieves 97.8% classification accuracy with a 0.022 false positive rate. Case study analysis of ``Un Gigante'' demonstrates the practical efficacy of our pipeline, achieving 92.3% authentication confidence through unified multimodal feature analysis. Our results indicate substantial performance improvement over single-modal approaches, establishing the effectiveness of applying identical computational methods to both visual and radiographic imagery in art authentication applications.
論文本体の取得範囲に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。解説更新:2026-10-01




