アーカイブ / VLM / Computer Vision
紙の曲がりや斜め撮影で文書解析はどう崩れるかを測るReal5-OmniDocBench
Real5-OmniDocBench
Real5-OmniDocBenchの原論文から掲載した図です。細部はクリックして拡大できます。
原論文の図の説明を読む
Figure 1 : Samples of Real5-OmniDocBench.
概要
- 元の1,355ページすべてを五つの物理的な条件で再現し、計6,775画像を一対一で対応させた評価基盤。
- 文字、表、数式、読む順序を、同じ内容のデジタル画像と物理撮影画像で比べられる。
- 著者らの比較ではPaddleOCR-VL-1.5の総合点が92.05で、撮影条件による性能差も明らかになった。
補足：編集した模式図で仕組みを確認する
VISUAL EXPLAINER
図でつかむ、Real5-OmniDocBenchの仕組み
- 01元の文書1355ページ
- 02五条件で印刷・撮影
- 03元の正解情報と対応付け
- 04条件別の解析成績
原論文の説明をもとにした模式図です。処理の細部は省略しています。
研究の背景
文書解析は、画像の文字だけでなく、表の構造や数式、読む順番を取り出す作業だ。整った電子文書で高得点のモデルでも、紙の折れや湾曲、画面を撮った際の縞、照明のむら、斜め撮影に出会う。
現場で使う候補を選ぶには、こうした条件ごとの失敗を測る必要がある。Real5-OmniDocBenchは、同じ文書を異なる状態で比べるための評価集合を作った。
手法
Real5-OmniDocBenchはOmniDocBench v1.5の1,355ページを元に、スキャン、紙の変形、画面撮影、照明変化、斜め撮影の五条件で各ページを作り直す。合計6,775画像を元ページと一対一に対応させ、文字、表、数式、読む順序の正解情報を引き継ぐ。たとえば同じ表を平らにスキャンした画像と、曲げた紙を撮った画像で比べられる。
候補モデルへ各画像を渡し、抽出した文字や表の構造を正解と照合する。文字は編集距離、表は木構造の一致度、数式は構造的な一致を測る。編集距離は、正解の文字列へ直すのに必要な挿入・削除・置換の数である。著者らは撮影後に対応関係や読める状態を点検した。
新規性
元のデジタル文書1,355ページすべてに、五つの物理的な撮影条件を一対一で対応させた点が、この評価基盤の中心だ。各ページの文字、表、数式、読む順序について、元データの正解情報を引き継ぐ。
同じ内容を条件だけ変えて比較できるため、単に成績が下がったという報告にとどまらず、湾曲や照明、画面撮影など、どの条件で弱くなるかを調べられる。
従来手法との違い
従来のOmniDocBenchは主に整ったデジタル画像を評価する。現場で撮った文書を集める方式は実際の乱れを含む一方、元のきれいな画像と一対一で対応しない場合、同じ内容に対する低下量を測りにくい。
Real5-OmniDocBenchは元ページを印刷・撮影して対応を保つ。モデル比較では、著者らの総合点で文書解析専用のPaddleOCR-VL-1.5が92.05、汎用のQwen3-VL-235Bが88.90だった。この数字は本評価基盤の条件に限る。
実験結果
著者らは五条件の6,775画像で15方式を比較した。総合点はPaddleOCR-VL-1.5が92.05、Gemini-3 Proが89.24、Qwen3-VL-235Bが88.90だった。PaddleOCR-VL-1.5の条件別得点はスキャン93.43、紙の変形91.25、斜め撮影91.66である。
総合点は文字、表、数式の指標を組み合わせた値で、満点に近くても全項目が正しいことを意味しない。斜め撮影でPP-StructureV3は37.98、Marker-1.8.2は41.27となり、著者らの表では撮影条件による方式間の差が大きい。
応用の可能性
編集上の応用案 · 論文が実証した用途とは区別しています。
編集上の応用案：社内の紙の申請書を写真からデータ化する前に、同じ様式を平らなスキャン、曲がった紙、斜め撮影、弱い照明で収集する。入力は各画像、出力は文字列、表のセル、読む順序を持つ構造化データにする。
元の文書と条件別の出力を並べ、差が大きい撮影条件だけ撮り直し案内を出す。実際の申請内容を登録する前には、人が数値や表の対応を確認する流れにする。
導入時の検証
導入時の検証案 · 対象データでの再評価が必要です。
導入時の検証案：実際に扱う帳票から少数のページを選び、きれいな元画像を基準に、スキャン、曲がり、照明、斜め撮影などを同じ内容で作る。候補方式には同じ出力形式を求め、文字、表のセル、読む順序を別々に採点する。
各条件で基準から何点下がるかを記録し、数字の誤読やセルのずれを人が確認する。再撮影で改善する誤りと、方式を替えなければ残る誤りを分けて運用条件を決める。
限界と課題
著者らは、物理的な撮影条件に移ると性能低下が残ると報告する。特に斜め撮影では、表や読む順序の誤りが大きい方式があり、きれいなデジタル画像での成績だけでは運用時の品質を判断できない。
編集上の検証課題は、対象組織の帳票や撮影機器が、この五条件で十分に代表されるかである。また、元画像の注釈を物理版へ引き継ぐ設計なので、印刷や撮影で細かな文字が実際に読めなくなった例の扱いも確認したい。
出典
元のタイトル・要旨を確認する（英語）
Real5-OmniDocBench: A Full-Scale Physical Reconstruction Benchmark for Robust Document Parsing in the Wild
While Vision-Language Models (VLMs) achieve near-perfect scores on digital document benchmarks like OmniDocBench, their performance in the unpredictable physical world remains largely unknown due to the lack of controlled yet realistic evaluations. We introduce Real5-OmniDocBench, the first benchmark that performs a full-scale, one-to-one physical reconstruction of the entire OmniDocBench v1.5 (1,355 images) across five critical real-world scenarios: Scanning, Warping, Screen-Photography, Illumination, and Skew. Unlike prior benchmark that either lack digital correspondence or employ partial sampling, our complete ground-truth mapping enables, for the first time, rigorous factor-wise attribution of performance degradation-allowing us to pinpoint whether failures stem from geometric distortions, optical artifacts, or model limitations. Our benchmark establishes a challenging new standard for the community, demonstrating that the 'reality gap' in document parsing is far from closed, and provides a diagnostic tool to guide the development of truly resilient document intelligence.
論文本体の取得範囲に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。解説更新：2026-09-29