アーカイブ / Computer Vision
同じ手稿に三つの転写を付ける：ニュルンベルク書簡簿の文書解析データ
Nuremberg Letterbooks
Nuremberg Letterbooksの原論文から掲載した図です。細部はクリックして拡大できます。
原論文の図の説明を読む
Figure 1: Step 1 describes data acquisition and preprocessing. The pages of the scanned documents are separated, with a subsequent line segmentation. In step 2, the transcriptions and meta data are manually labeled. The created basic transcriptions are used as a foundation for the regularized and diplomatic text versions. Simultaneously, the meta data, like writer IDs, are marked. In step 3, manual corrections are made, and the produced data is analyzed for technical validation.
概要
- 15世紀初頭の書簡簿4冊、1711ページに、三種類の転写と書簡・筆記者の情報を付けた。
- 基礎転写と外交的転写は画像中の行に結び付き、正規化転写は書簡単位で記録される。
- 著者らは文字認識と筆記者識別の基準結果を報告した。別の史料で使う際は、転写規則とラベルの確認が必要になる。
補足：編集した模式図で仕組みを確認する
VISUAL EXPLAINER
図でつかむ、Nuremberg Letterbooksの仕組み
- 01書簡簿の見開き画像
- 02ページと行の分割
- 03転写とIDの付与
- 04照合・修正済みデータ
原論文の説明をもとにした模式図です。処理の細部は省略しています。
研究の背景
古い手稿を画像化しても、それだけでは内容の検索や表記の比較は難しい。文字認識向けに単純化した転写だけでは、原文の特徴を調べる研究と、読みやすい文章で内容を追う研究の双方を支えにくい。
対象は15世紀初頭、ニュルンベルクの小評議会が他都市や個人に送った書簡の記録である。経済・法律上の用件から政治的な往復書簡まで含むため、画像を文字に結び付ける際、表記の違いと書簡の区切りを残す意味がある。
手法
著者らは見開きのスキャン画像を半自動でページに分け、結果を目視確認した。次に各ページを文字の行へ分割し、行を囲む領域のずれを調整した。専門家が、文字認識用に表記を簡略化した基礎転写を作り、これを基に外交的転写と正規化転写を半自動で作成した。
例えば略語を含む箇所には、元の形を残す版と展開した版を用意する。書簡の始点・終点と主な筆記者のIDも付け、原画像との照合と修正を重ねた。出力されるデータでは、基礎・外交的転写は画像中の行に結び付き、正規化転写は書簡単位で記録される。
新規性
著者らの主張する特徴は、同じ手稿に文字認識向けの基礎転写、原文の表記を保つ外交的転写、読みやすく整えた正規化転写を用意した点にある。外交的転写と正規化転写には、それぞれ略語を展開した版としない版がある。
書簡の始点・終点と主な筆記者のIDも記録する。筆記者がページの途中で変わり得る史料で、書簡と筆記者を結び付けて扱える構成にした。
従来手法との違い
著者らによれば、従来の文書解析用データでは、文字認識の学習に適した単純化転写が標準的に使われる。このデータでも基礎転写がその役割を担う一方、原文の表記を調べる用途には外交的転写、内容を読み進める用途には正規化転写を提供する。
技術検証では、基礎転写と外交的転写をそれぞれ文字認識の対象にした。出力すべき文字列が異なるため、両者の誤り率だけで研究用途への適合性は決められない。正規化転写について、同じ文字認識結果は示されていない。
実験結果
著者らは4冊、計1711ページ、主な筆記者10人のデータを作成し、手書き文字認識と筆記者識別で検証した。文字認識では、画像の特徴を取り出すCNNと、文字を順に予測するTransformerを組み合わせた。
書簡簿2・3で学習、4で検証、5でテストした条件では、基礎転写のCER（文字単位の誤り率）は7.06％、WER（単語単位の誤り率）は24.09％、外交的転写はそれぞれ7.11％、25.40％だった。筆記者識別では、2・3・4を学習側、5をテスト側とした条件で、著者らはTop-1を0.996、検索順位に基づくmAPを0.964と報告した。
応用の可能性
編集上の応用案 · 論文が実証した用途とは区別しています。
編集上の応用案：同種の書簡簿を閲覧する画面で、原文に近い表記と読みやすい表記を切り替える。入力はページ画像と書簡の範囲、出力は画像上の行に対応する外交的転写と、書簡単位の正規化転写を並べた表示とする。
候補作成には対象史料の画像と、専門家が確認した行・書簡の境界、各転写、主な筆記者のラベルが必要になる。追加のセンサーは想定しない。対象の表記と筆跡に合わせて転写規則を調整し、表示前に候補を原画像と照合する。
応用先の候補からNauhに相談できます。
導入時の検証
導入時の検証案 · 対象データでの再評価が必要です。
導入時の検証案：対象の書簡簿から少量のページ画像を選び、専門家が行・書簡の境界、基礎・外交的・正規化転写、主な筆記者のラベルを確認する。入力は画像で、追加のセンサーは想定しない。対象史料の略語や表記に合わせ、転写規則を調整する。
基礎転写だけを出す手順を比較基準とし、書簡単位で分けた検証用データを使う。文字認識のCER・WERに加え、略語の展開、書簡境界、筆記者ラベルの誤りを数える。外交的転写と正規化転写を画面に表示し、専門家が原画像と照合できるかも確認する。
限界と課題
著者らは、自動的な行分割で取り消し線などの珍しい書式が誤分類され、修正を要したと述べる。筆記者識別の誤りには、複数人が書いた書簡で、手法が主な筆記者以外の部分に注目した例があった。主な筆記者のIDは、書簡内の全ての文字の筆記者を示すものではない。
編集上の検証事項は、別の史料でも行分割と転写規則が通用するかである。また、正規化転写は書簡単位で個々の行に結び付いていない。行を選んで正規化文の対応箇所を示すには、別途対応付けを確認する必要がある。
出典
元のタイトル・要旨を確認する（英語）
Nuremberg Letterbooks: A Multi-Transcriptional Dataset of Early 15th Century Manuscripts for Document Analysis
Most datasets in the field of document analysis utilize highly standardized labels, which, while simplifying specific tasks, often produce outputs that are not directly applicable to humanities research. In contrast, the Nuremberg Letterbooks dataset, which comprises historical documents from the early 15th century, addresses this gap by providing multiple types of transcriptions and accompanying metadata. This approach allows for developing methods that are more closely aligned with the needs of the humanities. The dataset includes 4 books containing 1711 labeled pages written by 10 scribes. Three types of transcriptions are provided for handwritten text recognition: Basic, diplomatic, and regularized. For the latter two, versions with and without expanded abbreviations are also available. A combination of letter ID and writer ID supports writer identification due to changing writers within pages. In the technical validation, we established baselines for various tasks, demonstrating data consistency and providing benchmarks for future research to build upon.
論文本体の取得範囲に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。解説更新：2026-10-01