アーカイブ / AI Agent
品詞の並びで文学作品の著者を分類する：8人を対象とした比較実験
POS Bigram Author Classification
POS Bigram Author Classificationの原論文から掲載した図です。細部はクリックして拡大できます。
原論文の図の説明を読む
Fig. 1: Histograms of POS tags and bigram matrices The plot shows the frequency of occurrence of several word classes (POS tags, a, c, e, g, i, k) normed by the number of words and the normed frequency of occurrence of word class combinations of consecutive words (bigrams, b, d, f, h, j, l). The results for two books of three authors are shown (Edgar Allan Poe, Jules Verne, Stefan Zweig) .
概要
- 76人の193作品から品詞の頻度と連続する品詞の頻度を求め、8人の著者分類を試した。
- 著者らが報告したテスト正解率は、個別の品詞を使う方式が0.44、連続する品詞を使う方式が0.59だった。
- 特徴とネットワーク構造を同時に変えているため、正解率の差を品詞の並びだけの効果とは断定できない。
補足：編集した模式図で仕組みを確認する
VISUAL EXPLAINER
図でつかむ、POS Bigram Author Classificationの仕組み
- 01文学作品の本文
- 02ドイツ語の品詞付け
- 03連続品詞の頻度行列
- 048人の著者分類
原論文の説明をもとにした模式図です。処理の細部は省略しています。
研究の背景
この研究は、文学作品に現れる品詞とその並びを使って著者を分類する。品詞は名詞や動詞など語の文法上の種類で、語の内容を直接使わずに文章の組み立て方を表す手掛かりになる。
著者を推定する際には、作品で扱う話題だけでなく、書き方の違いを捉えたい。研究では、品詞を一つずつ数える方法と、隣り合う品詞を組にして数える方法を比べ、著者ごとの区別にどう関わるかを調べた。
手法
著者らは句読点を除き、文字を小文字に統一してから、spaCyのドイツ語モデルで各語に品詞を付けた。例えば「冠詞の次に名詞」を一組として数え、11種類の品詞から11×11の頻度行列を作る。隣り合う二つの要素を数えた組み合わせをバイグラムと呼ぶ。比較用には、品詞を個別に数えた11要素のベクトルも作った。
行列は畳み込みニューラルネットワーク、ベクトルは全結合ニューラルネットワークに入力し、いずれも8人の著者への分類結果を出す。分類とは別に、多次元尺度構成法を用いて作品間の特徴の違いを二次元の点の距離として表し、著者ごとの集まり方を観察した。
新規性
著者らは、語そのものを使わず、品詞の出現頻度と、隣り合う品詞の組み合わせの頻度から著者の文体を捉えようとした。後者を11×11の行列にして分類した結果、報告されたテスト正解率は個別の品詞を使う方式より高かった。
多次元尺度構成法による可視化でも、組み合わせを使った場合の著者ごとの集まりがより明瞭だと述べる。これは点の配置を読む定性的な観察であり、分類正解率とは別の結果である。
従来手法との違い
比較対象は、11種類の品詞を個別に数えたベクトルを全結合ニューラルネットワークに入れる方式である。提案側は隣り合う二語の品詞を組として数え、11×11の行列を畳み込みニューラルネットワークに入れる。畳み込みは、行列の近接した値から特徴を取り出す処理を指す。
著者らが報告したテスト正解率は、前者が0.44、後者が0.59だった。入力する特徴とネットワークの構造を同時に変えているため、この比較だけでは差の原因を品詞の並びに限定できない。
実験結果
著者らのデータは76人による193作品で、1,000語未満の作品を除外した。本文には訓練・検証・テストを80％・10％・10％に分け、著者ごとの比率を考慮したとある。分類器の出力は8人分であり、76人全員の分類結果ではない。
著者らの報告では、個別の品詞を使う方式の訓練正解率は0.61、テスト正解率は0.44だった。連続する品詞を使う方式ではそれぞれ0.81、0.59で、8人から無作為に選ぶ場合の水準0.125を上回った。193作品の可視化についても後者の集まりがより明瞭だと述べるが、分類用の8人を選んだ詳しい手順や試行間のばらつきは、確認できた本文の範囲では分からない。
応用の可能性
編集上の応用案 · 論文が実証した用途とは区別しています。
編集上の応用案。ドイツ語の長文原稿を扱う出版社で、著者名の記録を確認する補助画面に使う。入力は著者が確定した過去の原稿と確認対象の原稿で、学習に必要なラベルは過去原稿の著者名である。文章以外のセンサーは使わない。
原稿の表記と品詞付けの手順をそろえ、対象業務の文章で分類器を学習し直す。確認対象の品詞の組み合わせを集計し、候補著者の分類結果を編集者に示して原稿管理記録と照合する。結果を著者確定の証拠として扱えるかは、この実験からは判断できない。
応用先の候補からNauhに相談できます。
導入時の検証
導入時の検証案 · 対象データでの再評価が必要です。
導入時の検証案。対象となるドイツ語の長文原稿から、著者が確定した学習用本文と著者名ラベルを用意する。入力は文章で、追加のセンサーは不要である。句読点の除去、小文字化、品詞付けを同じ手順で行い、業務で扱う原稿に合わせて分類器を学習し直す。
品詞を個別に数える方式を基準に、同じ著者集合と同じ作品単位の分割で、連続する品詞を使う方式とのテスト正解率を比べる。著者ごとの作品数、ジャンル、年代を記録して誤分類の偏りを確認し、編集者の記録照合作業に役立つかも別に測る。
限界と課題
著者らは、個別の品詞を使うモデルのテスト正解率が0.44、組み合わせを使うモデルでも0.59にとどまる点を限界として挙げる。固定した品詞特徴では文体の全側面を捉えきれず、作品数が少ない著者への一般化も制約され得ると述べている。
編集上の検証事項は、76人・193作品から8人の分類対象を選んだ手順と、各著者の作品が分割後に何点ずつ入ったかである。確認できた本文の範囲では、試行間のばらつきや、新しい年代・ジャンル・翻訳文に対する分類結果も分からない。
出典
元のタイトル・要旨を確認する（英語）
Author-Specific Linguistic Patterns Unveiled: A Deep Learning Study on Word Class Distributions
Deep learning methods have been increasingly applied to computational linguistics to uncover patterns in text data. This study investigates author-specific word class distributions using part-of-speech (POS) tagging and bigram analysis. By leveraging deep neural networks, we classify literary authors based on POS tag vectors and bigram frequency matrices derived from their works. We employ fully connected and convolutional neural network architectures to explore the efficacy of unigram and bigram-based representations. Our results demonstrate that while unigram features achieve moderate classification accuracy, bigram-based models significantly improve performance, suggesting that sequential word class patterns are more distinctive of authorial style. Multi-dimensional scaling (MDS) visualizations reveal meaningful clustering of authors' works, supporting the hypothesis that stylistic nuances can be captured through computational methods. These findings highlight the potential of deep learning and linguistic feature analysis for author profiling and literary studies.
論文本体の取得範囲に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。解説更新：2026-10-01