アーカイブ / LLM / AI Agent
判決文の論理構造から著作権損害賠償の判断要素を抽出する
Discourse-Based LLM Analysis
Discourse-Based LLM Analysisの原論文から掲載した図です。細部はクリックして拡大できます。
原論文の図の説明を読む
Figure 1. Research Framework
概要
- 判決文を節と修辞構造の木に分け、LLMが判断要素のラベルと根拠箇所を抽出する。
- 35件のテストで、懲罰的要素の判定は正解率0.771、F1値0.765と著者らは報告した。
- 定量評価は一つの判定項目に限られ、実務では根拠箇所を原文で確認する必要がある。
補足：編集した模式図で仕組みを確認する
VISUAL EXPLAINER
図でつかむ、Discourse-Based LLM Analysisの仕組み
- 01著作権判決文
- 02節の区分
- 03論理関係の木
- 04要素と根拠箇所
原論文の説明をもとにした模式図です。処理の細部は省略しています。
研究の背景
著作権侵害の損害賠償では、判決文に市場価値、侵害者の意図、抑止効果など複数の理由が現れる。同じ語が出ていても、裁判所が金額の根拠として採用したのか、単に争点を紹介したのかは文章のつながりを読まなければ分からない。
多数の判決を人手で一件ずつ読むには時間がかかる。判断要素とその根拠箇所を一定の形式で取り出せれば、判決間の記述を比較する作業に使える。
手法
まず判決文を収集して事件情報と本文を整理し、LLMで導入、事実、救済・損害などの節に分ける。次に修辞構造理論（RST）で、文のまとまり同士が説明や補足などでどう結び付くかを木として表す。対象箇所から木の根までの経路を文章化し、LLMがその箇所の役割を読めるようにする。
抽出段階では、専門家の正解例を使って質問文と抽出計画を調整し、計画に沿って木をたどる。例えば賠償額に抑止効果を反映したかを調べる場合、肯定・否定のラベルと、それを支える判決文の部分木を出力する。部分木とは、関連する文章とそのつながりだけを抜き出したものだ。
新規性
判決文に出る単語だけで判断要素を探すのではなく、文同士の説明・根拠関係を木構造として表し、その構造をLLMの抽出手順へ渡す点が提案だ。出力には要素の有無だけでなく、根拠となる文章の部分構造も付ける。
論文は複数の判断要素を扱える枠組みを示すが、定量的な予備実験の対象は「賠償額の決定で懲罰的な要素を考慮したか」の一項目である。この範囲を越えた性能は、示された数値からは判断できない。
従来手法との違い
予備実験では、文書全文をLLMへ渡す方法、段階的な思考を促す方法、計画と見直しを使うエージェント型の方法、無作為判定と比較した。提案法はエージェント型の処理に談話構造の木を加えるため、要素を示す文が判決全体でどんな役割を持つか参照できる。
例えば「故意」という語だけでは、裁判所がそれを賠償額の懲罰的理由に使ったかは決まらない。比較の焦点は、こうした文脈を加えたときに二値判定と根拠の抽出がどう変わるかにある。
実験結果
著者らは検索で得た2183件を整理し、専門家が203件へ注釈を付けたと述べる。予備実験ではそのうち50件を選び、15件を質問文の調整、35件をテストに使った。節の区分は、無作為に選んだ10件で専門家の区分と比較し、92％の一致率を報告している。
懲罰的要素の二値判定では、提案法の正解率0.771、F1値0.765、再現率1.000。全文をそのまま渡すLLMは正解率0.714、F1値0.722だった。F1値は適合率と再現率の釣り合いを表す。いずれも著者らの小規模な予備実験での数値である。
応用の可能性
編集上の応用案 · 論文が実証した用途とは区別しています。
編集上の応用案：著作権訴訟の判決を調べる担当者向けに、損害賠償の判断要素を探す補助画面を作る。入力は判決文、出力は「懲罰的要素を考慮した可能性」の表示と、その判断に使われた段落の候補である。
担当者は候補箇所を原文で読み、金額の根拠や故意への言及を確認してから記録する。表示された判定を法的結論として採用する用途ではなく、判決文の確認箇所を絞るための応用案である。
応用先の候補からNauhに相談できます。
導入時の検証
導入時の検証案 · 対象データでの再評価が必要です。
導入時の検証案：対象とする判決文を少数選び、担当者が「懲罰的要素を考慮したか」の定義と根拠段落を先に記録する。提案法と、判決文全文をそのままLLMへ渡す方法を同じ文書で比較する。質問文の調整に使う事件と評価する事件は分ける。
正解率だけでなく、誤って肯定した割合、見逃し、提示された根拠段落の妥当性を確認する。誤りを故意の記述、金額の記述、抑止目的の記述に分けて記録し、調査時間が実際に減るかも測る。
限界と課題
著者らの実験は予備的で、専門家が注釈した203件のうち50件を使い、評価対象は一つの二値項目に限られる。本文の比較表では提案法の適合率は0.619で、誤って肯定する例も残る。判決文全般や他の法域での有効性は、この実験からは分からない。
編集上の確認課題は、木構造の解析ミスが根拠表示へどう伝わるか、裁判所や時期が変わっても同じ判定基準を保てるかである。入力文の区切りと専門家ラベルの定義も固定して再評価する必要がある。
出典
元のタイトル・要旨を確認する（英語）
Dissecting Judicial Reasoning in U.S. Copyright Damage Awards
Judicial reasoning in copyright damage awards poses a core challenge for computational legal analysis. Although federal courts follow the 1976 Copyright Act, their interpretations and factor weightings vary widely across jurisdictions. This inconsistency creates unpredictability for litigants and obscures the empirical basis of legal decisions. This research introduces a novel discourse-based Large Language Model (LLM) methodology that integrates Rhetorical Structure Theory (RST) with an agentic workflow to extract and quantify previously opaque reasoning patterns from judicial opinions. Our framework addresses a major gap in empirical legal scholarship by parsing opinions into hierarchical discourse structures and using a three-stage pipeline, i.e., Dataset Construction, Discourse Analysis, and Agentic Feature Extraction. This pipeline identifies reasoning components and extract feature labels with corresponding discourse subtrees. In analyzing copyright damage rulings, we show that discourse-augmented LLM analysis outperforms traditional methods while uncovering unquantified variations in factor weighting across circuits. These findings offer both methodological advances in computational legal analysis and practical insights into judicial reasoning, with implications for legal practitioners seeking predictive tools, scholars studying legal principle application, and policymakers confronting inconsistencies in copyright law.
論文本体の取得範囲に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。解説更新：2026-09-30