アーカイブ / LLM / RAG
インドの私的法律文書を、節構成の確認から起案するMAW
Model-Agnostic Wrapper (MAW)
Model-Agnostic Wrapper (MAW)の原論文から掲載した図です。細部はクリックして拡大できます。
原論文の図の説明を読む
Figure 2: Document Information Entry Interface
概要
- MAWは節見出しを先に作り、利用者の修正後、生成済みの節の要約を検索・参照しながら本文を作る。
- 著者らの試験では、LLaMA-3-8B-InstructへのMAW適用で、専門家による事実正確性の平均点が5.9333から8.0667になった。
- 追加学習したNyayaShilpは期待した改善を示さず、対象文書で事実の誤記や条項の欠落を検証する必要がある。
補足：編集した模式図で仕組みを確認する
VISUAL EXPLAINER
図でつかむ、Model-Agnostic Wrapper (MAW)の仕組み
- 01文書名と概要
- 02節見出しの作成・修正
- 03要約を参照して節を生成
- 04法律文書案
原論文の説明をもとにした模式図です。処理の細部は省略しています。
研究の背景
MAWは、依頼内容を基に私的な法律文書の節構成を決め、各節の文案を作る方法である。著者らによると、インドでは公開判決を扱う研究に比べ、契約や申立てなどの私的文書は機密性のため学習・評価用データを集めにくい。
長い文書の起案では、必要な事実や条項を含め、節をまたいで記述を整える必要がある。研究は、文書全体を一度に生成する手順に対し、構成の確認と節ごとの生成を組み合わせて検討した。
手法
利用者が文書名と短い概要を入力すると、選んだ大規模言語モデルが節見出しの一覧を作る。利用者は見出しを改名・追加・削除してから本文生成へ進む。例えば賃貸借文書なら、当事者や契約条件をどの節に記すかを、この段階で確認できる。
次にモデルは、文書名と概要を参照して各節の本文と短い要約を順番に作る。要約はベクトルデータベースという、文章の意味に近い情報を検索する仕組みに保存される。後続の節では関連する要約を検索してモデルへの入力に加え、全節を生成した後に文書案を整える。
新規性
著者らが提案するMAWは、節見出しを先に作り、利用者が修正した構成に沿って本文を順番に生成する枠組みである。生成済みの節の要約を検索して後続の節に渡す処理を、特定の言語モデルに依存しない形で組み込む。
研究では、匿名化した私的法律文書のデータセットVidhikDastaavejと、インドの法律文書に適応させたモデルNyayaShilpも提示する。MAWの評価では、モデルを追加学習する効果と、起案手順を変える効果を区別して比較している。
従来手法との違い
比較対象は、追加学習前のLLaMA-2-7B-ChatとLLaMA-3-8B-Instruct、法律文書向けに追加学習したモデル、推論だけに使ったGPT-4oである。同じLLaMA系モデルにMAWを適用した場合の結果も示されている。
結果は指標によって異なる。LLaMA-2-7BへのMAW適用では専門家による事実正確性の平均点が上がった一方、Rouge-1は0.4439から0.4436になった。著者らは、少量の私的文書による追加学習でも期待した改善を得られなかったと報告する。
実験結果
著者らはVidhikDastaavejの学習用469文書、試験用20文書を用いた。生成文と参照文の語句の重なりを測るRouge、意味の近さを測るBERTScoreなどに加え、法律専門家が指示への事実上の忠実さと内容の網羅性を評価した。専門家評価は1～10段階と説明される。
表では、LLaMA-3-8B-Instructの事実正確性の平均点は5.9333、MAW適用時は8.0667、網羅性は5.8417から7.5500だった。同モデルのRouge-1は0.3154から0.3703だった。確認できた本文の範囲では、専門家3人の採点一致度について説明が途中で切れており、分析結果の全体は確認できない。
応用の可能性
編集上の応用案 · 論文が実証した用途とは区別しています。
編集上の応用案：インドの法律実務で使う賃貸借文書の初稿作成を、節構成の確認に絞って試す。入力は担当者が確認した当事者・契約条件・文書の目的とし、出力は修正可能な節見出しと、各節の文案とする。
MAW自体の試行に追加学習用データは必須ではない。評価には、利用権限を確認して匿名化した同種の過去文書と、文書種別・必須条項・入力事実のラベルを用意する。見出しと入力項目を対象の書式に合わせ、法律専門家が文案を確認する。入力は文書情報であり、センサーは使わない。
応用先の候補からNauhに相談できます。
導入時の検証
導入時の検証案 · 対象データでの再評価が必要です。
導入時の検証案：賃貸借文書を対象に、利用権限を確認した過去文書を匿名化し、評価用の入力と正解例を用意する。文書種別、必須条項、入力事実をラベルにする。MAWの試行自体に追加学習用データは必須ではなく、対象書式に合わせた見出しと入力項目の調整から始められる。センサーは使わない。
同じ入力から、節を分けずに生成した基準案とMAWの文案を作る。法律専門家が事実の一致、必須条項の欠落、節間の矛盾、修正に要した時間を記録する。少数例で採点基準をそろえた後、対象文書で差が再現するかを確かめる。
限界と課題
著者らは、判例を用いた継続事前学習と私的文書による教師あり追加学習を経たNyayaShilpが、期待した改善を示さなかったと報告する。判例中心の学習内容や文書種別ごとの例の少なさを原因候補として挙げるが、原因が確定したとは示していない。
編集上の検証事項は、対象文書での事実の誤記・条項の欠落と、匿名化後の機密情報の残存である。また、冒頭の要約にある「133種別」と、本文の学習用17種別・試験用7種別の関係は確認が必要だ。専門家評価は1～10段階と説明される一方、表には0点もあり、その扱いも不明である。
出典
元のタイトル・要旨を確認する（英語）
Structured Legal Document Generation in India: A Model-Agnostic Wrapper Approach with VidhikDastaavej
Automating legal document drafting can improve efficiency and reduce the burden of manual legal work. Yet, the structured generation of private legal documents remains underexplored, particularly in the Indian context, due to the scarcity of public datasets and the complexity of adapting models for long-form legal drafting. To address this gap, we introduce VidhikDastaavej, a large-scale, anonymized dataset of private legal documents curated in collaboration with an Indian law firm. Covering 133 diverse categories, this dataset is the first resource of its kind and provides a foundation for research in structured legal text generation and Legal AI more broadly. We further propose a Model-Agnostic Wrapper (MAW), a two-stage generation framework that first plans the section structure of a legal draft and then generates each section with retrieval-based prompts. MAW is independent of any specific LLM, making it adaptable across both open- and closed-source models. Comprehensive evaluation, including lexical, semantic, LLM-based, and expert-driven assessments with inter-annotator agreement, shows that the wrapper substantially improves factual accuracy, coherence, and completeness compared to fine-tuned baselines. This work establishes both a new benchmark dataset and a generalizable generation framework, paving the way for future research in AI-assisted legal drafting.
論文本体の取得範囲に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。解説更新：2026-10-01