アーカイブ / RAG / LLM
文同士の関係をたどり、長文から回答の根拠を探すDISRetrieval
DISRetrieval
DISRetrievalの原論文から掲載した図です。細部はクリックして拡大できます。
原論文の図の説明を読む
Figure 1: Comparison of document modeling approaches for long-text retrieval. Numbers (1-6) show sentence order in original document, with similar colors indicating semantic relationships. Four approaches are compared: (a) Flat sequential modeling, (b) Bottom-up semantic clustering of RAPTOR, (c) Bisection-based adjacent grouping, and (d) Our discourse-aware DISRetrieval that preserves both semantic and discourse structures.
概要
- 文や段落の談話関係から木を作り、質問に合う元の文を根拠として選ぶ。
- QASPERとQuALITYの一部条件では、同じ検索文量の文単位検索より回答指標が高かった。
- 一部条件ではBisectionが上回る。評価データセット数についても冒頭の要約と本文に食い違いがある。
補足：編集した模式図で仕組みを確認する
VISUAL EXPLAINER
図でつかむ、DISRetrievalの仕組み
- 01長文と質問
- 02段落内の談話木
- 03要約と文書全体の木
- 04節点の類似度計算
- 05根拠文
原論文の説明をもとにした模式図です。処理の細部は省略しています。
研究の背景
DISRetrievalは、長い文書から質問に答える根拠文を探す手法だ。一定の長さで文章を区切る検索では、主張とその根拠、対比といった文同士の関係を検索に生かしにくい。
検索した文章を回答用のモデルに渡す方式では、どの文を選ぶかが重要になる。論文や長い読み物のように論旨が段階的に進む文書で、文同士のつながりを使って根拠を選べるかが課題だ。
手法
まず、修辞構造理論（RST）という文章中の対比や要約などの関係を木で表す方法を、文単位の解析に適用する。各段落で文間の木を作り、枝分かれを表す中間節点の文章が一定以上に長ければLLMで要約し、短ければ子の文章をつなぐ。段落を表す文章から文書全体の木を作り、段落内の木と結合する。
各節点の文章と質問を、意味の近さを計算するための数値列に変える。近い節点が元の文なら直接選び、中間節点ならその配下で近い未選択の文を選ぶ。例えば「原因」を問う質問に対し、原因に関係する節を手掛かりに、そこに含まれる具体的な文を根拠として取り出す。
新規性
文の順序や意味の近さだけでなく、対比や要約などの談話関係を使って検索用の木を作る点が著者らの提案だ。段落内の木を、段落間の関係を表す木につなぎ、文書全体を扱う。
中間節点には長さに応じて大規模言語モデル（LLM）の要約を与える。検索ではその節点も手掛かりにするが、根拠として選ぶのは元の文である。
従来手法との違い
flatten-chunkは文の境界を保って最大100語に分割し、flatten-sentenceは文を直接検索する。RAPTORは意味の近い内容をまとめて木を作る。DISRetrievalは文や段落の談話関係から木を組み立てる。
Bisectionは隣接する文を再帰的に二分し、節点の表現強化と階層検索は提案法と共有する。木の作り方を比べる手掛かりになるが、表にはBisectionの回答指標が上回る条件もある。
実験結果
著者らは論文の質問応答データQASPERと長文読解データQuALITYで評価し、方式間で検索文の総語数をそろえた。QASPERは回答のF1-Matchと検索文のトークン単位F1・Recall、QuALITYは正答率を報告する。
400語、SBERTによる埋め込み、UnifiedQA-3Bによる回答では、QASPERのF1-Matchは提案法40.25%、文単位検索37.99%。QuALITYの正答率は58.91%、55.27%だった。一方、Deepseek-v3、400語、OpenAI埋め込みのQASPERでは提案法43.21%、Bisection43.57%。データ分割の詳細は確認できた本文の範囲では分からない。
応用の可能性
編集上の応用案 · 論文が実証した用途とは区別しています。
編集上の応用案：社内の長い調査報告書について、担当者の質問に対応する原文の根拠文を探す。報告書本文と質問を入力し、選ばれた文とその文書内の位置を担当者に示して、原文を確認してもらう。
試行には、文間関係を学習するためのデータと、対象の報告書に付けた質問・正解根拠文のラベルが要る。文書の言語や書式に合わせた解析器の調整も検討する。入力はテキストで、追加のセンサーは想定しない。
応用先の候補からNauhに相談できます。
導入時の検証
導入時の検証案 · 対象データでの再評価が必要です。
導入時の検証案：一種類の長文報告書を対象に、本文、実際の質問、担当者が付けた正解根拠文のラベルを集める。文間関係の学習データには、論文が用いたRST-DT由来の文単位データを出発点として検討し、社内文書への適応が必要か調べる。追加センサーは使わない。
検索文の総語数をそろえ、文単位検索とDISRetrievalを比べる。正解根拠を拾えた割合、不要な文の混入、回答の正確さ、検索時間を記録する。関係解析を誤った事例も確認し、対象文書で使えるか判断する。
限界と課題
確認できた本文の範囲では、著者らが明示した制約は見当たらない。ただし冒頭の別の要約は評価対象を「4データセット」とし、論文本文の実験説明はQASPERとQuALITYの2件を挙げる。評価範囲には記述の食い違いがある。
編集上の検証事項は、文間関係の誤解析による根拠文の取りこぼし、要約の処理量、対象文書の言語・書式への適合である。本文には全条件で優位という説明もあるが、表には例外があるため、導入判断では個別条件を確認したい。
出典
元のタイトル・要旨を確認する（英語）
Beyond Chunking: Discourse-Aware Hierarchical Retrieval for Long Document Question Answering
Existing long-document question answering systems typically process texts as flat sequences or use heuristic chunking, which overlook the discourse structures that naturally guide human comprehension. We present a discourse-aware hierarchical framework that leverages rhetorical structure theory (RST) for long document question answering. Our approach converts discourse trees into sentence-level representations and employs LLM-enhanced node representations to bridge structural and semantic information. The framework involves three key innovations: language-universal discourse parsing for lengthy documents, LLM-based enhancement of discourse relation nodes, and structure-guided hierarchical retrieval. Extensive experiments on four datasets demonstrate consistent improvements over existing approaches through the incorporation of discourse structure, across multiple genres and languages. Moreover, the proposed framework exhibits strong robustness across diverse document types and linguistic settings.
論文本体の取得範囲に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。解説更新：2026-10-01