表示
超・人工知能研究所 Super AI Research Lab トップへ超・人工知能研究所AI Research Lab / ぱそ太郎工事中

since
平成38年9月29日

← 検索結果に戻る

文書の節や会話の順序で検索範囲を先に限定、NativeScopeは基準位置の正確さが鍵

NativeScope

保存した記事を見るこのブラウザに保存します。無料会員で端末間の同期・フォルダ整理
原論文の図

NativeScopeの原論文から掲載した図です。細部はクリックして拡大できます。

原論文の図の説明を読む

Figure 1: NativeScope pipeline. A decomposed query and correct anchor drive a native relation operator. Eligible units are mapped to candidate text chunks by character-interval overlap. NativeScope and NS-FullQ share the same scoping stage and differ only in within-scope ranking input. Gold target locations and answers are not exposed to the ranker.

出典:NativeScope / arXiv ↗

概要

  • 質問を基準位置、関係、探す内容へ分け、保存済みの構造で候補を絞ってから意味検索する。
  • 正しい基準位置を与えた200件で、文書89.28%、会話記憶72.50%の再現率を報告した。
  • 基準位置を自動推定すると会話記憶の再現率は35.50%へ低下し、通常の検索を下回った。
補足:編集した模式図で仕組みを確認する

VISUAL EXPLAINER

図でつかむ、NativeScopeの仕組み

左から右へ読む
  1. 01質問と基準位置
  2. 02保存構造で範囲選択
  3. 03重なる文章片を抽出
  4. 04意味の近さで順位付け

原論文の説明をもとにした模式図です。処理の細部は省略しています。

研究の背景

NativeScopeは、選択した段落と同じ節や、ある発言より前の会話など、位置関係を含む質問の検索範囲を先に決める。意味の似た文章を全体から集めるだけでは、別の節や別の会話にある似た表現が混ざりやすい。

文書の節ID、会話のセッション、保存順序は元のシステムが既に持つ情報だ。本研究は新しい階層を推測するのではなく、その構造を検索に渡す。ただし検索の基準となる位置が正しく分かることを主要な条件に置く。

手法

質問を基準A、関係r、対象Bへ分ける。同じ所属なら基準と同じ節やセッションを、前後なら保存順序で最大八単位先までを選ぶ。文書では段落、記憶では発言が単位であり、前後は一般的な出来事の時系列推論ではない。

選ばれた単位と文字範囲が重なる文章片だけを候補にし、対象Bとの意味の近さで並べる。例えば選択した発言の前に説明された予算を探すなら、前側の発言へ範囲を絞ってから予算に近い内容を選ぶ。重複文字を除いた返却文脈は1,024トークン以内に収める。

新規性

どこで探すかを元の構造に任せ、何を探すかを意味検索に任せる分担を明示した点が中心だ。節や順序が異なっても文章が同じなら、文章だけの検索ではその違いを使えないという問題に対応する。

同じ候補範囲を質問全文で順位付けするNS-FullQも設ける。候補を絞る効果と、検索語を短くする効果を分離し、改善の主因を調べている。

従来手法との違い

全体を意味検索するDense RAG、基準の近くを優先するAnchor Window、NS-FullQと比較した。文書と会話の双方で構造を使う二方式が高い再現率を示したが、NativeScopeとNS-FullQの差は確定的ではない。

会話の近傍方式は2.00%だったものの、評価では対象が基準から四単位以上離れ、長い発言で予算が尽きる設計になっている。近傍検索一般の弱さを示す結果としては扱えない。

実験結果

著者はQASPERとLongMemEvalから各100件の制御された質問を作った。正しい基準位置を与える条件では、NativeScopeの元単位の再現率が文書89.28%、会話72.50%となり、Dense RAGを42.75、22.00ポイント上回った。

NS-FullQとの差は1.50、4.00ポイントで、信頼区間はゼロを含む。自動で基準を一つ選ぶ条件では会話の再現率が35.50%となり、Dense RAGの50.50%を下回る。正しい位置の条件は、自動推定の失敗を観察した後に導入された。

応用の可能性

編集上の応用案 · 論文が実証した用途とは区別しています。

編集上の応用案:議事録ビューアで、利用者が選んだ発言より前に出た決定理由を検索する。入力は選択発言の安定したID、前という関係、探したい論点で、出力は該当候補とその原文位置だ。

人の選択を基準にできる画面なら、位置の自動推定の失敗を減らせる。対象が範囲外にもある可能性に備え、全体検索の候補も確認できるようにし、候補が少ないことを正解の保証として扱わない運用が考えられる。

応用先の候補からNauhに相談できます。

導入時の検証

導入時の検証案 · 対象データでの再評価が必要です。

導入時の検証案:節や発言のIDを保持した小規模文書集で、基準位置が正しい質問と誤った質問を別々に用意する。検索語、文章片、文脈予算を固定し、全体検索と範囲限定を比較する。

必要な原文の回収率、対象を候補から除外した割合、最終回答の正しさを測る。自動で位置を選ぶ場合は、その精度と検索精度を分けて記録する。曖昧な選択や節情報の欠落に対する全体検索への戻し方も試験対象にする。

限界と課題

著者は評価が事後に設定された条件付き分析で、各領域100件の人工的に調整した質問であることを明示する。独立した人による再注釈はなく、強い字句検索や再順位付けとの比較もない。生成回答の評価は未完了で、速度や費用も測っていない。

編集上の確認課題は、自然な質問や誤った構造情報での挙動だ。基準位置の誤りが正解文書の完全な除外につながるため、再現率の改善を無条件のRAG性能改善として扱わず、位置確認の仕組みと一緒に評価したい。

応用先の候補
研究内容と応用案に基づく分類です。業界での導入実績を示すものではありません。

出典

元のタイトル・要旨を確認する(英語)

NativeScope: Relation-Localized Retrieval over Native Topology with a Correct Anchor

Dense retrieval usually ranks text chunks by their semantic similarity to a question. This ignores structure that many data systems already store, including section membership, session boundaries, and native order. We propose NativeScope, a scope-then-rank method for queries with a known anchor and relation. It represents a query as q -> (A, r, B). The anchor A and relation r select native units through belonging, before, or after operators, and the target term B ranks only chunks that overlap the selected scope. An internal variant, NS-FullQ, ranks the same candidates with the full question. We evaluate both methods on 200 controlled document and memory records derived from QASPER and LongMemEval under a 1,024-token budget. NativeScope attains native-unit recall of 89.28 percent for documents and 72.50 percent for memories, improving over instance-wide Dense RAG by 42.75 and 22.00 percentage points. NS-FullQ reaches 87.78 percent and 68.50 percent; its differences from NativeScope are inconclusive, locating the primary gain in relational scoping rather than the shorter ranking query. With automatic Top-1 anchors, memory recall falls to 35.50 percent. NativeScope is therefore effective when anchor coordinates and native relations are reliable, but hard scoping inherits errors from the localization interface.

論文本体の取得範囲に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。収集:2026-10-10