アーカイブ / LLM / RAG
検索文書とモデルの知識の食い違いを測り、回答と保留を学ぶERA
ERA
ERAの原論文から掲載した図です。細部はクリックして拡大できます。
原論文の図の説明を読む
Figure 2 . Overview of the ERA . The model consists of three components: (1) Contextual Evidence Quantification, where evidential heads project representations from both RAG and Parametric paths into Dirichlet distributions ( 𝜶 \boldsymbol{\alpha} ); (2) Knowledge Conflict Quantification, which utilizes Dempster-Shafer Theory to fuse beliefs and compute a conflict score κ \kappa ; and (3) Uncertainty-Aware Abstention Mechanism, which modulates the optimization objective based on the detected conflict to mitigate hallucinations.
概要
- ERAは検索文書あり・なしの二経路で証拠の分布を推定し、その対立を回答・保留の学習に使う。
- 著者は標準的なRAGベンチマークとWikipediaの出来事に基づくデータで改善を報告するが、確認できた本文の範囲に結果の数値はない。
- 実務での検証には正答、文書の支持を示すラベル、回答・保留の選好例を用意し、通常のRAGと同じ質問群で比較する必要がある。
補足：編集した模式図で仕組みを確認する
VISUAL EXPLAINER
図でつかむ、ERAの仕組み
- 01質問・検索文書
- 02二経路で証拠を推定
- 03支持・不支持に集約
- 04対立度で学習を調整
- 05回答または保留
原論文の説明をもとにした模式図です。処理の細部は省略しています。
研究の背景
ERAは、検索文書を使う質問応答で、答えるか保留するかの判断を学ぶ手法である。検索拡張生成（RAG）では、モデルが学習時に得た知識と検索文書が食い違うと、誤った根拠で答えるおそれがある。
著者は、一つの確信度だけでは、知識が足りない不確かさと、情報自体が曖昧な不確かさを区別しにくいと問題提起する。この違いを捉え、答えられる質問への不要な保留と、根拠のない回答の双方を減らすことが課題となる。
手法
ERAは同じ質問を、検索文書ありと文書なしの二経路でモデルに入れる。各経路の内部表現から、モデル自身と文書がそれぞれ正答を支えるかで分けた四区分の証拠量を推定する。ディリクレ分布は、区分ごとの割合に残る不確かさも表す分布で、証拠量から各区分への支持と不確かさを求める。
次に区分を支持・不支持にまとめ、デンプスター・シェーファー理論という証拠の食い違いを扱う枠組みで、二経路の対立度を計算する。これを選好学習、つまり望ましい応答を望ましくない応答より選ばせる学習の調整に使う。例えばモデルだけでは答えられず文書が正答を支える区分では、正答を優先し、誤答や不要な保留を避けるように学ぶ。
新規性
ERAの新規性として著者が主張するのは、回答への自信を単一の値で表す代わりに、検索文書あり・なしの入力から四つの知識区分に対する証拠の分布を学ぶ点である。知識不足と、情報自体の曖昧さを区別する狙いがある。
さらに、二経路の証拠の食い違いを対立度として算出し、回答と保留の選好学習を調整する。検索結果との対立を、学習に使う明示的な信号にしたことが提案の中心である。
従来手法との違い
著者が論じる従来の方法には、出力確率を信頼度に使う方法、複数の推論結果から多数決する方法、回答と保留の選好を学ぶ方法がある。著者は、単一の信頼度では知識不足と情報の曖昧さを分けにくく、保留の学習は特定の拒否パターンに偏り得ると指摘する。
ERAは、質問だけの入力と検索文書を添えた入力の証拠を別々に推定し、その対立を学習に反映する。提示された範囲に比較結果の表はなく、個々の比較手法に対する差の大きさまでは判断できない。
実験結果
著者は標準的なRAGベンチマークと、Wikipediaの出来事から作成した汎化評価用データで、比較手法より回答と保留の両立および確信度の較正が良いと報告する。較正とは、示した確信の強さが実際の正答しやすさに合うことを指す。
本文に示された指標は、回答の適合率・再現率・F1、雑音を含む文書でのDenoise Rate、正答を支える文書でのContext Util.、保留の適合率・再現率・F1、回答と保留のF1を合わせたOverall F1である。正答判定には語句の一致を使う。確認できた本文の範囲では、データ件数、結果の数値、較正指標の名称、比較条件の詳細は示されていない。
応用の可能性
編集上の応用案 · 論文が実証した用途とは区別しています。
編集上の応用案：社内規程への質問応答で、社員の質問と検索された規程文書を入力し、回答または保留を出力する。保留した質問は規程の担当者に回し、回答には担当者が根拠文書を確認する工程を置く。効果は未検証の応用仮説である。
適応には、利用対象の規程文書、正答付きの質問、文書が正答を支えるかのラベル、回答と保留の選好例が必要になる。文書更新後は検索結果とラベルを見直す。この文章入力の案ではセンサーは使わない。
応用先の候補からNauhに相談できます。
導入時の検証
導入時の検証案 · 対象データでの再評価が必要です。
導入時の検証案：一種類の社内規程に対象を絞り、規程文書、質問と正答、取得文書が正答を支えるかのラベルを用意する。文書なしでもモデルが答えられるかを確認し、四区分と回答・保留の選好例を作る。文書の更新に合わせ、検索設定と学習用の例を見直す。センサーは使わない。
同じ質問群と文書を使う通常のRAGを比較基準にする。回答と保留それぞれの適合率・再現率・F1、Overall F1を測り、文書が正答を支える場合と支えない場合も分ける。採用の基準値は業務側の許容範囲から決める。
限界と課題
著者は従来法の過信や保留パターンへの過度な適合を論じている。一方、確認できた本文の範囲では、ERA自身について著者が報告した失敗条件や運用上の制約は見当たらない。改善の範囲を数値で確かめる結果表もない。
編集上の検証事項は、正答を支える文書が検索されない場合、検索文書同士が矛盾する場合、文書の支持判定を誤る場合の挙動である。不要な保留と根拠のない回答を別々に測り、対象業務で許容できるか確かめる必要がある。
出典
元のタイトル・要旨を確認する（英語）
ERA: Evidence-based Reliability Alignment for Honest Retrieval-Augmented Generation
Retrieval-Augmented Generation (RAG) grounds language models in factual evidence but introduces critical challenges regarding knowledge conflicts between internalized parameters and retrieved information. However, existing reliability methods, typically relying on scalar confidence, fail to explicitly distinguish between epistemic uncertainty and inherent data ambiguity in such hybrid scenarios. In this paper, we propose a new framework called ERA (Evidence-based Reliability Alignment) to enhance abstention behavior in RAG systems by shifting confidence estimation from scalar probabilities to explicit evidence distributions. Our method consists of two main components: (1) Contextual Evidence Quantification, which models internal and external knowledge as independent belief masses via the Dirichlet distribution, and (2) Quantifying Knowledge Conflict, which leverages Dempster-Shafer Theory (DST) to rigorously measure the geometric discordance between information sources. These components are used to disentangle epistemic uncertainty from aleatoric uncertainty and modulate the optimization objective based on detected conflicts. Experiments on standard benchmarks and a curated generalization dataset demonstrate that our approach significantly outperforms baselines, optimizing the trade-off between answer coverage and abstention with superior calibration.
論文本体の取得範囲に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。解説更新：2026-10-01