アーカイブ / LLM / RAG
概念の別名や親子関係をたどり、離れた文から答えを探すLGM
Language Graph Model (LGM)
Language Graph Model (LGM)の原論文から掲載した図です。細部はクリックして拡大できます。
原論文の図の説明を読む
Figure 1: Cognitive capacity and expandable knowledge
概要
- LGMは文書から継承・別名・構成の関係を抽出し、関連する原文を反復検索して回答に使う。
- 著者らの比較ではHotpotQAとMusiqueの平均F1が比較対象中最高だったが、MusiqueのLlama条件ではGraphRAG 1を下回った。
- 関係を確かめる反省処理は任意で、公開データセットの比較実験では無効にされている。
補足：編集した模式図で仕組みを確認する
VISUAL EXPLAINER
図でつかむ、Language Graph Model (LGM)の仕組み
- 01文書と質問
- 02文と概念をグラフ化
- 03関連概念の文を検索
- 04根拠文を選び回答
原論文の説明をもとにした模式図です。処理の細部は省略しています。
研究の背景
LGMは、質問に書かれた語だけでは見つけにくい説明を、概念の関係から探して回答に使う手法である。例えば「リンゴ」への回答に「果物」についての文が必要でも、リンゴという語だけの検索では拾えない場合がある。
RAGは外部文書を検索して言語モデルに渡す方式である。複数の文をつないで答える質問では、必要な記述が離れた場所に散らばる。入力できる文章の長さにも上限があるため、関連する原文を選ぶことが課題になる。
手法
まず文書を節と文に分け、原文と文同士のつながりを保存するグラフ、概念間の関係を保存するグラフを作る。言語モデルは「リンゴは果物の一種」から継承関係を、ほかの文から別名や構成要素の関係を抽出する。候補の関係を別の文で確かめる反省処理は任意である。
質問から名詞の基本形を取り、別名・親子関係・構成要素へ検索を広げて原文を集める。集めた文を入力長に収まる単位へ分け、質問を支える文を選んで統合する。回答に足りない概念があれば再検索する。支持文が長すぎて圧縮の上限に達した場合は、質問との類似度で文を選び直す。
新規性
LGMが提案するのは、概念に結び付く文を検索し、継承・別名・構成という関係で検索範囲を広げる方法である。質問に出た語を含む文だけでなく、その親概念や構成要素について書かれた文も候補にする。
抽出した関係を別の文で確かめる「反省」処理も備える。ただし、この処理は公開データセットでの比較時には無効だった。比較結果を反省処理による改善と解釈することはできない。
従来手法との違い
一般的な断片検索型のRAG（検索拡張生成）は、質問に似た文書片を選び、言語モデルに渡す。LGMは文書から概念間の関係を作り、質問中の概念を起点に関連する原文を集める。複数の記述をつなぐ質問に向けた検索方法の違いである。
著者らはGraphRAG、LightRAG、FastRAG、Difyと比較した。二つの回答モデルにわたる平均F1ではLGMが両データセットで最高だった。一方、MusiqueをLlamaで解いた条件では、GraphRAG 1の63.16％に対しLGMは63.07％だった。
実験結果
著者らはHotpotQAの開発用データ328問とMusiqueの開発用データ241問を、DeepSeek v3-0324とLlama-3.3-70B-Instruct-AWQで評価した。正誤は質問・標準解答・生成回答をDeepSeek v3-0324に判定させ、F1を報告している。
二つの回答モデルにわたる平均F1は、HotpotQAでLGMが88.26％、GraphRAG 1が85.57％、Musiqueでそれぞれ65.60％、64.07％だった。HotpotQAのDeepSeek条件では、完全構成が89.46％、反復検索を除くと82.82％だった。公開比較で反省処理は無効だった。
応用の可能性
編集上の応用案 · 論文が実証した用途とは区別しています。
編集上の応用案：英語の社内保守手順書を対象に、部品の別名で書かれた注意事項も含めて交換前の確認項目を尋ねる。入力は承認済みの手順書本文、出力は回答と参照した原文とし、担当者が根拠を確認してから使う。
用語の別名、上位分類、構成部品を文書から抽出し、社内用語に合うか人が点検する。追加のモデル学習用データやセンサー入力は想定しない。効果を調べるには、担当者が正解と根拠文を付けた質問が必要である。
応用先の候補からNauhに相談できます。
導入時の検証
導入時の検証案 · 対象データでの再評価が必要です。
導入時の検証案：承認済みの英語版保守手順書を少量取り込み、担当者が別名や構成部品をまたぐ質問を作る。各質問に正解と必要な根拠文のラベルを付ける。追加のモデル学習用データとセンサー入力は使わず、文書内の用語表に合わせて抽出関係を人が点検する。
同じ文書・質問・回答モデルを使う単純な文書片検索を比較対象にする。正答率、必要な根拠文を拾えた割合、誤った概念関係の件数、文書更新後の修正時間を測る。回答できなかった質問は、検索漏れか原文に答えがないかを分けて確認する。
限界と課題
著者らは、反省処理が質の低い文書から生じた誤った関係を除く一方、質の高い文書では関係の網羅性を下げ得るとして、任意の処理にしている。また、支持文の圧縮が反復上限に達すると、質問との類似度で文を選び直す。長い文章を常に切り捨てず処理できるわけではない。
編集上の検証事項は、社内文書での関係の誤抽出、文書更新後のグラフ修正、回答に必要な根拠文の欠落である。公開比較では反省処理を無効にしているため、導入先で有効にする場合の回答品質と処理負荷は別途確かめたい。
出典
元のタイトル・要旨を確認する（英語）
LGM: Enhancing Large Language Models with Conceptual Meta-Relations and Iterative Retrieval
Large language models (LLMs) exhibit strong semantic understanding, yet struggle when user instructions involve ambiguous or conceptually misaligned terms. We propose the Language Graph Model (LGM) to enhance conceptual clarity by extracting meta-relations-inheritance, alias, and composition-from natural language. The model further employs a reflection mechanism to validate these meta-relations. Leveraging a Concept Iterative Retrieval Algorithm, these relations and related descriptions are dynamically supplied to the LLM, improving its ability to interpret concepts and generate accurate responses. Unlike conventional Retrieval-Augmented Generation (RAG) approaches that rely on extended context windows, our method enables large language models to process texts of any length without the need for truncation. Experiments on standard benchmarks demonstrate that the LGM consistently outperforms existing RAG baselines.
論文本体の取得範囲に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。解説更新：2026-10-01