アーカイブ / LLM / AI Agent / RAG
世界価値観調査の回答と価値分野の関係から、地域別の設問を予測するOG-MAR
OG-MAR
OG-MARの原論文から掲載した図です。細部はクリックして拡大できます。
原論文の図の説明を読む
Figure 1 : Overall architecture of the OG-MAR framework. The pipeline illustrates the overall architecture of OG-MAR . It begins with Data Preprocessing & Ontology Construction (left). During inference, for a given query and target demographics, it performs Ontology & Demographic Retrieval (center) to gather relevant context. This context is used to instantiate multiple Persona Agents (top right) whose outputs are synthesized by a Judgment Agent (bottom right) to produce the final, culturally aligned prediction.
概要
- OG-MARはWVSの個人別回答を価値分野ごとに要約し、分野間の関係と属性が近い回答者を検索する。
- 複数の回答者像から生成した回答を、理由の根拠と価値分野の関係への整合性を重視して判定する。
- 著者らの六調査平均の正解率はGemini 2.5 Flash Liteで0.6308だったが、すべての地域・モデルで比較手法を上回ったわけではない。
補足：編集した模式図で仕組みを確認する
VISUAL EXPLAINER
図でつかむ、OG-MARの仕組み
- 01設問と対象属性
- 02分野・回答者検索
- 03回答者別の回答生成
- 04判定役の選択肢予測
原論文の説明をもとにした模式図です。処理の細部は省略しています。
研究の背景
大規模言語モデル（LLM）が社会規範や価値観の設問に答えるとき、学習文書に多い地域の見方へ回答が偏るおそれがある。地域別の回答傾向を扱うには、対象者の属性と、調査で観測された価値観を結び付けることが課題になる。
世界価値観調査（WVS）には、個人別の回答と国・年齢・教育などの属性がある。著者らは、回答を検索するだけでは価値分野同士の関係を推論に反映しにくいとして、この情報の整理と利用を試みた。
手法
OG-MARは設問と対象者の属性を受け取り、調査回答を手掛かりに選択肢を予測する。準備段階でWVSの個人別回答を12の上位分野と計76の分類に沿って要約し、分野間の関係を整理した「オントロジー」を作る。関係の候補は専門家が設計した問いから生成し、人が内容を確認する。
例えば地域と年齢を指定した設問では、関連する分類とその関係、属性が近い回答者の要約を検索する。回答者ごとのエージェントが選択肢と理由を生成し、判定役がそれらを読んで最終回答を選ぶ。判定役に分類間の関係や個人別要約が直接渡るのではなく、各エージェントの出力を通じて伝わる。
新規性
OG-MARの提案は、世界価値観調査の回答を個人別・価値分野別に要約し、分野間の関係と組み合わせて推論に使う点にある。分野間の関係は、専門家が設計した問いを基に候補を生成し、人が確認する。
推論時には属性が近い複数の回答者をそれぞれのエージェントに対応させる。最終判定役は単純な多数決をせず、生成された理由の根拠と価値分野の関係への整合性を優先する。
従来手法との違い
著者らは、追加情報なしで答えるゼロショット、文化的な役割の指定、複数回答の多数決、エージェント間の討論、調査回答を検索するValuesRAGと比較した。主実験では、ValuesRAGの検索設定をそろえたとしている。
ValuesRAGが検索した調査情報を回答の根拠に使うのに対し、OG-MARは個人別の価値要約と分野間の関係を複数のエージェントに渡す。ただし、表の正解率ではOG-MARがすべての地域・モデルでValuesRAGを上回るわけではない。
実験結果
著者らはWVSを検索元とし、EVS、GSS、CGSS、ISD、Afrobarometer、LAPOPの六調査から、クラスタリングに基づいて計2,000件を選んだ。設問を二値判断として扱い、正解率を報告した。生成には四つのLLMを使い、温度設定は0とした。
六調査平均の正解率は、Gemini 2.5 Flash LiteでOG-MARが0.6308、ValuesRAGが0.5731、GPT-4o-miniでは順に0.6007、0.5961だった。一方、GPT-4o-miniのGSSでは順に0.5480、0.5589だった。これらは著者らの評価条件での結果であり、地域ごとの優劣は一様ではない。
応用の可能性
編集上の応用案 · 論文が実証した用途とは区別しています。
編集上の応用案：国際調査チームが、地域別の設問案を検討する際に回答傾向の試算画面を使う。設問、選択肢、対象地域や年齢などの属性を入力し、予測した選択肢と、参照された回答者像・価値分野の関係を確認する。
この用途には、対象に合う調査の個人別回答と属性、価値分野を付けた設問データが必要になる。地域固有の設問表現を分類に対応付け、分野間の関係を担当者が点検する。出力は調査設計の検討材料であり、実際の回答者の意思を示すものではない。
応用先の候補からNauhに相談できます。
導入時の検証
導入時の検証案 · 対象データでの再評価が必要です。
導入時の検証案：利用予定の地域調査から、設問・選択肢・正解となる回答ラベル・回答者属性をそろえた評価集合を作る。参照用の個人別調査回答も用意し、価値分野を選ぶ分類器の学習に必要な分野ラベルを確認する。分野間の関係は担当者が点検する。
同じ設問と属性で、調査回答を検索して答える方法とOG-MAR型の方法を比べる。正解率を地域別に測り、参照された回答者の属性、生成理由と根拠の一致、検索人数を変えた際の変動を記録する。元の回答尺度や選択肢を扱えるかも確かめる。
限界と課題
著者らが示した評価範囲は、六つの地域調査から選んだ2,000件を二値判断として扱う設定である。回答尺度の中点による二値化や、選択肢を二群にまとめる処理を使うため、元の尺度での使い勝手は別途確かめる必要がある。
編集上の検証事項：少数意見が要約に残るか、似た属性の回答者検索に偏りがないか、判定役の理由が参照情報に沿うかを調べたい。また、関係の検索方法は本文の説明と実装節の記述が異なるため、再現時に確認が要る。
出典
元のタイトル・要旨を確認する（英語）
Toward Culturally Aligned LLMs through Ontology-Guided Multi-Agent Reasoning
Large Language Models (LLMs) increasingly support culturally sensitive decision making, yet often exhibit misalignment due to skewed pretraining data and the absence of structured value representations. Existing methods can steer outputs, but often lack demographic grounding and treat values as independent, unstructured signals, reducing consistency and interpretability. We propose OG-MAR, an Ontology-Guided Multi-Agent Reasoning framework. OG-MAR summarizes respondent-specific values from the World Values Survey (WVS) and constructs a global cultural ontology by eliciting relations over a fixed taxonomy via competency questions. At inference time, it retrieves ontology-consistent relations and demographically similar profiles to instantiate multiple value-persona agents, whose outputs are synthesized by a judgment agent that enforces ontology consistency and demographic proximity. Experiments on regional social-survey benchmarks across four LLM backbones show that OG-MAR improves cultural alignment and robustness over competitive baselines, while producing more transparent reasoning traces.
論文本体の取得範囲に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。解説更新：2026-10-01