アーカイブ / LLM
人格設定でLLMの道徳判断はどう変わるか――自動運転の仮想場面で人間の回答と比較
Persona-dependent LLM Alignment
Persona-dependent LLM Alignmentの原論文から掲載した図です。細部はクリックして拡大できます。
原論文の図の説明を読む
Figure 7: Sociodemographic distribution for survey participants in Awad et al. (2018) . Empty values were filtered and for the Age category, participants were filtered to be within the [18, 75] range.
概要
- 七分類の人格を指示文で与え、LLMによる自動運転の仮想的な救助選択を人間の属性別回答と比較した。
- 九つの判断項目で対になる人格間の距離を測り、著者らは政治的立場の設定による変動を報告した。
- 結果は仮想的な二者択一場面でのもの。実務での利用には、対象に合う場面と人間の比較データによる検証が要る。
補足：編集した模式図で仕組みを確認する
VISUAL EXPLAINER
図でつかむ、Persona-dependent LLM Alignmentの仕組み
- 01救助選択の場面文
- 02人格指示を付与
- 03LLMが二択に回答
- 04判断傾向を比較
原論文の説明をもとにした模式図です。処理の細部は省略しています。
研究の背景
この研究は、自動運転車が誰を救うかを文章で問う仮想場面で、LLMの選択が人格設定によってどう変わるかを調べる。人格設定とは、回答前に「どのような人物として答えるか」を指示することだ。
道徳的な判断に関わる用途では、同じ場面への回答が指示された属性によって動くかを把握する必要がある。著者らは、人間の属性別回答との比較から、LLMの判断の近さと変動を調べた。
手法
著者らは年齢、学歴、性別、所得、政治的立場、宗教、文化の七分類で、それぞれ対になる人格を設定した。例えば「保守的な人物」として答える指示を救助選択の場面文の前に置き、LLMの回答を集める。同じ場面について、人格を指定しない回答も基準として取得する。
回答は九つの判断項目ごとにAMCEで表す。AMCEは、ほかの場面属性を考慮したうえで、ある属性が選択されやすさに与える平均的な影響を示す値である。LLMと人間の対応集団の値を比較し、対になる人格間では九つのAMCEの距離をMDDとして計算する。MDDが小さいほど、二つの人格設定での選択傾向は近い。
新規性
著者らは、年齢や政治的立場などを指示文で与えたときのLLMの判断を、人間の対応する属性集団と比較した。モデル全体の傾向に加え、人格設定ごとの変化を調べる点に特徴がある。
対になる人格設定間の差を、九つの判断項目におけるAMCEの距離として表すMDDを定義した。著者らは、この尺度を使い、特に政治的立場の設定でLLMの判断が動くと報告している。
従来手法との違い
比較対象はMoral Machine実験における人間の属性別回答と、人格を指定しない同じLLMの回答である。著者らは、各人格を与えたLLMと対応する人間集団のAMCEの距離を測り、距離が小さいほど選択傾向が近いと扱った。
さらに、保守的と進歩的など対になる人格間のMDDを、人間の対応する集団間の値と比べた。人間集団への近さと、人格設定を変えたときの判断の変動は別の評価であり、結果は試したモデルと仮想場面に限られる。
実験結果
著者らは、条件を制約したランダム生成による一万件の道徳判断場面で、GPT-4o、GPT-3.5、Llama2を評価した。比較にはMoral Machine実験の人間の属性別回答を使い、人格を指定しない条件と七分類・各二種類の人格設定を調べた。
九つの判断項目のAMCEについて、人間との距離は小さいほど近い。人格指定なしでの距離はGPT-4oが0.852、GPT-3.5が1.015、Llama2が1.225だった。著者らはGPT-4oの保守的設定と進歩的設定のMDDを0.48と報告し、政治的立場による判断の変動を指摘している。
応用の可能性
編集上の応用案 · 論文が実証した用途とは区別しています。
編集上の応用案：自動運転に関する判断支援機能の開発段階で、人格指示に対する回答の変動を監査する。入力は二者択一の場面文、対になる人格指示、比較用の人間の属性別回答とし、出力は設定別の選択傾向と、好みの向きが反転した項目の一覧とする。
追加学習用データや車載センサーを使わない文章上の監査を想定する。人間との比較には、場面の属性、回答者の集団属性、選択先の記録または対応する集計値が要る。実務への転用時には、対象業務の場面を作り、比較する集団と判断項目を定め直す。
応用先の候補からNauhに相談できます。
導入時の検証
導入時の検証案 · 対象データでの再評価が必要です。
導入時の検証案：対象業務に近い二者択一の場面文を用意し、同じ文を人格指定なしと対になる人格指定付きで入力する。追加学習は行わず、元データとして場面文と比較用の人間の回答を用意する。必要なラベルは場面の属性、回答者の集団属性、選択先であり、この文章上の試験にセンサーは使わない。
人格指定なしの回答を基準に、設定別の選択率、項目ごとの好みの向き、回答が得られない件数を記録する。人間の対応集団との距離と人格間の差を測り、場面文を言い換えても結果が続くか確かめる。実務向けには場面と比較集団を調整し、許容する変動幅を事前に決める。
限界と課題
著者らは、七分類をそれぞれ対になる人格で表す方法が人間の属性の複雑さを単純化すること、人格を一種類の指示文で設定したことを限界として挙げる。また、自動運転中心のMoral Machine場面だけでは、別種の道徳的判断を十分に扱えないと述べている。
編集上の検証事項は、指示文の言い換えや複数属性の組み合わせでも差が続くか、比較用の人間の回答が対象地域や用途に合うかである。仮想的な二者択一場面で人間の傾向に近いことだけでは、実際の個別判断の妥当性は確認できない。
出典
元のタイトル・要旨を確認する（英語）
Exploring Persona-dependent LLM Alignment for the Moral Machine Experiment
Deploying large language models (LLMs) with agency in real-world applications raises critical questions about how these models will behave. In particular, how will their decisions align with humans when faced with moral dilemmas? This study examines the alignment between LLM-driven decisions and human judgment in various contexts of the moral machine experiment, including personas reflecting different sociodemographics. We find that the moral decisions of LLMs vary substantially by persona, showing greater shifts in moral decisions for critical tasks than humans. Our data also indicate an interesting partisan sorting phenomenon, where political persona predominates the direction and degree of LLM decisions. We discuss the ethical implications and risks associated with deploying these models in applications that involve moral decisions.
論文本体の取得範囲に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。解説更新：2026-10-01