アーカイブ / LLM
LLMだけで進めたRPG会話は、人のプレイ記録とどう違うか
Collaborative Storytelling and LLM
Collaborative Storytelling and LLMの原論文から掲載した図です。細部はクリックして拡大できます。
原論文の図の説明を読む
Figure 1: LLM Session Scheme
概要
- 著者はLLMの４役で８つのRPGセッションを生成し、４種類の文章群の各８文書と比較した。
- LLMのプレイヤー発話には、動作描写や修飾語が目立つと著者は観察した。
- 確認できた本文では定量結果を確認できず、指標別の数値差は示せない。
補足：編集した模式図で仕組みを確認する
VISUAL EXPLAINER
図でつかむ、Collaborative Storytelling and LLMの仕組み
- 01冒険・人物設定
- 02進行役の導入
- 03３人の順次応答
- 04履歴を進行役へ返す
- 05セッション記録
原論文の説明をもとにした模式図です。処理の細部は省略しています。
研究の背景
ロールプレイングゲーム（RPG）では、進行役が場面を示し、プレイヤーが人物として応じながら物語を作る。やり取りの中心は口頭の会話で、短い返答やその場の反応も物語を動かす。
文章を生成する大規模言語モデル（LLM）もRPGの役を演じられるが、その文章が人のプレイ中の話し方に近いとは限らない。台詞制作に使う場合、物語の筋だけでなく、発話の形も実際の記録と照らす必要がある。
手法
著者はLLaMa3-8b-8192の４つのインスタンスに、進行役１役とプレイヤー３役を割り当てた。進行役には冒険の説明を、各プレイヤーにはCritical Roleの人物説明から作った設定を与え、開始を促す文を入力した。インスタンスは、同じモデルをそれぞれ別の役として動かす単位である。
例えば進行役が町の様子を述べると、最初のプレイヤーはそれを受けて応答する。次の２人は先行する発話を順に受け取り、３人目の後には履歴全体が進行役へ戻る。この循環で作った記録を、語彙や文の構造から人の発話記録などと比較した。
新規性
著者は、大規模言語モデル（LLM）に進行役と３人のプレイヤーを担わせ、人が途中で発話しないRPGセッションを生成した。その記録を、物語として読むだけでなく、話し言葉と書き言葉の特徴から分析した。
比較には日常会話、学術的な発話、人のRPG記録、ファンタジー小説を用いた。発話の語彙と文の構造を複数の文章群に照らし、LLMの表現がどこに位置するかを調べた点が本研究の焦点である。
従来手法との違い
比較対象は、英国国立コーパス（BNC）の日常会話、ELFAの学術的な発話、Critical Roleの人によるRPG記録、ファンタジー小説である。コーパスとは、分析のために集めた文章や発話の集合をいう。
著者は、LLMの進行役による場面描写には、人の進行役と似た部分があると観察した。一方、LLMのプレイヤー発話には動作や表情の説明、修飾語が目立ち、人の記録に見られる短く直接的な応答とは違いがあった。
実験結果
著者はLLMが生成した８セッションを、日常会話、学術的な発話、人のRPG記録、小説の各８文書と比較した。日常会話はBNC、学術的な発話はELFA、人のRPG記録はCritical Roleの書き起こしである。生成には３種類の冒険設定を使い、セッション間で温度設定も変えている。
著者は、LLMの文章が比較対象のどの群とも異なる傾向を示したと報告する。定性的には、プレイヤー発話の動作描写や修飾語の多さを指摘した。確認できた本文の範囲では定量指標の表が途中で切れており、指標別の結果や数値差は確認できない。
応用の可能性
編集上の応用案 · 論文が実証した用途とは区別しています。
編集上の応用案：英語のRPG会話を制作する際、生成済みの台詞を人が点検する補助に使う。入力は冒険設定、人物設定、会話履歴と、比較用の人のプレイ記録である。出力は話者別に台詞と動作描写を分けた確認用一覧とする。
制作担当者が説明の長い発話を見つけ、人物設定を踏まえて台詞を編集する。追加学習用データやセンサーは要らないが、比較記録と話者ラベル、台詞・描写の区別が必要になる。この用途で会話が自然になるかは、研究結果からは確定しない。
応用先の候補からNauhに相談できます。
導入時の検証
導入時の検証案 · 対象データでの再評価が必要です。
導入時の検証案：英語の冒険設定と人物設定を用意し、短い試作セッションを生成する。比較用には人のRPG書き起こしを集め、進行役とプレイヤーの話者ラベルを付ける。台詞と動作描写も区別して記録する。
編集前のAI発話を基準に、担当者が台詞を編集した版と比べる。動作描写を含む発話の割合、発話の長さ、人物設定との整合性を同じ手順で確認し、自然さも人が判定する。追加学習用データやセンサーは使わず、記録の整理と編集を適応作業とする。
限界と課題
著者は、生成されたプレイヤーの動作や表情の描写に定型的な傾向を観察した。また、別のセッションで同じ人物名が繰り返され、進行役の冒頭表現の一部の違いには追加調査が必要だとしている。
編集上の検証事項は、冒険設定や人物設定を替えた場合、また英語以外の場合にも同じ傾向が出るかである。セッション間では温度設定と冒険内容の両方が変わる例があるため、表現の差を温度だけの効果として扱えない。
出典
元のタイトル・要旨を確認する（英語）
Collaborative Storytelling and LLM: A Linguistic Analysis of Automatically-Generated Role-Playing Game Sessions
Role-playing games (RPG) are games in which players interact with one another to create narratives. The role of players in the RPG is largely based on the interaction between players and their characters. This emerging form of shared narrative, primarily oral, is receiving increasing attention. In particular, many authors investigated the use of an LLM as an actor in the game. In this paper, we aim to discover to what extent the language of Large Language Models (LLMs) exhibit oral or written features when asked to generate an RPG session without human interference. We will conduct a linguistic analysis of the lexical and syntactic features of the generated texts and compare the results with analyses of conversations, transcripts of human RPG sessions, and books. We found that LLMs exhibit a pattern that is distinct from all other text categories, including oral conversations, human RPG sessions and books. Our analysis has shown how training influences the way LLMs express themselves and provides important indications of the narrative capabilities of these tools.
論文本体の取得範囲に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。解説更新：2026-10-01