アーカイブ / LLM
AIの下書きを本人が直すと、文章はどこまで自分らしくなるか
Post-Editing LLM-Generated Text for Personal Style
Post-Editing LLM-Generated Text for Personal Styleの原論文から掲載した図です。細部はクリックして拡大できます。
原論文の図の説明を読む
Figure 1: Study overview: pre-survey, tutorial, two randomized task blocks (treatment and control) with task difficulty surveys, and a post-survey. See Appendix D for interface screenshots.
概要
- 81人を含む分析で、後編集した文章は編集前より本人の自筆文に文体が近づいた。
- 修正稿は自筆文よりAI文に文体が近く、参加者間の文体の多様さも自筆文より低かった。
- 本人が感じる自分らしさとモデルによる文体の測定値の対応は弱く、両方を確認する必要がある。
補足：編集した模式図で仕組みを確認する
VISUAL EXPLAINER
図でつかむ、Post-Editing LLM-Generated Text for Personal Styleの仕組み
- 01本人が書く要点
- 02AIの下書き
- 03本人が後編集
- 04修正稿
原論文の説明をもとにした模式図です。処理の細部は省略しています。
研究の背景
AIの下書きを本人が直せば、伝えたい内容を文章にしつつ、自分の言葉遣いも反映できるかもしれない。ただし、結婚の誓いの言葉や謝罪文のように、表現そのものが本人らしさに関わる文章では、整った下書きがそのまま適切とは限らない。
著者らは、生成された文章を人が直す「後編集」に着目した。修正によって文体がどう変わるかに加え、書き手自身が完成稿を自分らしいと感じるかを調べている。
手法
参加者は文章課題ごとに書く内容の要点を用意した。AIを使う条件では、その要点からGPT-o4-miniが下書きを生成し、本人が文体を直した。別の課題の自筆条件では、AI文を見ずに要点から文章を書いた。例えば謝罪文なら、伝える事情を決めてから、生成文の言葉遣いを本人が見直す流れである。
著者らはLUARというモデルで各文章の文体を数値の列に表し、列の向きの近さを示す「コサイン類似度」で比較した。未修正稿と修正稿が本人の自筆文やAI文にどれほど近いかを測り、参加者が答えた自分らしさの評価とも照合した。この数値だけで内容の正確さを判定する方法ではない。
新規性
著者らが調べたのは、書き手本人がAIの下書きを後編集すると、個人の文体がどこまで反映されるかである。本人の自筆文、未修正のAI文、修正稿を比べ、本人による評価も集めた。
修正稿は自筆文に近づいたが、AI文との文体上の近さも残った。測定された類似度と本人が感じる自分らしさを併せて示した点が、この研究の中心である。
従来手法との違い
基準となるのは、参加者がAI文を見ずに要点から書いた文章と、参加者の要点から生成された未修正のAI下書きである。自筆と後編集は別の文章課題で行われており、同じ要点を使った直接比較ではない。
著者らの測定では、修正稿は編集前より本人の自筆文に近く、AI文から遠くなった。それでも修正稿は、自筆文よりAI文に文体が近かった。参加者間で比べた文体の多様さも、自筆文には届かなかった。
実験結果
著者らの事前登録したオンライン研究では、募集した100人のうち81人を最終分析に含めた。参加者は八つから六つの文章課題を選び、AI下書きの後編集と自筆の条件に取り組んだ。文体の比較にはLUARの表現間のコサイン類似度を用いた。
著者らによると、編集後は編集前より本人の自筆文に近づき（p=.0002、Hedgesのg=0.55）、AI文から遠ざかった（p=.0002、g=−0.41）。ただし修正稿は自筆文よりAI文に近かった。自分らしさの評価と測定値の相関は正だが弱い（r=0.244±0.076）。
応用の可能性
編集上の応用案 · 論文が実証した用途とは区別しています。
編集上の応用案：社内の送別メッセージで、本人が伝えたい出来事と感謝を箇条書きにし、AIの下書きにある呼び方や言い回しを自分で直して完成稿にする。入力は本人の要点、出力は本人が確認したメッセージである。
文章生成の追加学習用データ、文体ラベル、センサーは使わない想定とする。効果を調べるには、比較用に本人の同種の自筆文を別途集める必要がある。この用途での成果は研究からは確認できず、適合性は検証する仮説である。
応用先の候補からNauhに相談できます。
導入時の検証
導入時の検証案 · 対象データでの再評価が必要です。
導入時の検証案：同意した書き手に、同種の短い文章を自筆で作ってもらう。別の題材では本人の要点を入力としてAI下書きを作り、本人が後編集する。自筆文、未修正稿、修正稿を比較用に保存する。追加学習用データ、文体の正解ラベル、センサーは使わない。
自筆文と未修正稿を基準に、本人による自分らしさの評価、編集時間、内容の誤りを記録する。どの表現を直したかも確認し、本人の評価と内容確認の結果を見てから、対象とする文章や編集手順を調整する。
限界と課題
著者らの結果では、後編集後もAI文に共通する文体上の特徴が残り、修正稿は自筆文ほど多様ではなかった。参加者が感じる自分らしさと、モデルが測った文体の近さの対応も弱かった。参加者からは、AI下書きの独自性の不足が利用上の障害として挙げられた。
編集上の検証事項は、日本語の職場文書でも同じ傾向が出るか、短い自筆文で比較が安定するか、修正後に内容の誤りが残らないかである。確認できた本文の範囲では、この業務用途の結果は示されていない。
出典
元のタイトル・要旨を確認する（英語）
Can You Make It Sound Like You? Post-Editing LLM-Generated Text for Personal Style
Despite the growing use of large language models (LLMs) for writing tasks, users may hesitate to rely on LLMs when personal style is important. Post-editing LLM-generated drafts or translations is a common collaborative writing strategy, but it remains unclear whether users can effectively reshape LLM-generated text to reflect their personal style. We conduct a pre-registered online study ($n=81$) in which participants post-edit LLM-generated drafts for writing tasks where personal style matters to them. Using embedding-based style similarity metrics, we find that post-editing increases stylistic similarity to participants' unassisted writing and reduces similarity to fully LLM-generated output. However, post-edited text still remains stylistically closer in style to LLM text than to participants' unassisted control text, and it exhibits reduced stylistic diversity compared to unassisted human text. We find a gap between perceived stylistic authenticity and model-measured stylistic similarity, with post-edited text often perceived as representative of participants' personal style despite remaining detectable LLM stylistic traces.
論文本体の取得範囲に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。解説更新：2026-10-01