新着研究 / Audio / LLM
会話に合う音声表現の指示を、説明文の似具合ではなく合成器の反応から学習
Speech-Rewarded Style Planning
Speech-Rewarded Style Planningの原論文から掲載した図です。細部はクリックして拡大できます。
原論文の図の説明を読む
Figure 1: Mean within-utterance Spearman correlations across both development partitions.
概要
- SRSPは会話履歴と応答文から話し方の指示を作り、固定した音声合成器を通して学習する。
- 正解音声のトークン尤度を報酬に使い、音声の説明が上手でも合成制御が上手とは限らない問題を扱う。
- 英語の会話音声で、未学習の言語モデルと正解音声を見られる説明生成方式より表現の一致を改善した。
補足：編集した模式図で仕組みを確認する
VISUAL EXPLAINER
図でつかむ、Speech-Rewarded Style Planningの仕組み
- 01会話履歴と応答文
- 02表現指示の候補
- 03固定合成器で採点
- 04指示生成器を更新
原論文の説明をもとにした模式図です。処理の細部は省略しています。
研究の背景
SRSPは、会話に合う話し方の指示を音声合成器に合わせて学習する方法だ。言語モデルが「穏やかに」「驚きを込めて」と書いても、合成器が意図した声を出すとは限らない。音声を正確に説明する文章と、機械を適切に動かす文章は異なる。
著者らは、同じ発話の候補指示について音声と文章の対応の良さが、最終的な音響的類似性を弱くしか予測しないと示した。文章の擬似ラベルだけで話し方を学ばせる際の課題である。
手法
指示生成器は会話の履歴と次の応答文を受け取り、話すスタイルを文章で出力する。複数の候補を作り、重みを固定した音声合成器に与える。正解音声を離散的な音声トークンへ変換し、各候補の下でその列がどれほど予測されやすいかを報酬にする。
正解の過去トークンを与えて次を予測する教師強制を使うため、候補ごとに自由生成した波形だけを採点する方法とは異なる。候補群内の相対評価で方策を更新するGRPOを用い、合成器は変えず指示生成器を適応させる。例えば慰める返答に合う表現を、合成器が実現できる指示として覚える。
新規性
中心となる工夫は、音声の説明文を模倣する代わりに、下流の合成器が正解音声を予測する度合いから指示を学習することだ。音の情報を文章へ圧縮する段階で失われる特徴を、学習の報酬側へ戻す。
推論時の入力は会話履歴と応答文であり、目標の音声を見て説明を書く方式とは役割が違う。音声を見られる比較方式より良い結果があることは、説明の忠実さだけでは制御品質を保証しないという論点を補強する。
従来手法との違い
比較対象は、表現指示なしの音声合成、未適応のQwen3.5-9B、正解波形にアクセスできるAudio Flamingo NextとQwen3-Omniの説明生成方式だ。未適応モデルとの比較では指示の入力条件をそろえている。
音声を直接見られる方式は情報上有利な比較対象である。ただし、その文章も同じ合成器を動かす指示として評価する。SRSPの利点は、一般的な音声説明の優劣ではなく、特定の合成器を通した表現の再現性にある。
実験結果
英語のISCSLP 2026 CoT-TTSデータを使い、長さ3〜15秒などの条件で選別した。訓練は277.60時間で、映画内の場面を留保する分割と、映画全体を留保する分割の開発・テスト集合を各2,750発話用意した。
Qwen3.5-9Bを指示生成器、Fun-CosyVoice3-0.5Bを固定合成器に使用した。著者らは声のスタイルと感情の類似度の向上、音響的差を測るメルケプストラム歪みの低下を報告する。言語モデルによる採点でも文脈への適合と参照との一貫性が改善した。
応用の可能性
編集上の応用案 · 論文が実証した用途とは区別しています。
編集上の応用案：会話形式の研修教材で、前の発言に応じた話し方を自動提案する。入力は対話履歴と読み上げ文、出力は表現指示と合成音声で、制作者が最終確認して採用する。
台詞の意味が同じでも、説明、励まし、確認で声の表現を変える場面を想定する。特定の合成器に指示を合わせることで手直しを減らす狙いだが、問い合わせ対応や日本語の対話での有効性は本論文の検証範囲ではない。
応用先の候補からNauhに相談できます。
導入時の検証
導入時の検証案 · 対象データでの再評価が必要です。
導入時の検証案：短い対話を場面単位で分け、同じ合成器で未適応の指示生成器と比較する。評価用の会話が学習側の履歴に混ざらないようにし、話者や映画の分割条件も記録する。
文脈に合う表現、読みの正確さ、過剰な感情、生成時間を別々に測る。機械採点と人の聞き比べが同じ順位を付けるかも確認する。合成器を交換した際に指示の効き方が変わるかを調べ、再学習の要否を判断する。
限界と課題
確認できた本文の範囲では、実験は選別した英語音声と固定した合成器を中心に行われた。生成器を下流モデルへ合わせる設計なので、他の合成器への転移は独立した課題として扱う必要がある。
編集上の確認点は、トークン尤度の改善と人の好みの一致、および言語モデル評価の偏りである。録音の感情を再現することが、実際のサービスで望ましい話し方になるとは限らず、用途ごとの採用基準を設けたい。
出典
元のタイトル・要旨を確認する（英語）
Beyond Speech Captions: Speech-Rewarded Style Planning for Conversational Text-to-Speech
Natural-language style descriptions provide an interpretable interface between large language models (LLMs) and controllable text-to-speech (TTS). However, using descriptions as pseudo-labels compresses target acoustics into text, and descriptive fidelity need not imply effective control of a particular synthesizer. We empirically show that speech-text alignment only weakly predicts downstream acoustic similarity among candidate instructions for the same utterance. We therefore propose Speech-Rewarded Style Planning (SRSP), which trains a text-based style planner through a frozen downstream TTS model. Given dialogue history and response text, the planner generates candidate instructions and is optimized with group-relative policy optimization (GRPO), using the teacher-forced likelihood of target speech tokens as the reward. On an English subset of the ISCSLP 2026 CoT-TTS corpus, SRSP achieves higher speech-style and emotion similarity to target speech and lower mel-cepstral distortion than the Base LLM and target-audio-informed captioning baselines. LLM-based expressive speech evaluation further shows gains over all baselines in contextual appropriateness and reference consistency.
論文本体の取得範囲に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。収集：2026-10-09