アーカイブ / LLM
クリック傾向と質問の多様性を考慮する対話検索の提案手法
GQS
GQSの原論文から掲載した図です。細部はクリックして拡大できます。
原論文の図の説明を読む
Figure 1: Examples of AI assistant interfaces where query suggestions are presented as clickable elements.
概要
- GQSは対話の文脈と表示位置から候補のCTRを予測し、質問の組を生成するモデルの学習に使う。
- 著者らのTask 2では、GQSのSFT比CTR改善率は30.72％で、予測CTRを使うDPOの25.51％を上回った。
- 導入には表示位置付きのクリック記録と多様性の人手ラベルを用意し、クリックの偏りや未知の話題への適応を検証する必要がある。
補足：編集した模式図で仕組みを確認する
VISUAL EXPLAINER
図でつかむ、GQSの仕組み
- 01質問と対話文脈
- 02候補質問の組を生成
- 03CTRと多様性を評価
- 04生成モデルを更新
原論文の説明をもとにした模式図です。処理の細部は省略しています。
研究の背景
GQSは、対話型検索の回答に添える「次に聞く質問」を生成する方法である。候補はクリックして検索を続けられる形で示されるが、自然な文を作るだけでは利用者の関心に合うとは限らない。
クリック記録は関心を推測する手掛かりになる一方、表示位置などの影響を受け、記録も十分とは限らない。クリックされやすさだけを優先すると似た質問が並びやすいという課題に対し、著者らは利用者の反応と質問の意味の幅をともに学習対象にした。
手法
入力は現在の質問、AIの回答、会話履歴、利用者属性、類似した過去の対話から得た質問である。生成モデルが質問の組を複数作る。別のモデルは候補と文脈の関係、表示位置からCTR（表示された候補がクリックされる割合）を予測し、各組の予測値を合計する。例えば製品保証への回答後なら、保証に関連する次の質問の組を評価する。
学習では、多様性の低い組を除いたうえで予測CTRの高い組を好ましい例にする。DPO（好ましい出力を選びやすくする学習法）では、CTR差が大きい組の比較を重く扱い、CTRが近い組では意味がより多様な方も学習する。次の学習回には、保存済みのクリック記録を生成モデルの変化に応じて重み付けし、CTR予測器と生成モデルを更新する。
新規性
GQSは、候補ごとのクリック率を予測するだけでなく、複数の質問からなる組を学習単位にする。予測クリック率の差が大きい組の比較を重く扱い、クリック率が近い組同士では意味の多様性が高い方を選びやすくする。
生成モデルの更新で候補の傾向が変わる点にも対応する。保存済みのクリック記録に重みを付け直して予測器を更新し、候補の評価と生成モデルの学習を繰り返す構成が、著者らの主張する進歩である。
従来手法との違い
比較対象は、通常の教師あり学習で作ったSFTモデルと、KTO、SimPO、DPOなどの選好学習手法である。表1は、実際のクリック有無を好みの判定に使う設定と、予測クリック率を使う設定を分けている。
表1のTask 2では、予測クリック率を使うDPOはSFT比のCTR改善率が25.51％だったが、多様性はSFTの81.42に対して59.43だった。GQSはクリック率に基づく学習へ多様性の学習も加える。示された差は、論文で扱うBaiduの二つのタスクに限られる。
実験結果
著者らはBaiduの対話型AIアシスタントで、一般的な質問提案（Task 1）と創作文章の断片生成（Task 2）を評価した。初期SFTモデルの14日分のクリック記録でCTR予測器を学習し、15～21日目の記録から抽出した各タスク1万件を選好学習、22日目の1万件をテストに使った。提示する候補数は順に3件と8件である。
表1のTask 2で、GQSのSFT比CTR改善率は30.72％、関連性は98.11、多様性は82.09だった。予測CTRを使うDPOは順に25.51％、95.83、59.43と著者らは報告する。オンラインA/B実験にも言及するが、確認できた本文の範囲では、関連性と多様性の採点尺度やA/B実験の条件は明示されていない。
応用の可能性
編集上の応用案 · 論文が実証した用途とは区別しています。
編集上の応用案：社内文書を探す対話画面で、回答の下に次の検索質問を複数提示する。入力は現在の質問、回答、会話履歴、類似した過去の対話に現れた質問とし、出力は利用者がクリックして再検索できる質問の組とする。
適応には、その画面で表示した候補と位置、クリック有無を記録した学習データが要る。多様性の判定器には質問の組を評価した人手ラベルを用意し、社内の話題で予測器と生成モデルを調整する。利用者属性を使う場合は項目を別途定める。この案では追加のセンサーを使わない。
応用先の候補からNauhに相談できます。
導入時の検証
導入時の検証案 · 対象データでの再評価が必要です。
導入時の検証案：社内検索の一画面に対象を絞り、現在の提案方式を比較基準にする。学習データとして質問、回答、会話履歴、提示候補と表示位置、クリック有無を集める。多様性には質問の組への人手ラベルを付け、利用者属性と類似質問を入力に使う範囲を決める。追加のセンサーは使わない。
まず社内データでCTR予測器と多様性判定器を調整し、その評価を使って生成モデルを適応させる。同じ評価期間で基準方式と比べ、実際のCTR、質問との関連性、候補間の多様性、重複を測る。表示位置別にも集計し、予測CTRの上昇が実際のクリック増加を伴うか確認する。
限界と課題
著者らは、クリック記録には表示位置の影響や遅れて起きるクリックによる偏りが残り得ると述べる。多様性の判定器は限られた人手ラベルで学習され、未知の話題に対応できない可能性もある。反復学習は予測器と生成モデルを複数回更新するため、計算負担が増す。
編集上の検証事項は、部署や話題ごとの多様性判定、クリックが少ない質問での予測の安定性、表示位置別の効果である。本文にはTask 1のCTR改善率として表1の70.36％と反復学習の説明中の70.50％が現れる。両者の条件差は確認が必要で、同じ結果として扱えない。
出典
元のタイトル・要旨を確認する（英語）
CTR-Guided Generative Query Suggestion in Conversational Search
Generating effective query suggestions in conversational search requires aligning model outputs with user preferences, which is challenging due to sparse and noisy click signals. We propose GQS, a generative framework that integrates click modeling and preference optimization to enhance real-world user engagement. GQS consists of three key components: (1) a Multi-Source CTR Modeling module that captures diverse contextual signals to estimate fine-grained click-through rates; (2) a Diversity-Aware Preference Alignment strategy using CTR-weighted Direct Preference Optimization (DPO), which balances relevance and semantic diversity; and (3) a CTR-Calibrated Iterative Optimization process that jointly refines the CTR and generation models across training rounds. Experiments on two real-world tasks demonstrate that GQS outperforms strong baselines in CTR, relevance, and diversity.
論文本体の取得範囲に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。解説更新：2026-10-01