アーカイブ / LLM / Generative AI
検索意図と遷移先を照らし、広告説明文を修正するInteractor
Interactor
Interactorの原論文から掲載した図です。細部はクリックして拡大できます。
原論文の図の説明を読む
Figure 1: An example of ad description with query ‘Can black sesame turn white hair black?’. Compared to title, it has a longer span and should be more informative.
概要
- 検索語と遷移先ページに関する情報から説明文を作り、知識の適切さとページとの一致について理由付き評価を受けて修正する。
- 著者らのテストでは、遷移先との一致度はInteractorが0.872、一度で生成するSingle-turn RLが0.726だった。
- 14万超の広告主を対象とするオンラインA/B試験で、著者らは広告収益0.74％増、総合的な内容品質の最高評価率7パーセントポイント増を報告した。
補足：編集した模式図で仕組みを確認する
VISUAL EXPLAINER
図でつかむ、Interactorの仕組み
- 01検索語と遷移先
- 02知識を検索
- 03初稿を生成
- 04理由付き評価
- 05説明文を修正
原論文の説明をもとにした模式図です。処理の細部は省略しています。
研究の背景
検索広告の説明文は見出しより長く、検索意図に役立つ知識や商品の細かな特徴を載せられる。ただし、説明文に遷移先ページで裏付けられない特典を書くと、利用者を誤解させるおそれがある。
著者らによれば、先行研究の多くはクリックを促す見出しの生成を扱ってきた。説明文では、情報の有用さに加えてページとの一致を確かめ、誤った箇所を直す必要がある。
手法
Interactorは検索語と広告の遷移先ページを入力とし、検索語に関する知識を検索して説明文の初稿を作る。実装では検索結果の最上位ページの文書を使い、検索語に基づくキーワードや広告主名などの情報も入力に補う。GenRMと呼ぶ生成型の評価モデルが、知識の適切さと遷移先との一致をそれぞれ判定し、合否と理由を返す。
生成モデルは理由を次の入力に加えて文を直し、最後の回の文を出力する。論文の電子ピアノの例では、検索した選び方の知識が初稿に反映されず、「送料無料」に相当する記述も広告情報に見当たらないと指摘された。学習には両評価の合否と、利用者の反応履歴から推定する予測クリック率を報酬として使う。
新規性
著者らが提案するのは、説明文を一度で確定せず、生成、評価、修正を繰り返す枠組みである。評価モデルは合否に加え、検索意図に沿う知識の不足や、遷移先で裏付けられない表現を理由として返す。
その理由を次の生成に渡し、最終稿の評価を使って生成モデルを強化学習で調整する。強化学習とは、評価に応じて出力の方針を更新する方法を指す。
従来手法との違い
比較対象は、広告見出し向けのCtopとDiverを説明文生成に転用した方式、および著者らの運用モデル「Single-turn RL」である。Single-turn RLはInteractorと同じ知識検索と報酬設計を使い、最終稿を一度で生成する。
著者らの表では、InteractorはSingle-turn RLより遷移先との一致度が高い。一方、基本品質はともに0.986、魅力度の指標である予測クリック率は12.4％対12.3％だった。この条件で確認できる差を、あらゆる広告での効果に広げることはできない。
実験結果
著者らは中国語の検索広告の表示ログから、学習用に100万組、検証用に5千組、テスト用に1万組の検索語と広告の組を用意した。検証・テストの表示時刻は学習データより後で、入力ごとに10候補を生成し、Average@10で報告している。
テストの遷移先との一致度はInteractorが0.872、Single-turn RLが0.726、情報性は0.715対0.693だった。14万超の広告主を対象にしたオンラインA/B試験では、著者らは広告収益が0.74％増え、人手評価による総合的な内容品質の最高評価率が7パーセントポイント上がったと報告する。
応用の可能性
編集上の応用案 · 論文が実証した用途とは区別しています。
編集上の応用案：電子ピアノの検索広告で、検索語、商品ページ、選び方に関する検索結果を入力し、説明文候補と修正理由を担当者に示す。担当者は商品の特徴と配送条件を元ページで照合し、掲載する文を決める。
追加学習には過去の検索語と広告の組、クリック履歴が要る。評価用には知識の適切さとページとの一致を判定する基準やラベルを用意する。入力は文章なので専用センサーは不要で、商材に合わせて評価基準と検索元を調整する。改善するかはこの用途で検証する。
応用先の候補からNauhに相談できます。
導入時の検証
導入時の検証案 · 対象データでの再評価が必要です。
導入時の検証案：一つの商材群の検索語と遷移先ページから候補を作り、同じ知識検索と評価基準を使って一度だけ生成する方式を比較基準にする。担当者がページにない主張の件数、検索意図に役立つ情報の有無、確認と修正に要した時間を記録する。
追加学習する場合は過去の検索語と広告の組、クリック履歴を集め、知識の適切さとページとの一致を判定する基準やラベルを整える。専用センサーは不要で、商材の表記基準に合わせて検索元と評価項目を調整する。掲載判断は候補ごとに人が行う。
限界と課題
著者らが明記する制約は、広告主が書いた既存の説明文を開発時に明示的には活用していない点である。その文章は評価モデルの開発に間接的に寄与したとされ、人が書いた文への修正提案や共同作業は今後の研究方向に挙げられる。
編集上の検証事項は、検索した知識の正確さ、ページ更新後の記述の妥当性、反復評価に要する時間と費用である。事例の修正稿にも販売上の表現が含まれるため、個々の主張を元ページで確認したい。示された実験は中国語の検索広告システムで行われ、他言語への適用結果は確認できた本文の範囲では示されていない。
出典
元のタイトル・要旨を確認する（英語）
Interactor: Agentic RL oriented Iterative Creation for Ad Description Generation in Sponsored Search
This paper focuses on automatically generating informative ad descriptions in sponsored search. Unlike ad titles which are usually optimized to attract user click feedbacks, ad descriptions have a longer text span and possess the potential of incorporating world knowledge to address user search intents while presenting the fine-grained selling points of the ads. We propose Interactor, a multi-turn iterative creation framework optimized with agentic RL for ad description generation. The generation model acts as a policy that interacts with a customized environment consisting of multiple generative reward models. Given initial generations by the policy, the customized GenRMs evaluate multi-dimensional qualities including knowledge capacity and landing page consistency, providing both binary signals and reasoning feedbacks. The policy then iteratively refines the descriptions based on such feedbacks to ensure continuous improvement. Experiments on industrial datasets show that the Interactor framework significantly outperforms state-of-the-art approaches in generating knowledge-rich and faithful ad descriptions. Since May 2026, it has been deployed online in a leading search ads system, contributing to both ad revenue and user experience.
論文本体の取得範囲に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。解説更新：2026-10-01