アーカイブ / LLM
決算説明会で指定語が出る確率を、市場価格と事前の文章から更新する
Market-Conditioned Prompting(MCP)
Market-Conditioned Prompting(MCP)の原論文から掲載した図です。細部はクリックして拡大できます。
原論文の図の説明を読む
Figure 1: Resolving Market Ambiguity with MixMCP . The diagram illustrates a mid-confidence scenario where the market probability is uncertain (45%). By conditioning on relevant textual evidence (e.g., earnings transcripts, news), MCP identifies a strong signal ( p mcp = 80 % p_{\text{mcp}}=80\% ) that the market has not fully priced in. Finally, MixMCP combines the stable market prior with the LLM’s evidence-based update ( α = 0.7 \alpha=0.7 ), producing a refined forecast (55.5%) that correctly anticipates the resolution.
概要
- MCPは市場価格を事前確率としてLLMに示し、説明会前の記録とニュースを使って指定語の出現確率を更新する。
- 856市場の比較表では、MixMCPのBrierスコアは市場価格の0.1402に対し0.1392だったが、ECEは0.0651に対し0.0666だった。
- 評価は決算説明会の語句言及市場を対象とする過去データで行われ、他の契約や運用時への一般化は未検証である。
補足:編集した模式図で仕組みを確認する
VISUAL EXPLAINER
図でつかむ、Market-Conditioned Prompting(MCP)の仕組み
- 017日前のYES価格と文章
- 02価格を事前確率に設定
- 03LLMが確率を更新
- 04価格と更新値を混合
- 05語句出現の予測確率
原論文の説明をもとにした模式図です。処理の細部は省略しています。
研究の背景
この研究は、企業の次回決算説明会で指定語が発言される確率を予測する。語句言及市場では、YES契約の価格を市場参加者による確率の見積もりとして読めるが、過去の発言や直近のニュースをどう予測に組み込むかは別の課題となる。
結果は、説明会後に公開される公式記録に指定語がそのまま現れたかで決まる。著者らは、説明会前に利用できる文章を大規模言語モデル(LLM)に渡し、市場価格から予測を更新できるかを調べた。
手法
入力は、説明会7日前までに観測されたYES契約価格、同じ企業の前四半期の説明会記録、締切前の関連ニュースである。MCPは価格を「事前確率」、つまり文章を読む前の見積もりとしてLLMに示し、文章を踏まえた修正後の確率を一つ出させる。
例えば前回の記録に指定語があり、ニュースにも関連する話題がある場合、モデルはその文章を材料に確率を見直す。修正する方向は文章次第である。MixMCPは修正値と元の市場価格を決まった比率で混ぜ、最終的な予測確率を出す。
新規性
著者らの提案は、YES契約の価格が示す確率を事前確率として明示し、言語モデルに文章を根拠とする修正値を出させる点にある。市場価格を普通の入力文として添える条件と区別して検証した。
MixMCPは、元の市場確率とMCPの修正値を混合する方法である。文章から得た手掛かりによる修正を弱め、市場の見積もりを残す。
従来手法との違い
基準は、予測時点で確認できたKalshiのYES契約価格である。著者らは、市場価格を使わずニュースや前四半期の説明会記録を与える条件と、両方の文章に市場価格を普通の文として添える条件も比較した。
MCPでは、同じ市場価格を修正の出発点として明示する。MixMCPでは市場価格を70%、MCPの出力を30%使う。この比率は評価用とは別に取り分けたデータで選ばれた。
実験結果
著者らは、2025年4~12月の50社、70件の決算イベントに属するKalshiの856市場を評価した。予測時点は説明会の7日前で、前四半期の記録と最大100件の関連ニュースを使用した。正解は公開後の公式記録に指定語がそのまま現れたかで、GPT-5.1には追加学習を行っていない。
比較表では、確率と結果の二乗誤差を測るBrierスコアは市場価格0.1402、MCP 0.1470、MixMCP 0.1392だった。予測確率と実際の出現頻度のずれを測るECEは順に0.0651、0.0514、0.0666で、正解率は79.8%、78.2%、80.3%だった。MixMCPは市場価格よりBrierスコアと正解率が良い一方、ECEは高い。
応用の可能性
編集上の応用案 · 論文が実証した用途とは区別しています。
編集上の応用案:決算説明会を追う担当者向けに、指定語ごとの市場価格と、事前の文章を踏まえた予測確率を一覧にする。入力は企業、指定語、説明会7日前までのYES価格、前四半期の公式記録、締切前の関連ニュースで、出力は二つの確率と参照した文章である。
運用前の調整には、過去の価格と文章、公開後の記録から付けた語句出現ラベルが必要となる。モデルの追加学習用データや追加センサーは想定せず、語句の表記とニュースの収集範囲を業務に合わせて決める。
応用先の候補からNauhに相談できます。
導入時の検証
導入時の検証案 · 対象データでの再評価が必要です。
導入時の検証案:過去の説明会を時系列で分け、各回の7日前までに確認できたYES価格、前四半期の公式記録、関連ニュースをそろえる。公開後の公式記録から指定語の完全一致による出現有無を正解ラベルにする。モデルの追加学習用データや追加センサーは使わず、ニュース検索と語句表記を対象業務に合わせる。
市場価格だけの予測を基準に、同じ事例でMCPとMixMCPを比較する。混合比率や指示文を決める期間と最終評価期間を分け、Brierスコア、ECE、正解率を記録する。市場価格の確信度別にも結果を確認する。
限界と課題
著者らが明記する限界は、対象が決算説明会の語句言及市場に限られること、過去時点の情報を使ったオフライン評価であること、言語モデルの出力が指示文に左右されることである。運用時の市場への影響は調べていない。
編集上の検証事項は、別の企業や時期でも結果が続くか、ニュースの選び方で予測が変わるかである。また、本文の一箇所に市場基準のBrierスコアを0.1441とする記述がある一方、比較表は0.1402で一致しない。ここでは表の値を採用した。
出典
元のタイトル・要旨を確認する(英語)
Forecasting Future Language: Context Design for Mention Markets
Mention markets, a type of prediction market in which contracts resolve based on whether a specified keyword is mentioned during a future public event, require accurate probabilistic forecasts of keyword-mention outcomes. While recent work shows that large language models (LLMs) can generate forecasts competitive with human forecasters, it remains unclear how input context should be designed to support accurate prediction. In this paper, we study this question through experiments on earnings-call mention markets, which require forecasting whether a company will mention a specified keyword during its upcoming call. We run controlled comparisons varying (i) which contextual information is provided (news and/or prior earnings-call transcripts) and (ii) how \textit{market probability}, (i.e., prediction market contract price) is used. We introduce Market-Conditioned Prompting (MCP), which explicitly treats the market-implied probability as a prior and instructs the LLM to update this prior using textual evidence, rather than re-predicting the base rate from scratch. In our experiments, we find three insights: (1) richer context consistently improves forecasting performance; (2) market-conditioned prompting (MCP), which treats the market probability as a prior and updates it using textual evidence, yields better-calibrated forecasts; and (3) a mixture of the market probability and MCP (MixMCP) outperforms the market baseline. By dampening the LLM's posterior update with the market prior, MixMCP yields more robust predictions than either the market or the LLM alone.
論文本体の取得範囲に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。解説更新:2026-10-01




