新着研究 / RAG / VLM
文書は9B・質問は0.6Bで処理、共通教師から学ぶpplxの多言語・画像検索表現
pplx-embed-v2-late
概要
- 0.6Bと9Bの後段照合型検索モデルを、同じ18B教師のトークン表現から蒸留。
- 共通の埋め込み空間を使い、大型モデルの文書索引を小型モデルの質問と直接照合できる。
- テキスト・画像・見た目を含む文書検索で評価し、文書登録費と質問応答時間を分離する構成を提示。
補足：編集した模式図で仕組みを確認する
VISUAL EXPLAINER
図でつかむ、pplx-embed-v2-lateの仕組み
- 01共通教師の表現
- 02二規模のモデルへ蒸留
- 03文書と質問を符号化
- 04トークン間を照合
原論文の説明をもとにした模式図です。処理の細部は省略しています。
研究の背景
画像やレイアウトを含む文書検索では、文書全体を一つのベクトルにすると、細かな表記や局所情報を十分に照合できない場合がある。トークンごとの表現を後段で比較する検索は、細部を残す代わりに計算と索引の負担を伴う。
一方、文書は登録時にまとめて処理できても、利用者の質問はその場で素早く処理したい。この研究は文書側と質問側でモデルの規模を変えながら、同じ空間で関連性を計算する方法を扱っている。
手法
まず18Bの教師を、質問と関連文書の組、その後に紛らわしい負例を含む組で学習する。0.6Bと9Bの生徒は、教師が各トークンに出す正規化した128次元ベクトルへ近づくよう学ぶ。これを表現蒸留と呼び、関連文書の順位だけでなく表現そのものを共有する。
検索時には、例えば図表付き報告書を9Bで事前に索引化し、短い質問だけを0.6Bで処理する。後段照合は、質問側の各要素に合う文書側の要素を探して関連性を集める方式である。同じ教師の空間へそろえたため、二規模のモデルで別々に作ったベクトルを直接比較できる。文書全体を毎回大型モデルで読み直す必要を減らす構成となる。
新規性
小型と大型の双方に、質問と文書のトークン表現を共通教師から移す点が重要である。一方を質問専用にするだけでなく、それぞれが文書・質問の両側を担当でき、組合せを変えられる。
多言語の文章に加え画像や視覚文書も対象にする。処理の重い文書登録を事前作業へ移し、利用者を待たせる質問処理に小型モデルを使うという配置の選択肢を、共有表現で支えている。
従来手法との違い
著者らは対照学習だけの場合に比べ、表現蒸留が特に小型モデルで有効と報告する。対照学習は正しい文書と誤った文書の相対関係を学び、蒸留は教師の表現位置へ直接合わせるため、学習信号が異なる。
各規模での既存検索モデルとの比較に加え、モデルを混在させる運用が論点となる。小型だけの場合と大型だけの場合の品質・費用を分けて評価すべきで、異なる大きさを組み合わせれば必ず最良になるという主張ではない。
実験結果
テキスト、画像、視覚文書検索の複数ベンチマークで評価し、著者らは各規模の範囲で高い性能を報告する。視覚文書検索では0.6Bが数倍大きい比較モデルと競合し、ViDoRe-V3も評価対象に含まれる。
教師の組学習には1億8600万行の質問・文書対を用い、文章、画像、視覚文書の比率を調整した。これらは学習規模の説明であり、検索精度や実運用の待ち時間そのものではない。共通空間の互換性と、個別課題での優劣は分けて理解したい。
応用の可能性
編集上の応用案 · 論文が実証した用途とは区別しています。
編集上の応用案：表や図を含む社内技術報告書の検索基盤で、夜間の文書登録に大型、日中の問い合わせに小型を使う。入力はページ画像と文章、出力は質問に対応する文書候補とページ位置とする。
利用者が結果を開いて根拠を確認できるよう、元のページと結び付けて提示する。文書更新が少なく質問が多い部署なら、事前処理の費用を複数の検索に分散できるか検討しやすい。これは編集上の運用案である。
導入時の検証
導入時の検証案 · 対象データでの再評価が必要です。
導入時の検証案：既知の回答ページを持つ日本語の社内質問を用意し、小型同士、大型同士、大型文書・小型質問の三構成を同じ候補集合で比べる。図表中心と文章中心の質問を分けておく。
上位候補への正解ページ到達率、質問処理時間、索引構築時間、索引容量を測る。文書の追加時にどのモデルで登録したかを記録し、混在索引でも順位が安定するか確かめる。回答生成を重ねる前に検索単体の根拠到達を確認する。
限界と課題
報告された性能はベンチマークと学習条件に基づき、企業内の略語や特殊図面で同じ品質を保証するものではない。教師と生徒が共通空間を使えても、すべての問い合わせで同一順位になるとは限らない。
編集上の確認点は、トークン表現を多数保存する容量、長大文書の分割、ページ解像度の変化である。小型質問モデルによる遅延低減と、後段の照合処理の費用を別々に測り、全体の応答時間で運用可否を判断したい。
出典
元のタイトル・要旨を確認する（英語）
pplx-embed-v2-late Technical Report
In this report, we introduce pplx-embed-v2-late, a pair of 0.6B and 9B multilingual and multimodal late-interaction models. Both models achieve state-of-the-art results within their respective size classes across a range of text, image, and visual document retrieval benchmarks. On visual document retrieval tasks, pplx-embed-v2-late-0.6b is competitive with models several times larger than itself. The models are trained via representation distillation from an 18B teacher. Consequently, they share an embedding space that supports asymmetric deployment: documents can be indexed with the 9B model and queried with the low-latency 0.6B model. Both models are available at https://huggingface.co/collections/perplexity-ai/pplx-embed-v2.
論文本体の取得範囲に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。収集：2026-10-22