アーカイブ / VLM / Generative AI
画像への回答と編集を共通の手順で追加学習するLaViDa-R1
LaViDa-R1
LaViDa-R1の原論文から掲載した図です。細部はクリックして拡大できます。
原論文の図の説明を読む
Figure 8 : Qualitative Results of Reason-Intensive Object Grounding.
概要
- 画像への回答、物体の位置特定、画像編集に、教師あり学習と報酬を使う学習を組み合わせた。
- 著者らの報告では、MathVistaの正答率の表記値はLaViDa-Oの56.9からLaViDa-R1の60.0に、ImgEditのOverallは3.71から3.90になった。
- 商品写真への利用は応用案であり、不要な変更と人手による修正時間を対象写真で検証する必要がある。
補足：編集した模式図で仕組みを確認する
VISUAL EXPLAINER
図でつかむ、LaViDa-R1の仕組み
- 01画像と質問・編集指示
- 02出力を全て隠す
- 03段階的に復元
- 04回答・編集画像
原論文の説明をもとにした模式図です。処理の細部は省略しています。
研究の背景
LaViDa-R1は、画像を見て質問に答える課題、物体の位置を示す課題、指示に沿って画像を編集する課題を扱う。基盤となる拡散言語モデルは、出力の要素を最初は全て隠し、複数回に分けて埋める方式で文章や画像を生成する。
著者らによると、従来の推論能力を高める追加学習は、数学など特定の課題に集中しがちだった。異なる課題を一つのモデルで扱うには、回答の正誤だけでなく、物体の位置や画像編集の出来栄えも学習に取り込む必要がある。
手法
入力は、画像と質問、または元画像と編集指示である。モデルは隠された出力の要素を段階的に埋め、質問なら回答、編集指示なら画像を生成する。追加学習では、正解例から学ぶ教師あり学習、生成結果を報酬で評価する強化学習、候補の最良例を学び直す自己蒸留を組み合わせる。
学習中に良い候補が出ない場合、正解がある数学問題などでは答えを先に置き、そこへ至る説明を補う。正解画像のない編集課題では、高評価の候補の途中状態から生成をやり直す木探索を使う。また、出力の確からしさを学習に使う際は、隠す位置が補い合う二つの入力を用い、学習対象から漏れる要素を防ぐ。
新規性
著者らが提案する中心は、教師あり追加学習、報酬を使う強化学習、生成候補の最良例を学び直す自己蒸留を、共通の学習目的にまとめた点である。正解がある課題には回答固定、正解がない課題には木探索を使い、良い学習例を得にくい場合に対応する。
確率推定では、二つの入力で隠す位置を補い合わせ、全ての出力要素が一度は学習対象になるようにする。相補的に隠す方法自体は先行するLaViDaで提案されており、本研究では重み付けを変えて推定に用いる。
従来手法との違い
比較の基準は、追加学習前のLaViDa-Oと、教師あり追加学習後のモデルである。LaViDa-R1は、その後の学習に教師ありデータ、報酬付きの生成結果、生成候補の最良例を組み合わせる。著者らは教師あり学習を、学習の崩れを抑えるための正則化としても使う。
画像編集の表には、LaViDa-Oに推論過程を加えた「+ Reasoning」も載る。一方、表中の他モデルとの訓練条件は揃っていない。掲載値から直接確かめられるのは各ベンチマークでの差であり、学習方式だけの優劣ではない。
実験結果
著者らは視覚的な数学問題、画像を使う質問応答、物体の位置特定、画像編集などで評価した。正答率の表記値は、MathVistaでLaViDa-Oが56.9、教師あり追加学習後が57.6、LaViDa-R1が60.0。ChartQAでは同じ順に80.0、80.8、81.7と報告している。
画像編集のImgEditでは、画質と指示への適合をGPT-4判定器で評価したOverallが、LaViDa-Oで3.71、「+ Reasoning」で3.80、「+ SFT」で3.81、LaViDa-R1で3.90だった。確認できた本文の範囲では、学習データの構成や訓練日程の詳細は付録参照とされている。
応用の可能性
編集上の応用案 · 論文が実証した用途とは区別しています。
編集上の応用案：製造業の商品写真と「背景だけを白にする」という指示を入力し、編集画像を制作担当者へ返す。担当者は元写真と出力を並べ、商品形状が保たれ、背景以外に変更がないか確認する。
試用には元写真、編集指示、変更してよい領域のラベルと担当者の合否記録が要る。入力画像の取得にはカメラを使うが、既存写真を使うなら追加の撮影は不要である。対象業務に合わせて再学習する場合は、写真と指示に対応する望ましい編集画像を集め、判定基準を合わせる必要がある。
応用先の候補からNauhに相談できます。
導入時の検証
導入時の検証案 · 対象データでの再評価が必要です。
導入時の検証案：商品写真と編集指示を少数集め、現在の手作業による編集を比較基準にする。担当者が変更可能な領域と残すべき商品部分をラベル付けし、指示に合う出力の割合、不要な変更の件数、確認から修正完了までの時間を同じ写真で測る。
入力画像には撮影済み写真を使い、追加のセンサーは前提としない。まず再学習せずに出力を確認する。対象写真への適応が必要なら、写真・指示・望ましい編集画像の組と合否ラベルを用意し、その条件で再評価する。
限界と課題
著者らは、拡散言語モデルの強化学習では、良い生成候補が得られないと学習信号が弱まり、学習が崩れる場合もあると課題を挙げる。提案手法はこれらへの対策を含むが、全ての課題で問題が解消したという結果は示されていない。
編集上の検証事項は、商品部分の意図しない変化、編集指示への適合、業務写真に合わせるためのデータ量である。ImgEditの値はGPT-4判定器を用いたベンチマークの評価であり、制作担当者の採否や修正時間を直接測った値ではない。
出典
元のタイトル・要旨を確認する（英語）
LaViDa-R1: Advancing Reasoning for Unified Multimodal Diffusion Language Models
Diffusion language models (dLLMs) recently emerged as a promising alternative to auto-regressive LLMs. The latest works further extended it to multimodal understanding and generation tasks. In this work, we propose LaViDa-R1, a multimodal, general-purpose reasoning dLLM. Unlike existing works that build reasoning dLLMs through task-specific reinforcement learning, LaViDa-R1 incorporates diverse multimodal understanding and generation tasks in a unified manner. In particular, LaViDa-R1 is built with a novel unified post-training framework that seamlessly integrates supervised finetuning (SFT) and multi-task reinforcement learning (RL). It employs several novel training techniques, including answer-forcing, tree search, and complementary likelihood estimation, to enhance effectiveness and scalability. Extensive experiments demonstrate LaViDa-R1's strong performance on a wide range of multimodal tasks, including visual math reasoning, reason-intensive grounding, and image editing.
論文本体の取得範囲に基づく解説。AIが作成した未校閲の記事です。性能の数値は著者の評価条件に依存します。応用例と検証計画は編集上の提案です。解説更新：2026-10-01