視覚証拠に基づくターゲット再構成手法の提案

VAD: Attributing Visual Evidence for Target Reconstruction in Multimodal On-Policy Distillation

視覚的証拠を用いた蒸留手法を提案

2026-07-30 中級 arXiv
マルチモーダル画像認識蒸留
  • マルチモーダルな知識蒸留は、視覚とテキストの情報を統合します。
  • 本研究では、視覚的証拠に基づくターゲット再構成手法VADを提案します。
  • VADは、視覚情報が誤答を支持または反証する様子を捉える新しいアプローチです。
マルチモーダル知識蒸留視覚認識

マルチモーダルな知識蒸留は、視覚とテキストの情報を融合することで、より精緻な学習を目指しています。しかし、視覚的証拠に基づく修正を正確に評価することは難しい課題です。本論文では、Visual Attribution Distillation(VAD)という新しい手法を提案し、視覚的証拠がどのようにターゲットの再構成に寄与するかを示します。この研究は、視覚情報を活用したい方や、知識蒸留に興味がある研究者に特に有用です。

視覚認識やマルチモーダル学習に興味がある研究者や技術者に向いています。

VAD: Attributing Visual Evidence for Target Reconstruction in Multimodal On-Policy Distillation
Kangning Zhang, Yixing Li, Shuai Shao, Qingyao Li, Zhengxi Lu, Zhiyuan Yao ほか