ゼロショット転送のためのマルチモーダルグラフ基盤モデルCHARM

CHARM: A Multimodal Graph Foundation Model with Hierarchical Context Modeling for Zero-Shot Transfer

マルチモーダルグラフのゼロショット転送手法

2026-07-28 中級 arXiv
LLMマルチモーダルGNN
  • グラフ基盤モデルは知識の転送に有望な手法です。
  • CHARMは階層的な文脈モデリングを用いてゼロショット転送を実現します。
  • このアプローチは、異なるモダリティ間の関係を捉える新しい方法を提供します。
マルチモーダルゼロショットグラフニューラルネットワーク

グラフ基盤モデルは、異なるグラフドメイン間での知識転送において重要な役割を果たしますが、特にマルチモーダルグラフにおけるゼロショット転送は未開拓の領域です。本論文では、CHARMという新しいモデルを提案し、階層的な文脈モデリングを通じて異なるモダリティの情報を統合します。この手法は、ターゲットドメインに依存せずに高レベルな概念を捉えることが可能です。特に、グラフやマルチモーダルデータに関心のある研究者や実務者にとって興味深い内容となっています。

グラフデータやマルチモーダル学習に興味がある研究者や実務者に向いています。

CHARM: A Multimodal Graph Foundation Model with Hierarchical Context Modeling for Zero-Shot Transfer
Ankang Yang, Jitao Zhao, Di Jin, Yuxiao Huang, Dongxiao He