マルチモーダル知識グラフの不完全性を克服するために、細粒度のモダリティ情報トークンを活用し、モダリティ間の相互作用を学習することで、より高度な知識推論を実現する。
マルチモーダル情報を活用して、新しく発見された関係の表現を学習する。