医療用放射線画像の表現学習の高度化: 多層意味的粒度を持つハイブリッド事前学習パラダイム

本研究は、医療用放射線画像の表現学習のための革新的なアプローチを提案する。従来の手法は「所見」と「印象」の階層的関係を無視していたが、本研究ではこの関係に着目し、グローバルな視覚表現を「印象」と、トークンレベルの視覚表現を「所見」とそれぞれ整合化する新しい枠組みHybridMEDを提案する。さらに、「印象」の生成を補助する要約ブランチと、画像から「印象」を生成するキャプショニングブランチを並列に構築し、知識蒸留を用いて効率的に学習を行う。