MEDBind: Vereinheitlichung von Sprache und multimodalen medizinischen Datenbindungen

MEDBind ist ein Rahmenwerk für kontrastives Lernen, das Röntgenaufnahmen des Brustkorbs (CXR), Elektrokardiogramme (EKG) und medizinische Texte in einen einheitlichen Darstellungsraum integriert. Durch die Einführung einer neuartigen Verlustfunktion für die Kantenkontrastierung (EMCL) kann MEDBind die Bindung zwischen CXR und EKG verbessern und übertrifft etablierte Modelle für die Informationssuche, Nullschuss- und Wenig-Schuss-Klassifizierung.