Connexion
Idée - Multimodale Szenenanalyse
Robuste Wahrnehmung von Szenen mit unvollständigen Modalitäten durch Fourier-Prompt-Feinabstimmung
Durch die Einführung einer Missing-aware Modal Switch (MMS)-Strategie und einer Fourier-Prompt-Feinabstimmung (FPT) wird die Robustheit von multimodalen Wahrnehmungssystemen gegen den Ausfall von Modalitäten auf Systemebene und Sensorebene verbessert.
Umfassendes 360+x-Datensatz für panoptische Szenenverständnis: Mehrere Perspektiven und Modalitäten zur Erfassung des realen Alltags
Der 360+x-Datensatz bietet eine umfassende Erfassung der Umgebung aus verschiedenen Perspektiven (360°-Panorama, Ego-Perspektive, Drittanbieter-Frontsicht) und Modalitäten (Video, Audio, Ortungsinformationen), um das menschliche Verständnis der Welt widerzuspiegeln.
Produits | Ressources
© 2024 by Linnk AI