Entdeckung und Eindämmung von Memorisierung in Text-zu-Bild-Diffusionsmodellen durch Kreuzaufmerksamkeit

Diffusionsmodelle, die Text in Bilder umwandeln, neigen dazu, Trainingsbilder zu memorieren, was zu Problemen mit Urheberrechten und Datenschutz führt. Diese Studie untersucht den Zusammenhang zwischen Kreuzaufmerksamkeit und Memorisierung und entwickelt Methoden, um Memorisierung zu erkennen und zu reduzieren, ohne die Qualität oder Geschwindigkeit der Bildgenerierung zu beeinträchtigen.