Khái niệm cốt lõi
Schärfe beeinflusst die OOD-Generalisierung negativ.
Tóm tắt
Das Papier untersucht die Verbindung zwischen Schärfe und Robustheit für eine bessere OOD-Generalisierung. Es zeigt, dass flachere Minima zu einer besseren OOD-Generalisierung führen. Experimente mit Ridge-Regression und Deep-Learning-Aufgaben unterstützen die Ergebnisse.
Thống kê
In der Ridge-Regression führt ein höherer Strafterm β zu flacheren Minima und weniger Empfindlichkeit.
Die Schärfe von Modellen korreliert negativ mit der OOD-Genauigkeit.
Trích dẫn
"Flachere Minima führen zu besserer OOD-Generalisierung." - Cha et al. (2021)