核心概念
コンピュータビジョンモデルの堅牢性を向上させる方法について包括的な概要を提供します。
統計資料
CIFAR-CとImageNet-Cは19種類および15種類の合成変換で構成されています。
Mixupは2つのソース画像を線形補間して生成します。
Self-supervised contrastive learningは同じソース画像から生成された画像ペアを学習します。
引述
"自己教師ありコントラスティブラーニングは、ソース画像とその増強バージョンの間で似たような潜在表現を学習させます。"
"知識蒸留フレームワークでは少なくとも2つのモデルが必要であり、1つは教師として、もう1つは生徒として情報を蒸留します。"