المفاهيم الأساسية
샘플별 활성화 패턴을 활용한 SWAP-Score는 효율적인 NAS를 위한 혁신적인 메트릭스입니다.
الملخص
SWAP-Score는 샘플별 활성화 패턴을 기반으로 한 새로운 훈련 무료 메트릭스이다.
SWAP-Score는 다양한 검색 공간과 작업에서 기존 훈련 무료 메트릭스보다 강한 상관 관계를 보여준다.
SWAP-Score는 모델 크기 제어를 가능하게 하며, NAS에서 경쟁력 있는 성능을 달성한다.
ABSTRACT
훈련 무료 메트릭스인 SWAP-Score는 샘플별 활성화 패턴을 기반으로 한 새로운 메트릭스이다.
SWAP-Score는 다양한 검색 공간과 작업에서 기존 메트릭스보다 우수한 성능을 보여준다.
SWAP-Score는 모델 크기를 제어하고, NAS에서 경쟁력 있는 성능을 달성한다.
INTRODUCTION
NAS에서 효율적인 아키텍처 검색을 위해 SWAP-Score가 소개되었다.
훈련 무료 메트릭스의 한계를 극복하기 위해 SWAP-Score가 개발되었다.
SWAP-Score는 NAS에서 모델 크기 제어와 뛰어난 성능을 제공한다.
الإحصائيات
SWAP-Score는 NAS-Bench-101/201/301 및 TransNAS-Bench-101에서 15개의 기존 훈련 무료 메트릭스를 능가한다.
NAS-Bench-201 네트워크에서 정규화된 SWAP-Score와 CIFAR-100 검증 정확도 사이의 Spearman 상관 계수는 0.90이다.
اقتباسات
"SWAP-Score는 새로운 고성능 훈련 무료 메트릭스이다."
"SWAP-Score는 다양한 검색 공간과 작업에서 우수한 성능을 보여준다."