대형 언어 모델의 효율적인 학습을 위한 신경 기반 토폴로지 희소 훈련 알고리즘

본 논문은 신경망 네트워크에서 관찰되는 선호적 연결 및 중복 시냅스 제거 메커니즘을 활용하여, 대형 언어 모델의 성능을 유지하면서도 효율성을 높이는 신경 기반 토폴로지 희소 훈련 알고리즘 NEUROPRUNE을 제안한다.