마스크된 구조성 성장으로 언어 모델 사전 훈련 속도 2배 빠르게

마스크된 구조성 성장(MSG)은 모든 가능한 차원에 대한 성장 연산을 지원하여 효율적인 일정을 제공하며, 다양한 모델 구성에서 최신 속도 향상을 달성합니다.