대형 언어 모델의 LoRA 기반 전문가 혼합을 통한 효율적인 미세 조정

LoRA 기반 전문가 혼합(MixLoRA)은 대형 언어 모델의 성능을 향상시키고 계산 자원 사용을 최소화하는 효율적인 미세 조정 방법이다.