대형 언어 모델의 일관성 정렬을 통한 견고성 향상

대형 언어 모델의 일관성 문제를 정량적으로 정의하고, 지침 증강 감독 미세 조정과 일관성 정렬 학습이라는 2단계 학습 프레임워크를 제안하여 모델의 견고성을 향상시킨다.