대형 언어 모델 정렬을 위한 선호도 최적화 기법 비교: 동일 문맥 vs. 다른 문맥

대형 언어 모델을 사람의 선호도에 맞춰 정렬하기 위해서는 동일 문맥에서의 선호도 비교뿐만 아니라 다른 문맥에서의 선호도 비교도 고려해야 한다.