오픈 언어 모델에서 파라미터 효율적인 미세 조정이 독성에 미치는 영향

대규모 언어 모델의 안전성을 위해 필수적인 미세 조정 작업이 의도치 않게 모델의 독성을 증가시킬 수 있으며, 특히 커뮤니티 기반 모델에서 그 영향을 예측하기 어렵다.