이 논문은 언어 모델의 성능을 향상시키기 위해 프롬프트 선택 문제를 시뮬레이션 최적화 문제로 다룬다.
검색 단계에서는 초기 예시 프롬프트를 텍스트 자동 인코더를 통해 벡터로 변환하고, 이를 바탕으로 새로운 프롬프트 후보들을 생성한다. 이후 주성분 분석을 통해 중간 차원의 벡터로 표현된 "소프트 프롬프트" 집합을 구축한다.
평가 및 선택 단계에서는 베이지안 모수 모델을 이용하여 소프트 프롬프트의 평균 점수를 근사하고, 획득 함수를 최적화하여 다음 평가할 프롬프트를 선택한다. 이 과정을 반복하여 최종적으로 가장 높은 평균 점수를 가진 프롬프트를 선택한다.
또한 추가적인 관찰치를 활용하여 검색 단계의 프롬프트 집합을 개선하는 절차도 제안한다.
To Another Language
from source content
arxiv.org
Key Insights Distilled From
by Haoting Zhan... at arxiv.org 04-15-2024
https://arxiv.org/pdf/2404.08164.pdfDeeper Inquiries