이 연구는 OpenAI의 ChatGPT-3.5와 ChatGPT-4가 두 가지 다른 프롬프팅 전략을 사용하여 미래 사건을 정확하게 예측할 수 있는지 조사했다. 2021년 9월까지만 학습 데이터가 있었던 ChatGPT를 활용하여, 2022년에 발생한 사건들에 대한 예측을 요청했다.
직접 예측 프롬프트와 미래 이야기 프롬프트를 사용했는데, 미래 이야기 프롬프트에서 ChatGPT-4의 예측 정확도가 크게 향상되었다. 특히 2022년 아카데미 어워드 주요 부문 수상자와 경제 동향 예측에서 두드러졌다. 이는 ChatGPT의 창의적인 서사 구성 능력이 데이터 종합 및 외삽에 효과적으로 활용될 수 있음을 보여준다.
연구진은 ChatGPT-4가 미래 이야기 형식으로 예측을 수행할 때 상당한 정확도를 보였지만, 직접 예측에서는 성과가 좋지 않았다고 설명했다. 이는 OpenAI가 ChatGPT의 예측 기능 사용을 제한하려 했을 가능성을 시사한다. 그러나 이야기 형식으로 예측을 요청하면 이러한 제한을 우회할 수 있었다.
이 연구 결과는 ChatGPT와 같은 대규모 언어 모델의 예측 능력에 대한 새로운 측면을 보여주며, 향후 분석 분야에서의 활용 가능성을 시사한다.
他の言語に翻訳
原文コンテンツから
arxiv.org
深掘り質問