Die Studie untersucht, ob die Large Language Models ChatGPT-3.5 und ChatGPT-4 von OpenAI in der Lage sind, zukünftige Ereignisse genau vorherzusagen, indem zwei verschiedene Prompting-Strategien verwendet werden. Um die Genauigkeit der Vorhersagen zu bewerten, nutzen die Forscher den Umstand, dass die Trainingsdaten zum Zeitpunkt des Experiments im September 2021 endeten, und fragen nach Ereignissen, die 2022 eintraten.
Die Forscher verwendeten zwei Prompting-Strategien: Direkte Vorhersage und sogenannte "Future Narratives", bei denen ChatGPT aufgefordert wird, fiktive Geschichten über die Zukunft zu erzählen, in denen Charaktere Ereignisse berichten, die nach dem Ende der Trainingsdaten eintraten.
Die Ergebnisse zeigen, dass die "Future Narrative"-Prompts die Vorhersagegenauigkeit von ChatGPT-4 deutlich verbesserten, insbesondere bei der Vorhersage von Gewinnern der wichtigsten Oscarkategorien sowie von Wirtschaftstrends, die ChatGPT in Szenarien mit fiktiven Führungspersönlichkeiten wie dem Vorsitzenden der Federal Reserve, Jerome Powell, vorhersagte. Dies deutet darauf hin, dass narrative Prompts die Fähigkeit der Modelle zur halluzinatorischen narrativen Konstruktion nutzen und eine effektivere Datensynthese und Extrapolation ermöglichen als direkte Vorhersagen.
다른 언어로
소스 콘텐츠 기반
arxiv.org
더 깊은 질문