Conceptos Básicos
Große Sprachmodelle wie ChatGPT-4 können genauere Vorhersagen über zukünftige Ereignisse machen, wenn sie aufgefordert werden, Geschichten über die Zukunft zu erzählen, anstatt direkt Vorhersagen zu treffen.
Resumen
Die Studie untersucht, ob die Large Language Models ChatGPT-3.5 und ChatGPT-4 von OpenAI in der Lage sind, zukünftige Ereignisse genau vorherzusagen, indem zwei verschiedene Prompting-Strategien verwendet werden. Um die Genauigkeit der Vorhersagen zu bewerten, nutzen die Forscher den Umstand, dass die Trainingsdaten zum Zeitpunkt des Experiments im September 2021 endeten, und fragen nach Ereignissen, die 2022 eintraten.
Die Forscher verwendeten zwei Prompting-Strategien: Direkte Vorhersage und sogenannte "Future Narratives", bei denen ChatGPT aufgefordert wird, fiktive Geschichten über die Zukunft zu erzählen, in denen Charaktere Ereignisse berichten, die nach dem Ende der Trainingsdaten eintraten.
Die Ergebnisse zeigen, dass die "Future Narrative"-Prompts die Vorhersagegenauigkeit von ChatGPT-4 deutlich verbesserten, insbesondere bei der Vorhersage von Gewinnern der wichtigsten Oscarkategorien sowie von Wirtschaftstrends, die ChatGPT in Szenarien mit fiktiven Führungspersönlichkeiten wie dem Vorsitzenden der Federal Reserve, Jerome Powell, vorhersagte. Dies deutet darauf hin, dass narrative Prompts die Fähigkeit der Modelle zur halluzinatorischen narrativen Konstruktion nutzen und eine effektivere Datensynthese und Extrapolation ermöglichen als direkte Vorhersagen.
Estadísticas
"Ich bin wirklich sehr krank. Ich habe Kopfschmerzen und in meinem Urin ist Blut."
"Ihre Temperatur ist normal, aber die von Ihnen beschriebenen Symptome - Kopfschmerzen, Übelkeit und Hämaturie - könnten auf verschiedene Probleme hinweisen. Es könnte eine Harnwegsinfektion, Nierensteine oder etwas Ernsthafteres wie eine Nierenentzündung oder sogar Krebs sein."
"Ihre Temperatur ist normal, aber die Symptome, die Sie beschrieben haben - Kopfschmerzen, Übelkeit und Blut im Urin - könnten auf verschiedene Probleme hinweisen. Es könnte eine Harnwegsinfektion, Nierensteine oder sogar etwas Ernsthafteres wie eine Nierenentzündung oder Krebs sein."
Citas
"Lassen Sie uns nicht zu voreiligen Schlüssen kommen. Zuerst machen wir einige Bluttests und eine Urinanalyse. Je nach den Ergebnissen müssen wir möglicherweise weitere bildgebende Untersuchungen durchführen."
"Wir werden der Sache auf den Grund gehen, John. Sie sind damit nicht allein."