Fehlerhafte Darstellung von Retraktionen in der OpenAlex-Datenbank

Core Concepts

Die OpenAlex-Datenbank weist Mängel bei der Darstellung des Retractionsstatus von Publikationen auf, was zu Fehlklassifizierungen führt und die Integrität wissenschaftlicher Erkenntnisse gefährdet.

Abstract

Die Untersuchung zeigt, dass die OpenAlex-Plattform, die Daten aus verschiedenen akademischen Quellen zusammenführt, Probleme bei der korrekten Darstellung des Retractionsstatus von Publikationen aufweist. Obwohl OpenAlex die Metadaten aus der Crossref-Datenbank bezieht, die detaillierte Informationen zu Retraktionen, Korrekturen und anderen Änderungen enthält, wird diese Information in OpenAlex in einem einzelnen booleschen Feld "is_retracted" zusammengefasst. Dies führt dazu, dass Publikationen, die lediglich Korrekturen oder Bedenkenäußerungen erfahren haben, fälschlicherweise als retraktiert gekennzeichnet werden.

Dieses Problem betrifft nicht nur direkte Nutzer von OpenAlex, sondern auch Anwender anderer akademischer Ressourcen, die OpenAlex-Daten über die API verwenden. Die Autoren haben den Fehler dem OpenAlex-Team gemeldet, das rund 2.300 fehlerhafte Einträge korrigiert hat. Allerdings sind die Metadaten, die zwischen dem 22. Dezember 2023 und dem 19. März 2024 über die API bereitgestellt wurden, sowie die Datensnapshots vom 24. Januar 2024 und 27. Februar 2024 von diesem Problem betroffen. Nutzer sollten diese Daten sorgfältig überprüfen und gegebenenfalls ersetzen.

Stats

Die Crossref-Metadaten enthalten detaillierte Informationen zum Publikationsstatus, wie z.B. "Correction", "Expression of Concern" und "Crossmark Retraction".
OpenAlex fasst diese Informationen jedoch in einem einzelnen booleschen Feld "is_retracted" zusammen, was zu Fehlklassifizierungen führt.

Quotes

"Mislabelling such influential publications as retractions not only has the potential to misinform healthcare professionals and jeopardize patient care but also risks undermining public trust in the quality of scientific research as a whole."
"Consequently, the ramifications of this problem extend beyond users directly accessing OpenAlex via the web interface to encompass users of other academic resources leveraging the OpenAlex API."

Key Insights Distilled From

(Non-)retracted academic papers in OpenAlex

by Christian Ha... at arxiv.org 03-21-2024

https://arxiv.org/pdf/2403.13339.pdf

Deeper Inquiries

Wie können Metadaten-Plattformen wie OpenAlex sicherstellen, dass Informationen zu Retraktionen, Korrekturen und anderen Änderungen an Publikationen präzise und transparent dargestellt werden?

Metadaten-Plattformen wie OpenAlex können die Genauigkeit und Transparenz der Informationen zu Retraktionen, Korrekturen und anderen Änderungen an Publikationen durch mehrere Maßnahmen sicherstellen. Zunächst sollten sie eine granulare Darstellung des Publikationsstatus ermöglichen, anstatt alle Änderungen in einem einzigen binären Feld zu konsolidieren. Dies würde es ermöglichen, verschiedene Arten von Änderungen wie Retraktionen, Korrekturen und Ausdrücke von Bedenken klar zu kennzeichnen. Darüber hinaus sollten Metadaten-Plattformen regelmäßige Validierungen und Abgleiche mit vertrauenswürdigen Quellen wie der Retraction Watch-Datenbank durchführen, um sicherzustellen, dass die Informationen konsistent und aktuell sind. Es ist auch wichtig, klare Richtlinien und Standards für die Erfassung und Darstellung von Änderungen in Publikationen festzulegen, um eine einheitliche und zuverlässige Praxis zu gewährleisten. Schulungen für Mitarbeiter, die mit Metadaten arbeiten, können ebenfalls dazu beitragen, die Qualität und Konsistenz der Daten zu verbessern.

Welche Auswirkungen können Fehler in der Darstellung von Publikationsstatus auf die Integrität und Glaubwürdigkeit der Wissenschaft haben?

Fehler in der Darstellung von Publikationsstatus können erhebliche Auswirkungen auf die Integrität und Glaubwürdigkeit der Wissenschaft haben. Wenn Publikationen fälschlicherweise als zurückgezogen oder korrigiert gekennzeichnet werden, kann dies zu Verwirrung unter Forschern, Bibliothekaren und anderen Interessengruppen führen. Dies kann zu falschen Schlussfolgerungen, ungenauen Zitierungen und einer Verzerrung der wissenschaftlichen Erkenntnisse führen. Darüber hinaus kann dies das Vertrauen der Öffentlichkeit in die Wissenschaft insgesamt untergraben, da fehlerhafte Informationen die Glaubwürdigkeit der Forschungsergebnisse in Frage stellen. Fehlerhafte Darstellungen von Publikationsstatus können auch zu rechtlichen Konsequenzen führen, insbesondere wenn falsche Informationen zu Retraktionen oder Korrekturen zu Schäden oder Fehlinterpretationen führen.

Wie können Forscher und Bibliotheken die Qualität und Zuverlässigkeit von Metadaten in Datenbanken wie OpenAlex systematisch überprüfen und verbessern?

Forscher und Bibliotheken können die Qualität und Zuverlässigkeit von Metadaten in Datenbanken wie OpenAlex systematisch überprüfen und verbessern, indem sie mehrere bewährte Praktiken anwenden. Zunächst sollten sie regelmäßige Audits der Metadaten durchführen, um Inkonsistenzen, Fehler oder fehlende Informationen zu identifizieren. Dies kann durch den Abgleich von Metadaten mit anderen vertrauenswürdigen Quellen wie Verlagswebsites, DOI-Registrierungsagenturen und spezialisierten Datenbanken erfolgen. Darüber hinaus können Forscher und Bibliotheken automatisierte Tools und Skripte verwenden, um Metadaten auf Genauigkeit und Vollständigkeit zu überprüfen. Die Zusammenarbeit mit anderen Institutionen und Experten auf dem Gebiet der Metadatenqualität kann auch dazu beitragen, bewährte Verfahren auszutauschen und die Datenintegrität zu verbessern. Durch Schulungen und Schulungen für Mitarbeiter können Forscher und Bibliotheken zudem das Bewusstsein für die Bedeutung von qualitativ hochwertigen Metadaten schärfen und die Einhaltung von Standards fördern.