TOBI: Eine App zum Tracken von bibliometrischen Open Data ist jetzt verfügbar
Sind offene Datenquellen zuverlässig genug, um bibliometrische Analysen durchzuführen? Mit TOBI wollen wir diese Frage beantworten, indem wir die Qualität offener Datenquellen bewerten. Zu den ersten Ergebnissen gehört eine App.
Sind offene Datenquellen zuverlässig genug, um bibliometrische Analysen durchzuführen? Mit dem Projekt TOBI (Towards Open Bibliometric Indicators) wollen wir diese Frage beantworten. Dazu identifizieren wir die wichtigsten offenen bibliometrischen Datenquellen und bewerten ihre Qualität. Für die Evaluierung der Datenquellen werden vor allem die Forschungsergebnisse Schweizerischer Hochschulen und anderer Forschungseinrichtungen herangezogen. Das Projekt wird vom Team Wissensmanagement der ETH-Bibliothek geleitet und von externe Seite swissuniversities mitfinanziert.
Warum aber ist es überhaupt wichtig, sicherzustellen, dass die Qualität bibliometrischer Daten gut ist? Metadaten zu Forschungsleistungen bilden die Grundlage für quantitative Forschungsbewertungen. Fehlen wichtige Metadaten in einer Liste von Publikationen einer bestimmten Institution (z. B. Institutionszugehörigkeit oder Anzahl Zitierungen), wird die bibliometrische Analyse die Publikationen einer Institution nicht korrekt abbilden. Daher ist es wichtig, die Qualität der Metadaten zu untersuchen, um Stärken und Schwächen der Datenquellen zu identifizieren und entscheiden zu können, wie die Indikatoren zur Forschungsbewertung adäquat genutzt werden können.
Besonders wichtig ist dies für Institutionen und Akteure, die bei der Forschungsbewertung der Declaration on Research Assessment (DORA) und dem Agreement on Reforming Research Assessment (CoARA) entsprechen möchten. Beide betonen die Notwendigkeit einer offenen und fairen Bewertung und möchten die verantwortungsvolle Verwendung bibliometrischer Indikatoren fördern.
TOBI wurde im März 2023 lanciert. Eines der ersten Ergebnisse ist eine externe Seite Web-App zum Tracken wissenschaftlicher Metadaten. Benutzerinnen und Benutzer können eine benutzerdefinierte Liste von DOIs eingeben oder eine zufällige Stichprobe von DOIs einer bestimmten Schweizer Hochschule wählen. Die App sucht die Metadaten, die mit den DOIs in offenen Datenquellen verknüpft sind, und liefert die entsprechenden Zahlen. Auf diese Weise können Benutzerinnen und Benutzer Unterschiede bei Zitierungs-, Literaturverweis- und Autorenzahlen für eine kleine Gruppe von DOIs überprüfen und mögliche Verzerrungen oder Fehler feststellen.
Das zweite Ergebnis ist eine Liste offener bibliometrischer Datenquellen mit einem Bericht über deren Funktionen. Diese kann auf der externe Seite TOBI-Website eingesehen werden.