Es war einmal.. .. eine Zelle und sie wurde nimmermehr gesehen?

Essay
JIF und h-Index handelt es sich jedoch nicht
um normierte Indikatoren, weshalb dem
Einsatz beider Indikatoren sehr enge Grenzen
gesetzt sind. (1) Die Anzahl der Zitierungen
für eine Publikation steigt mit der
Zeit an. Um die Wirkung von Publikationen
aus unterschiedlichen Jahren miteinander
vergleichen zu können, ist deshalb eine
Normierung auf das Publikationsjahr notwendig.
(2) Eine große Anzahl an bibliometrischen
Studien konnte zeigen, dass in
den Fächern eine unterschiedliche Anzahl
an Zitierungen zu erwarten ist. So kann
man beispielsweise in der Biologie deutlich
mehr Zitierungen als in der Mathematik
erwarten. Auch innerhalb eines Faches sind
zwischen den einzelnen Gebieten deutliche
Unterschiede bei den mittleren Zitierungen
zu beobachten. Bibliometriker normieren
deshalb, wenn sie in eine Studie Publikationen
aus unterschiedlichen Fächern und
Jahren einbeziehen (beispielsweise bei
einem Vergleich von Universitäten), die
Zitierungen der Publikationen im Hinblick
auf das Publikationsjahr und das Fach, in
dem sie publiziert wurden.
Bei den normierten Indikatoren kann
man grob zwischen den „Cited-Side“- und
den „Citing-Side“-Indikatoren unterscheiden.
Der „Mean-Normalized Citation
Score“ (MNCS) ist der wichtigste „Cited-Side“-Indikator.
Um die Wirkung einer Publikation
im Hinblick auf das Fach und das
Publikationsjahr zu normieren, werden die
38
Illustration: Fotolia / freshidea
Zitierungen der betreffenden Publikation
durch die mittlere Anzahl der Zitierungen
von denjenigen Publikationen geteilt, die
im gleichen Publikationsjahr und im gleichen
Fach veröffentlicht wurden (dem so
genannten Referenzset). Dabei ergeben
sich Werte über 1 (die Publikation hat in
diesem Fall eine überdurchschnittliche
Wirkung) oder unter 1. Um die Publikationen
einzelnen Fächern (beziehungsweise
Referenzsets) zuzuordnen, werden (1)
die publizierenden Zeitschriften fachlich
gruppiert, (2) Publikationen von Experten
für Fachdatenbanken (wie zum Beispiel
Chemical Abstracts) klassifiziert, oder (3)
Algorithmen verwendet, die Publikationen
mit Hilfe von Zitationsdaten klassifizieren.
Im „Leiden Ranking“ (www.leidenranking.
com), das zu einer größeren Anzahl von
Universitäten verschiedene Indikatorwerte
anbietet, findet sich beispielsweise
der MNCS für
jede Universität.
Da der MNCS auf der
Basis von mittleren Zitierhäufigkeiten
berechnet
wird (und der arithmetische Mittelwert
nicht bei Daten verwendet werden sollte,
die schief verteilt sind), sind in der Bibliometrie
Zitationsperzentile als weitere
Möglichkeit vorgeschlagen worden, die
Wirkung von Publikationen auf der „Cited-Side“
zu normieren. Perzentile geben
zu jeder Publikation in einem Referenzset
den Anteil von Publikationen an, die genauso
häufig zitiert wurden oder weniger
Zitierungen erhalten haben. Da Zitationsperzentile
auf das Publikationsjahr und das
Fach normiert sind, kann damit die Wirkung
von Publikationen aus unterschiedlichen
Fächern und Publikationsjahren
miteinander verglichen werden. Zu den
Perzentil-basierten Indikatoren gehören
auch die Indikatoren, die die Anzahl oder
den Anteil derjenigen Publikationen (etwa
eines Wissenschaftlers) angeben, die zu
den x Prozent meist-zitierten Publikationen
in einem Fach beziehungsweise Publikationsjahr
gehören. Diese Indikatoren werden
beispielsweise im kürzlich veröffentlichten
Leiden Manifest zur Bibliometrie (Hicks et
al., Nature 520: 429-31) als die Indikatoren
bezeichnet, die besonders robuste Ergebnisse
liefern. In den meisten Fällen beziehen
sich diese Indikatoren auf die fünfzig,
zehn und ein Prozent meist-zitierten Publikationen.
Zur Gruppe der „Cited-Side“-Indikatoren
gehört auch ein Indikator, der kürzlich
von Autoren vorgeschlagen wurde,
die bei den National Institutes of Health
(NIH) arbeiten. Die so genannte Relative
Citation Ratio (RCR) wurde vor allem vor
dem Hintergrund entwickelt, eine bessere
Alternative für die Messung der Wirkung
von Publikationen in der Biomedizin zu
haben als den JIF. Um die Referenzsets für
die Berechnung des RCR zusammenzustellen,
wird – und das ist das neuartige
an diesem Indikator – das bibliometrische
Verfahren der Ko-Zitationsanalyse verwendet.
Es werden alle Publikationen in ein Referenzset
einbezogen, die gemeinsam mit
der betreffenden Publikation in anderen
Veröffentlichungen zitiert wurden. Auch
wenn der Ansatz, auf diese Art und Weise
das Referenzset zu bilden, interessant ist,
konnte Ludo Waltman vom CWTS zeigen,
dass eine Zitierung der betreffenden Publikation
aus ganz bestimmten Fächern zu
einer Verringerung des RCR führen kann.
Damit verletzt der Indikator ein grundlegendes
Prinzip in der bibliometrischen
Indikatorik: Wenn eine
„Zitierzahlen müssen Publikation weitere Zitierungen
erhält, sollte sich
jeweils nach Fach und
die zusätzliche Wirkung
Zeit normiert werden.“ in den normierten Indikatoren
entsprechend
widerspiegeln. Ich konnte gemeinsam mit
Robin Haunschild vom Max Planck Institut
für Festkörperforschung (siehe Essay
S. 40-43) in einer empirischen Studie zeigen,
dass der RCR-Indikator sehr hoch mit
etablierten normierten Indikatoren in der
Bibliometrie korreliert. Auf der Basis dieses
Ergebnisses könnte man deshalb argumen-
7-8/2016 Laborjournal