Als Peer Reviewer war ich einige Jahre lang aktiv und erhielt dafür vom Verlag aus UK sogar eine Auszeichnung. Wie üblich habe ich mir die Mühe gemacht, die jeweilige Einreichung gründlich zu prüfen; wer die Studien verfasst hatte, erfuhr ich natürlich nicht.

Auch bekam ich nichts dafür. Weder die Verfasser noch die Reviewer erhalten Honorare, während die Journals zugleich von den Abonnenten eine Menge Geld kassieren.

Die letzten beiden Male erhielt ich Manuskripte, die zwar formgerecht mit dem Zitierstil von Harvard ausgestattet waren – so etwas wird bei jeder Einreichung stets geprüft, wer sich an die Zitiervorgaben nicht hält, kommt gar nicht erst durch. Aber...: die Autoren hatten sich die Unsitte von APA zueigen gemacht, wonach man (seit 2009 bereits) bei indirekten Zitaten nicht mehr die genauen Seitenzahlen der verwendeten Quellen angeben solle. Siehe dazu auch meinen Beitrag hier im Blog.

Warum leiten die Schriftleitungen der Journals solche Manuskripte, die in keiner Weise mehr überprüfbar wären, überhaupt an die Reviewer weiter? Da hängt ein aufwändiger technischer Apparat des Verlags dran, der alles anonymisiert verteilt, später die Rückgaben und Kommentare der Reviewer auffängt und weiterverarbeitet – aber keiner schaut zu Beginn erst mal hinein, ob die grundlegenden wissenschaftlichen Qualitätskriterien wie das der Überprüfbarkeit überhaupt erfüllt sind...?

Hätte ich nun diese unüberprüfbaren Manuskripte durchgehen lassen sollen?

Die „Peer Review“-Verfahren, die in vielen wissenschaftlichen Fachzeitschriften angewendet werden, haben in letzter Zeit nicht nur von meiner Seite und nicht nur von Adam Mastroianni viel Kritik erfahren. 

Diese Verfahren sehen vor, dass wissenschaftliche Artikel von anderen Wissenschaftlern in der gleichen Fachrichtung überprüft werden, bevor sie veröffentlicht werden. Doch wie zuverlässig sind diese Verfahren wirklich?

Ein häufiger Kritikpunkt an „Peer Review“ ist, dass es nicht immer gerecht zugeht und dass Artikel aufgrund von persönlichen Vorurteilen oder Fehleinschätzungen abgelehnt werden können. 

Zudem gibt es immer wieder Fälle von Plagiaten, die trotz „Peer Review“ durch die Netze schlüpfen. Dies zeigt, dass das „Peer Review“-Verfahren auch nach so langer Zeit nicht perfekt ist.

Einige bereits bekannte alternative Vorgehensweisen zum gängigen „Peer Review“ wären beispielsweise das Open Peer Review und das Post Publication Peer Review.

• Beim Open Peer Review werden die Identitäten der Reviewer öffentlich gemacht und die Bewertungen der Artikel sind für alle sichtbar. 
• Beim Post-Publication Peer Review werden Artikel zunächst veröffentlicht und anschließend von anderen Wissenschaftlern überprüft.

Während diese alternative Vorgehensweisen zweifellos ihre Vorzüge haben, sind aber auch sie keine Garantie dafür, dass die wissenschaftliche Integrität gewahrt bleibt. 

Es gibt also keine perfekte Lösung für das Problem der Überprüfung wissenschaftlicher Artikel, und es bleibt abzuwarten, wie sich die Dinge in Zukunft entwickeln werden. 

Eines ist sicher: Das „Peer Review“-Verfahren an sich ist keine Garantie für die Qualität und Integrität wissenschaftlicher Arbeit. Es ist gut gemeint, wird aber leider nicht gut gemacht. Eigentlich kann das weg, wie man so sagt und wie es auch Adam Mastroianni ausgedrückt hat.

Effektiver wäre meines Erachtens das Verfahren, was es in jedem Verlag schon immer gab und gibt: Schlussredakteure prüfen die Einreichungen der Beiträge und übernehmen mit ihrer Freigabe die Mitverantwortung. In diesem Fall wären halt Fachwissenschaftler die Schlussredakteure. Schon wäre die Sorgfalt womöglich größer und die Qualitätssicherung besser...