Eine aktuelle Studienreihe hat ein seit langem bestehendes akademisches Anliegen in den Fokus gerückt: Ein erheblicher Teil der sozialwissenschaftlichen Forschung hält einer genaueren Prüfung möglicherweise nicht stand. Ergebnisse des Projekts SCORE (Systematizing Confidence in Open Research and Evidence) legen nahe, dass fast die Hälfte der in renommierten sozialwissenschaftlichen Fachzeitschriften veröffentlichten Ergebnisse nicht von unabhängigen Forschern reproduziert werden können.
Obwohl diese Nachricht alarmierend klingen mag, verdeutlicht sie doch eine grundlegende Spannung in der Art und Weise, wie wir in einer immer komplexer werdenden Welt Wissen produzieren, validieren und nutzen.
Der Kern des Problems: Reproduzierbarkeit vs. Replikation
Um die aktuelle Debatte zu verstehen, ist es wichtig, zwischen zwei oft verwechselten Begriffen zu unterscheiden:
- Reproduzierbarkeit: Die Fähigkeit, mit denselben Originaldaten und -methoden dieselben Ergebnisse zu erzielen.
- Replikation: Die Fähigkeit, mit neuen Daten in unterschiedlichen Kontexten die gleichen Ergebnisse zu erzielen.
Das SCORE-Projekt, ein siebenjähriges Projekt, analysierte 3.900 sozialwissenschaftliche Arbeiten. Die Ergebnisse zeigten einen klaren Trend: Neuere Forschungsergebnisse und Studien, die in Fachzeitschriften veröffentlicht wurden, die den „offenen Datenaustausch“ vorschreiben, werden deutlich häufiger reproduziert. Dies deutet darauf hin, dass Transparenz das wirksamste Mittel gegen Fehler ist.
Warum die Wissenschaft Schwierigkeiten hat, sich zu wiederholen
Die Schwierigkeit, Ergebnisse zu reproduzieren, ist nicht unbedingt ein Zeichen von Betrug, sondern spiegelt vielmehr die untersuchten Themen wider. Im Gegensatz zur Laborphysik, in der Variablen streng kontrolliert werden können, befassen sich die Sozial- und Medizinwissenschaften mit komplexen menschlichen Systemen.
Mehrere Faktoren tragen zu dieser Schwierigkeit bei:
– Variable Umgebungen: Menschliches Verhalten und medizinische Ergebnisse werden durch unterschiedliche Fallzahlen, sich verändernde soziale Kontexte und unvorhersehbare individuelle Unterschiede beeinflusst.
– Ressourcenbeschränkungen: Die Durchführung einer vollständigen Replikation ist teuer und zeitaufwändig. Die meisten akademischen Forscher haben einen Anreiz, neue Arbeiten zu produzieren, um ihre Karriere voranzutreiben, anstatt Jahre damit zu verbringen, alte Studien erneut zu testen.
– Methodische Komplexität: Während die erneute Analyse vorhandener Daten relativ einfach ist, ist die Neuerstellung eines gesamten Experiments von Grund auf ein gewaltiges Unterfangen, das selbst KI noch nicht effizient lösen kann.
Die politische Waffe des Zweifels
Eines der größten identifizierten Risiken ist nicht der wissenschaftliche Fehler selbst, sondern die Art und Weise, wie dieser Fehler von politischen Entscheidungsträgern wahrgenommen wird. Es gibt einen wachsenden Trend, wissenschaftliche Unsicherheit in politische Verleugnung umzuwandeln.
Indem politische Akteure den natürlichen Prozess der wissenschaftlichen Verfeinerung als „Krise“ bezeichnen, können sie legitime Unsicherheit als Beweis für ein Systemversagen umdeuten. Diese Taktik wird häufig verwendet, um Untätigkeit zu rechtfertigen oder um stichhaltige Beweise abzutun, die einer bestimmten Agenda widersprechen.
Wenn man die Nichtreplikation als völlige Disqualifizierung einer Theorie betrachtet, verwechselt man Ungewissheit mit Unwissenheit und riskiert eine Lähmung der Entscheidungsfindung dort, wo menschliches Urteilsvermögen am nötigsten ist.
Vertrauen durch Transparenz aufbauen
Die Lösung des Problems der Reproduzierbarkeit besteht nicht darin, die Sozialwissenschaften aufzugeben, sondern die Forschungskultur zu reformieren. Um voranzukommen, muss sich die akademische Gemeinschaft auf Folgendes konzentrieren:
- Universelle Datentransparenz: Dem Beispiel von Geldgebern wie dem UK Economic and Social Research Council folgend, sollten mehr Institutionen von Forschern die Offenlegung ihrer zugrunde liegenden Daten verlangen.
- Anreize für die Verifizierung: Das aktuelle akademische „Publish or Perish“-Modell priorisiert Neuheiten. Eine Verlagerung der Anreize hin zur Belohnung von Forschern, die bestehende Ergebnisse testen und verifizieren, würde eine effektivere „Autokorrektur“ der wissenschaftlichen Aufzeichnungen ermöglichen.
- Kontextualisierung von Beweisen: Den politischen Entscheidungsträgern muss beigebracht werden, einzelne Studien als Teile eines größeren Puzzles zu betrachten. Eine einzelne fehlgeschlagene Replikation macht ein Feld nicht ungültig; vielmehr sollten die Ergebnisse gegen die Gesamtheit der verfügbaren Evidenzbasis abgewogen werden.
Schlussfolgerung
Die Unfähigkeit, bestimmte Studien zu reproduzieren, ist ein Signal für Strukturreformen und kein Grund, die Sozialwissenschaften aufzugeben. Vertrauen in die Forschung wird durch die Akzeptanz von Transparenz und die Anerkennung von Unsicherheit aufgebaut, anstatt zu versuchen, so zu tun, als gäbe es diese nicht.
