Wie es um die Reproduzierbarkeit in Astronomie und Astrophysik steht? Im Vergleich zu anderen Wissenschaften recht gut, würde ich meinen. Aus den folgenden Gründen:

Nachvollziehbare Ergebnisse

Erste Voraussetzung, damit jemand ein Ergebnis reproduzieren kann: Was da getan wurde, muss in dem betreffenden Fachartikel so beschrieben sein, dass es bis ins Detail nachvollzogen werden kann. So detailliert, dass ein anderer Wissenschaftler die Versuche oder Beobachtungen selbst wiederholen kann bzw. könnte. Dass das nicht immer der Fall ist, hatte Lars am Beispiel von Synthesen in der Chemie geschildert.

Auch die Astronomie dürfte vom Idealzustand noch einigermaßen weit entfernt sein. Wie das Ideal laut dem Astronomen David Hogg aussehen könnte, hatte ich vor anderthalb Jahren in Die Zukunft der Fachartikel beschrieben: Zu jedem Fachartikel sollte eine große Sammeldatei mit den Originaldaten veröffentlicht werden, außerdem ein Programm, welches man auf jene Sammeldatei anwenden kann und welches daraus alle in dem Fachartikel präsentierten Ergebnisse ermittelt.

Aber wenn schon nicht eine Sammeldatei inklusive Auswertungsprogramm: Zumindest die originalen Beobachtungsdaten sind für viele astronomische Daten in der Tat verfügbar, und das ist viel wert, wenn man nachvollziehen will, wie die Autoren eines Artikels zu ihren Ergebnissen gekommen sind. Die Beobachtungsdaten, die ein Astronom z.B. von Teleskopen der Europäischen Südsternwarte ESO oder vom Weltraumteleskop Hubble erhält, sind in der Regel nach einer gewissen Zeit automatisch öffentlich zugänglich – in entsprechenden Archiven, ESO-Daten z.B. hier und Hubble-Daten hier. Im Rahmen der “Virtual Observatory”-Inititativen – hier die deutsche Initiative GAVO – wird systematisch versucht, solche Daten noch besser nutzbar zu machen. [Nachtrag: Carolin Liefke betrachtet diesen Aspekt auf den Kosmologs noch von einem anderen Blickwinkel aus.]

Einfachheit und Zusammenhänge

Den zweiten Vorteil in Sachen Reproduzierbarkeit teilt die Astronomie bzw. Astrophysik mit den anderen Teilbereichen der Physik. Für die Psychologie berichtet der Beitrag von Ed Yong, der dieses Bloggewitter ausgelöst hat, von den Problemen, eine Studie nicht genau zu reproduzieren, sondern “‘konzeptuelle Replikationen’ durch[zuführen, also] ähnliche Hypothesen mit anderen Methoden [zu prüfen]. Kritiker warnen, dass dies dem Bau eines Kartenhauses auf schwankendem Grund gleiche.”

Aber das ist, denke ich, ein wichtiger Unterschied eben z.B. zwischen Psychologie und Astrophysik. “Simple Details wie der Wochentag oder die Farbe der Tapete können die Ergebnisse einer psychologischen Untersuchung beeinflussen, doch tauchen sie niemals im Methodenteil eines Fachartikels auf” schreibt Yong – sicher gibt es auch beim Modellieren astronomischer Objekte Störeinflüsse und Aspekte, die man der Einfachheit halber vernachlässigt. Aber es ist deutlich einfacher als in der Psychologie, diese Einflüsse zu quantifizieren und schließlich Modelle zu formulieren, die man sehr wohl an neuen Beispielobjekten prüfen kann, ohne damit auf schwankendem Grund zu stehen und ohne, dass Faktoren, an die man niemals gedacht hat, einem in die Quere kommen.

Technischer Fortschritt und Durchmusterungen

Wer tatsächlich nur eine frühere Studie reproduziert, dürfte auch in der Astronomie Probleme mit der Veröffentlichung in einer Fachzeitschrift bekommen. Trotzdem dürften sich in der astronomischen Fachliteratur viele reproduzierte Ergebnisse und Messungen finden. Zum einen, weil die technische Entwicklung bei der Beobachtungstechnik voranschreitet; zum anderen, weil interessante Objekte selbstverständlich mehr als einmal beobachtet werden. Die Kollegen, die M 51 mit dem Weltraumteleskop Hubble beobachtet haben, reproduzieren damit sicherlich wesentliche Teile von hunderten Beobachtungen zuvor. Aber da diese Beobachtungen auch etwas Neues bringen, dürften sie keine grundsätzlichen Probleme gehabt haben, ihre Daten bzw. die darauf basierenden Schlüsse zu veröffentlichen.

Wenn der Astrometriesatellit Gaia in diesem Jahr startet, wird er während der folgenden Jahre ganz selbstverständlich die gleichen Sterne anpeilen wie wie sein Vorgänger Hipparcos – allerdings dann außerdem noch viele weitere. Und er wird unter anderem die gleichen Messungen vornehmen – allerdings deutlich genauer. Und selbstverständlich wird diese “Reproduktion und mehr” veröffentlicht werden.

Hinzu kommen systematische Durchmusterungen, bei denen bestimmte Sorten von Vollständigkeit – z.B. die Untersuchung aller Objekte einer bestimmten Art in einem bestimmten Himmelsausschnitt – zum Programm gehören. Auch so entsteht ein Geflecht von Reproduktionen.

Alles in allem habe ich den Eindruck, dass die Zusammenfassung der Bloggewitterbeschreibung, die konstatiert “[i]mmer deutlicher w[erde], dass die Wissenschaft ein Problem hat […]” und die “quer durch alle Fachbereiche” nicht-reproduzierbare Ergebnisse bescheinigt, sich damit deutlich zu weit aus dem Fenster lehnt. Was Yong in seinem Artikel an Problemen beschreibt, lässt sich nicht so einfach auf ‘die Wissenschaft’ verallgemeinern.