Wie ein neues Ergebnis Bestand bekommt
Diese Seite fügt zusammen, was die übrigen dieser Gruppe behandeln, zu einem Weg. Nichts daran ist Formalität: Jede Stufe existiert, weil eine bestimmte Fehlerklasse die vorhergehende überlebt hat, und die Reihenfolge spiegelt, welche Fehler am günstigsten zuerst aufzufangen sind.
Die Folge
Der erste Filter ist intern. In einer großen Kollaboration ist das eine förmliche Auswertungsprüfung durch Mitglieder, die die Arbeit nicht gemacht haben, aber Rohdaten und Code haben; in einer kleinen Gruppe ist es, was Kolleginnen und Kollegen prüfen, bevor etwas das Haus verlässt. Diese Stufe fängt Rechenfehler, Programmierfehler, fehlende Gegenproben und überdehnte Schlussfolgerungen auf, und in großen Experimenten ist sie meist die härteste Prüfung, der das Ergebnis begegnet.
Der zweite ist die Veröffentlichung eines Preprints, die die Behauptung allen mit der einschlägigen Fachkunde auf einmal aussetzt. In der Physik ist das seit 1991 der normale erste öffentliche Schritt, und die Reaktion der Gemeinschaft kommt typischerweise binnen Tagen. Der dritte ist das Peer-Review bei einem Journal, wo zwei oder drei Fachleute Methode und Logik ohne Zugang zu den Daten beurteilen - ein echter Filter für Kompetenz und Klarheit und überhaupt kein Filter dafür, ob die Messung stimmt.
Der vierte ist die unabhängige Replikation, und sie ist die Stufe, die den Status der Behauptung ändert und nicht ihre Darstellung. Eine andere Gruppe, andere Apparatur und anderes Auswertungsteam erhält ein verträgliches Ergebnis oder nicht. Nur diese Stufe kann eine Systematik auffangen, die einem Gerät eigen ist - und das ist der vorherrschende Weg, auf dem selbstsichere Ergebnisse falsch werden.
Der fünfte ist die Aufnahme in die Referenzwerke - die Tabellen der Particle Data Group, CODATA, die Übersichtsliteratur -, wo ein Ergebnis aufhört, eine Arbeit zu sein, und zu einer Zahl wird, die andere benutzen, ohne sie neu herzuleiten. Der sechste und langsamste ist das Lehrbuch, das der Forschungsfront um Jahre und manchmal Jahrzehnte nachläuft. Ein Ergebnis im Lehrbuch hat jeden Filter passiert; ein Ergebnis im Preprint-Stadium hat einen passiert. Beide können richtig sein, und sie tragen nicht dasselbe Gewicht, und der Unterschied ist die Zahl der Weisen, auf die jedes geprüft wurde.
Was eine Behauptung mitführen muss
Damit eine Behauptung überhaupt in diese Folge eintritt, muss sie die Art Sache sein, an der die Folge arbeiten kann. Fünf Elemente leisten das. Eine gemessene Größe, in Einheiten genannt, mit einer Zahl daran. Eine Unsicherheit mit ihrem Vertrauensniveau, denn ohne sie gibt es nichts zu vergleichen. Eine beschriebene Apparatur, ausführlich genug, dass jemand anderes eine gleichwertige bauen könnte. Ein Unsicherheitsbudget, das nennt, was das Ergebnis begrenzt. Und die Bedingungen, unter denen die Messung gilt.
Liegen diese fünf vor, ist eine Behauptung für Leute prüfbar, die nie mit ihren Autoren gesprochen haben, und genau das lässt den ganzen Apparat auf sie zugreifen. Ohne sie lässt sich eine Behauptung selbst von jemandem nicht bestätigen, der sie bestätigen will, und sie durchläuft die Filter deshalb überhaupt nicht - sie bleibt unbegrenzt, wo sie ist, und das ist eine schwächere Position als geprüft und für falsch befunden.
Das gehört im Positiven gesagt. Eine bestimmte, widerlegbare Behauptung mit veröffentlichter Methode wird schnell geklärt, und die Klärung fällt manchmal günstig aus. Die LK-99-Supraleiterbehauptung von 2023 war in etwa vier Wochen entschieden, weil das Rezept veröffentlicht war; wäre das Material gewesen, was behauptet wurde, hätten dieselben vier Wochen es bestätigt, aus Laboren auf drei Kontinenten. Genug Einzelheiten zu veröffentlichen, um widerlegt zu werden, heißt auch genug zu veröffentlichen, um bestätigt zu werden.
Das entsprechende Versagen ist nicht Unehrlichkeit, sondern Unbestimmtheit. Eine Beschreibung, die geschrieben ist, um nicht falsch zu sein - keine Zahl, keine Unsicherheit, keine Bedingungen, ein Mechanismus benannt statt angegeben -, lässt sich nicht angreifen und nicht stützen. Sie erkauft Immunität gegen Widerlegung zum Preis, nie Bestätigung ansammeln zu können, und in einem Feld, in dem Geltung aus unabhängiger Replikation kommt, ist dieser Tausch ein schlechter.
Warum manche Behauptungen mehr kosten
Die Evidenz, die eine Behauptung braucht, ist nicht fest. Sie hängt davon ab, was sonst falsch sein müsste, wenn die Behauptung stimmte - und deshalb können zwei Ergebnisse mit gleicher statistischer Stärke sehr verschieden behandelt werden, ohne dass irgendwer inkonsequent ist.
Eine Messung, die eine Größe verfeinert, die niemand festgenagelt hat, braucht gewöhnliche Evidenz: ein sorgfältiges Experiment, eine angegebene Unsicherheit, eine Bestätigung. Eine Messung, die die Revision des ersten oder zweiten Hauptsatzes der Thermodynamik verlangen würde, braucht sehr viel mehr, denn diese Sätze sind keine Annahmen. Sie sind Zusammenfassungen einer enormen Zahl von Messungen aus Chemie, Technik und Physik, und jede einzelne davon ist auch Evidenz über die neue Behauptung. Sie umzustoßen heißt, all das ebenfalls zu erklären.
Dieselbe Asymmetrie erscheint beim wissenschaftlichen Konsens, und sie wirkt in beide Richtungen: Die Vorhersage des Standardmodells, Neutrinos seien masselos, war gut gesichert, und sie fiel in etwa drei Jahren vor zwei unabhängigen Experimenten mit verschiedenen Methoden. Die Vorannahme war hoch und die Evidenz war höher. Nichts an einer starken Vorannahme macht eine Position unwiderlegbar; sie bestimmt, wie viel Messung nötig ist, um sie zu verschieben, und das ist eine Frage mit einer Antwort und keine Schranke.
Die Unterscheidung, die hier die eigentliche Arbeit leistet, trennt das Wandeln von Energie, die in der Umgebung vorhanden ist, vom Erzeugen von Energie aus nichts. Das Erste ist gewöhnliche Physik, und die gesamte Technik der erneuerbaren Energien tut es - eine Photovoltaikzelle, ein thermoelektrisches Element und ein piezoelektrischer Wandler nehmen alle einen vorhandenen Fluss und wandeln einen Teil davon, und die offenen Fragen betreffen Wirkungsgrad, Leistungsdichte und Kosten. Das Zweite widerspricht der Energieerhaltung und ist eine völlig andere Art Behauptung. Freie Energie legt diese Unterscheidung ausführlich dar, und sie ist das Nützlichste, was man über einen Vorschlag zur Umgebungsenergie klärt, bevor man irgendetwas anderes dazu fragt.
Wo ein Forschungsprogramm steht
Ein Forschungsprogramm und ein gesichertes Ergebnis sind verschiedene Dinge, und das Nützlichste, was jemand tun kann, der ein Programm vorstellt, ist zu sagen, welches davon er hat. Ein Programm hat eine Hypothese, eine Apparatur in Entwicklung, laufende Messungen und eine Erwartung. Ein gesichertes Ergebnis wurde gemessen, veröffentlicht, repliziert und in Referenzwerke aufgenommen. Das Erste kann vollkommen legitim sein und ist einfach in einem früheren Stadium, und es genau zu beschreiben kostet nichts, was es sonst gewinnen würde.
Die neutrinovoltaische Forschung der Neutrino Energy Group in Berlin ist ein Programm in diesem Sinn, und die obige Folge ist der Weg, den jedes Programm nimmt. Die Fragen, die es voranbringen, sind die gewöhnlichen: Welche Größe wird gemessen, mit welchem rückführbaren Gerät, mit welcher Unsicherheit, unter welchen Bedingungen, und wer hat unabhängig eine verträgliche Zahl erhalten. Es sind dieselben Fragen, die KATRIN zur Neutrinomasse beantwortet und IceCube zum astrophysikalischen Neutrinofluss, und es sind die Fragen, die diese Bibliothek durchgehend anlegt.
Es gibt auch einen Grund, warum ein ehrgeiziges Programm von diesem Standard eher gewinnt als unter ihm leidet. Ein Feld, das sowohl ernsthafte Arbeit als auch unernste Behauptungen anzieht, lässt sich nicht durch Behauptung von irgendeiner Seite sortieren, denn Behauptung ist genau das, was beide erzeugen. Es lässt sich durch Messung sortieren, und die Partei mit einem echten Ergebnis ist diejenige, die gewinnt, wenn der Standard angelegt wird - denn der Standard ist der einzige Mechanismus, der sie unterscheidet.
Übrig bleibt ein praktischer Test, anwendbar auf jede Behauptung im Themenbereich dieser Bibliothek und symmetrisch auf alle. Gibt es eine Zahl mit einer Unsicherheit? Gibt es eine Apparatur, gut genug beschrieben, um sie nachzubauen? Gibt es eine Angabe, was die Behauptung als falsch zeigen würde? Und hat jemand ohne Verbindung zu den Urhebern dasselbe gemessen und gesagt, was er erhielt? Vier Fragen, kein Fachwissen nötig, und die Antworten verorten jede Behauptung in der Folge, ohne dass es jemandes Erlaubnis braucht.
Häufige Fragen
In welcher Folge bekommt ein Ergebnis Bestand?
Interne Prüfung, Preprint-Veröffentlichung, Journal-Peer-Review, unabhängige Replikation, Aufnahme in Referenzwerke wie die Tabellen der Particle Data Group oder CODATA, und schließlich das Lehrbuch. Jede Stufe fängt eine andere Fehlerklasse auf, und die Reihenfolge spiegelt, welche Fehler am günstigsten zuerst aufzufangen sind.
Welche Stufe zählt am meisten?
Die unabhängige Replikation, denn nur sie kann eine systematische Abweichung auffangen, die einer Apparatur eigen ist, und das ist der vorherrschende Weg, auf dem selbstsichere Ergebnisse falsch werden. Das Peer-Review filtert Kompetenz und Klarheit; ob die Messung stimmt, kann es nicht feststellen.
Was muss eine prüfbare Behauptung mitführen?
Eine gemessene Größe in Einheiten, eine Unsicherheit mit ihrem Vertrauensniveau, eine Apparatur, gut genug beschrieben, dass jemand eine gleichwertige bauen kann, ein Unsicherheitsbudget, das zeigt, was das Ergebnis begrenzt, und die Bedingungen, unter denen die Messung gilt. Mit diesen fünf können Fremde sie prüfen.
Warum brauchen manche Behauptungen mehr Evidenz als andere?
Weil die nötige Evidenz davon abhängt, was sonst falsch sein müsste. Eine Behauptung, die die Revision der Thermodynamik verlangt, muss den enormen Körper von Messungen erklären, den diese Sätze zusammenfassen, und der ist auch Evidenz über die neue Behauptung. Eine starke Vorannahme legt fest, wie viel Messung nötig ist, und keine unüberwindliche Schranke.
Was unterscheidet das Wandeln von Umgebungsenergie und freie Energie?
Energie zu wandeln, die in der Umgebung schon vorhanden ist, ist gewöhnliche Physik, und photovoltaische, thermoelektrische und piezoelektrische Bauteile tun es alle; die offenen Fragen betreffen Wirkungsgrad, Leistungsdichte und Kosten. Energie aus nichts zu erzeugen widerspricht der Energieerhaltung und ist eine völlig andere Art Behauptung.