Nichtsignifikante Ergebnisse vollständig und ehrlich berichten

1. Die geprüfte Aussage vor der Formulierung rekonstruieren

Beginne nicht mit dem Satz „Die Hypothese wurde widerlegt“. Notiere zunächst, welche Hypothese mit welchem Verfahren unter welchen Annahmen geprüft wurde. Die ASA warnt davor, wissenschaftliche Schlussfolgerungen allein an einem p-Wert oder einer Schwelle festzumachen. Ein nichtsignifikantes Ergebnis ist für sich genommen weder ein Beweis für Gleichheit noch ein Maß dafür, wie wahrscheinlich die Nullhypothese wahr ist.

Lege für deinen Ergebnisabschnitt ein eigenes Berichtsblatt an: untersuchte Personen oder Einheiten, Zielgröße, Vergleich, tatsächlich ausgewertete Fallzahl, Schätzung, Unsicherheitsmaß und Testresultat. Übertrage diese Angaben aus der kontrollierten Auswertung, nicht aus dem Gedächtnis. Wenn unterschiedliche Variablen verschiedene Fallzahlen haben, muss das im Bericht erkennbar werden. Ein gemeinsames Stichproben-N am Kapitelanfang erklärt solche Unterschiede nicht automatisch.

Prüfe vor dem Schreiben die Richtung der Zielgröße. Bei einer Skala für Belastung bedeutet ein höherer Wert etwas anderes als bei einer Skala für Wohlbefinden. Vertauschte Gruppen oder umgekehrt kodierte Items können eine scheinbar überraschende Richtung erzeugen. Kontrolliere Beschriftung und Berechnung, bevor du eine Erklärung für das Ergebnis suchst. Ein sprachlich vorsichtiger Absatz kann einen falsch berechneten Vergleich nicht reparieren.

Weiterführend: American Statistical Association: Statement on Statistical Significance and P-Values

2. Schätzung und Unsicherheit zusammen darstellen

Berichte den geschätzten Unterschied oder Zusammenhang mit seiner Einheit und einem passenden Unsicherheitsmaß. Die PRISMA-Erläuterung für Review-Abstracts unterscheidet bei nichtsignifikanten Befunden zwischen breiten Intervallen mit verbleibender Unklarheit und engen Intervallen, die wichtige Unterschiede weniger plausibel machen. Der Standard gilt konkret für systematische Reviews; für deine eigene Untersuchung ist dies eine nützliche Darstellungslogik, kein automatisch übertragener vollständiger Berichtsstandard.

Im vollständig fiktiven Lernbeispiel sei ein Mittelwertunterschied von zwei Skalenpunkten mit einem 95-%-Konfidenzintervall von minus drei bis sieben gegeben. Der Absatz sollte diese Spanne sichtbar machen, statt lediglich „kein Unterschied“ zu sagen. Ob zwei Punkte fachlich wichtig wären, braucht eine vorher begründete Einordnung. Das Beispiel sind erfundene Zahlen zur Formulierung, keine Studie und keine Rechenanleitung für jedes Design.

Nutze für den eigenen Text zwei getrennte Fragen: Was wurde geschätzt, und wie präzise ist diese Schätzung? Formuliere danach erst die begrenzte Schlussfolgerung. Falls du praktische Gleichwertigkeit behaupten möchtest, brauchst du ein dafür geeignetes Design, begründete Grenzen und eine entsprechende Analyse. Ein großer p-Wert allein liefert diese Prüfung nicht. Hole bei solchen Schlussfolgerungen fachliche Statistikberatung ein, statt eine allgemeine Gleichheitsaussage einzusetzen.

Weiterführend: Beller et al.: PRISMA for Abstracts, PLOS Medicine (2013)

3. Auch unerwartete und ergänzende Befunde nachvollziehbar halten

Ordne alle vorab vorgesehenen Analysen ihren Forschungsfragen zu. Ein nichtsignifikanter Hauptbefund sollte nicht verschwinden, während ein interessanter Nebenbefund die Überschrift übernimmt. Kennzeichne nachträglich hinzugefügte Auswertungen als solche. Für die eigene Kontrolle hilft eine Matrix mit den Zeilen der geplanten Fragen und den Spalten Analyse, Ergebnisstelle und Abweichung. Eine leere Ergebnisstelle ist ein Anlass zur Prüfung, keine Einladung zur selektiven Auswahl.

Schreibe nicht „fast signifikant“, um einen Schwellenwert sprachlich zu umgehen. Nenne den tatsächlichen Wert in der geforderten Darstellungsweise und beschreibe die geschätzte Größe mit ihrer Unsicherheit. Trenne die Darstellung des Befunds von einer Erklärung dafür. Wenn du vermutest, dass die Stichprobe zu klein war, prüfe diese Vermutung fachlich. Ein enttäuschendes Ergebnis beweist nicht rückwirkend, dass jede größere Stichprobe die gewünschte Aussage ergeben hätte.

Vergleiche Text, Tabelle und Zusammenfassung Zeile für Zeile. Stimmen Vorzeichen, Einheiten, Referenzgruppe und Fallzahlen überein? Überprüfe außerdem, ob eine Tabelle deutlich mehr Unsicherheit zeigt als der dazugehörige Satz. Bewahre die Auswertungsversion auf, aus der die Werte stammen. So können Korrekturen nachvollzogen werden, ohne dass jemand aus einer älteren Datei erneut andere Zahlen in den Ergebnisabschnitt übernimmt.

4. Die Diskussion auf das tatsächlich Gezeigte begrenzen

Beginne die Diskussion mit einer Antwort auf die Forschungsfrage, deren Sicherheit zum Befund passt. Beschreibe dann mögliche Erklärungen, alternative Deutungen und konkrete Grenzen. Verwechsle eine methodische Einschränkung nicht mit einer Entschuldigung, die das gewünschte Ergebnis behauptet. Auch ein unsicherer Befund kann nützlich sein, wenn er zeigt, welche Aussage mit dem vorliegenden Material offenbleibt und welche nächste Untersuchung diese Unsicherheit verringern könnte.

Der Statistikfinder kann helfen, die berichtete Analyse im Verhältnis zu Frage und Datenstruktur zu überprüfen. Er berechnet und verifiziert deine Kennwerte nicht. Nimm für eine sprachliche Überarbeitung deshalb immer den kontrollierten Statistikoutput und die fachlichen Vorgaben hinzu. Ein professionell klingender Absatz ist erst dann brauchbar, wenn seine Angaben und sein Erkenntnisanspruch stimmen.