Forscher von der UC Santa Barbara, UC Berkeley, Stanford University und der University of Virginia haben eine sechsjährige Studie zur Replizierbarkeit von Ergebnissen in den Sozial- und Verhaltenswissenschaften durchgeführt. Sie wollten zeigen, dass hohe Replizierbarkeit durch beste Praktiken möglich ist. Die Forscher entdeckten und replizierten 16 neue Ergebnisse unter Verwendung von bewährten Praktiken wie Vorregistrierung, großen Stichprobengrößen und Replikationsfidelität. Die Ergebnisse ihrer Studie, die in Nature Human Behaviour veröffentlicht wurden, legen nahe, dass Replizierbarkeit mit besten Praktiken erreichbar ist.
Die Replikationsergebnisse in dieser Studie waren zu 97% so groß wie die Originalergebnisse. Bei früheren Replikationsprojekten wurden Replikationsergebnisse in etwa 50% der Originalgröße beobachtet. Die Studie umfasste 120.000 Teilnehmer und zeigte extrem hohe Replizierbarkeitsraten in verschiedenen sozialen, verhaltensbezogenen und psychologischen Bereichen.
Eine wichtige Neuerung der Studie bestand darin, dass alle beteiligten Labore sich verpflichteten, die anfänglichen Bestätigungsstudien unabhängig vom Ergebnis zu replizieren und so eine Schieflage zugunsten positiver Ergebnisse zu vermeiden. Diese Vorgehensweise zeigte mehrere Fälle auf, in denen Studiendesigns, die anfangs keine signifikanten Ergebnisse lieferten, zuverlässige Effekte erzielten, wenn sie in anderen Laboren repliziert wurden.
Die Ergebnisse der Studie zeigen eine Replizierbarkeitsrate von 86% auf der Grundlage statistischer Signifikanz. Unabhängige Tests bestätigten die Neuheit der Entdeckungen. Die Forscher kamen zu dem Schluss, dass niedrige Replizierbarkeit und abnehmende Effekte nicht unausweichlich sind und dass durch rigorose Methoden eine hohe Replikationsrate erreicht werden kann. Es wird jedoch weitere Untersuchungen erfordern, um herauszufinden, welche Praktiken am besten funktionieren.
Einführung
Die Bedeutung der Replizierbarkeit in den Sozial- und Verhaltenswissenschaften
Die sechsjährige Studie zur Replizierbarkeit
Überblick über die von Forschern der UC Santa Barbara, der UC Berkeley, der Stanford University und der Universität Virginia durchgeführte Studie
Das Ziel der Studie
Das Ziel der Forscher besteht darin, die Erreichbarkeit hoher Replizierbarkeit durch bewährte Verfahren zu demonstrieren
In der Studie verwendete Methoden
Erläuterung der verwendeten bewährten Verfahren wie Vorregistrierung, große Stichprobengrößen und Replikationsgenauigkeit
Replizierte Ergebnisse und Resultate
Überblick über die replizierten Ergebnisse und deren Bedeutung
Anzahl der replizierten Ergebnisse
Die Forscher haben im Rahmen der Studie 16 neue Erkenntnisse entdeckt und repliziert
Vergleich der Replikationsgrößen
Die replizierten Ergebnisse in dieser Studie waren zu 97% so groß wie die ursprünglichen Ergebnisse im Vergleich zu früheren Replikationsprojekten, bei denen replizierte Ergebnisse lediglich etwa 50% der ursprünglichen Größe aufwiesen
Stichprobengröße und Replizierbarkeitsraten
Überblick über die 120.000 Teilnehmer, die an der Studie beteiligt waren, und die außerordentlich hohen Replizierbarkeitsraten, die in verschiedenen sozialen, verhaltensbezogenen und psychologischen Bereichen beobachtet wurden
Innovationen und Hauptergebnisse
Erläuterung der innovativen Aspekte der Studie und der Hauptergebnisse
Verpflichtung zur Replikation von Initial-Bestätigungsstudien
Beschreibung des Ansatzes, bei dem sich alle beteiligten Labore zur Replikation der Initial-Bestätigungsstudien verpflichteten, unabhängig vom Ergebnis, um eine Verzerrung zugunsten positiver Ergebnisse zu vermeiden
Entdeckung von Effekten in gescheiterten Initialstudien
Beispiele für Fälle, bei denen Studiendesigns, die zunächst keine signifikanten Ergebnisse lieferten, bei Replikationen an anderen Laboren zuverlässige Effekte zeigten
Schlussfolgerung und Auswirkungen
Zusammenfassung der Ergebnisse der Studie und ihrer Auswirkungen auf die Replizierbarkeit von Ergebnissen in den Sozial- und Verhaltenswissenschaften
Replikationsrate und Bestätigung der Neuheit
Die Ergebnisse der Studie deuten auf eine 86%ige Replizierbarkeitsrate basierend auf statistischer Signifikanz hin, und unabhängige Tests haben die Neuheit der Entdeckungen bestätigt
Potenzial für hohe Replikationsraten
Schlussfolgerung, dass niedrige Replizierbarkeit und abnehmende Effekte nicht unvermeidlich sind und rigoröse Verfahren zu hohen Replikationsraten führen können
Zukünftige Forschungsrichtungen
Anerkennung, dass es weitere Untersuchungen erfordert, um herauszufinden, welche Verfahren am besten funktionieren
