VL 3

Question 1

Klassischer Publikationsprozess mit Peer Review

Answer 1

• Forscherteam führt Studie durch
• Ergebnisse werden von Gutachtern geprüft
• Editor entscheidet über Annahme, Ablehnung oder Revision

Question 2

Replikationskrise in der Wissenschaft

Answer 2

• Wissenschaftliche Erkenntnisse nur gesichert, wenn reproduzierbar
• Nichtreproduzierbare Ergebnisse haben keine Bedeutung für die Wissenschaft

Question 3

Studie zur Replizierbarkeit (Open Science Foundation 2015)

Answer 3

• Versuch, Ergebnisse von 100 Studien zu replizieren
• Weniger als die Hälfte der Studien konnte repliziert werden
• Erfolg der Replikation hängt von der Stärke des ursprünglichen Effekts ab, nicht von der Expertise

Question 4

Gründe für Nichtreplizierbarkeit

Answer 4

• Stichprobenfehler: Effekte aufgrund statistischer Zufälle
• Umsetzungseffekte: Variabilität in Stichprobe, Messmethode, Design oder Analyse
• Allegiance Bias: Neigung von Forschern, Ergebnisse zu bestätigen, die ihrer Gruppenzugehörigkeit entsprechen
• HARKing (hypothesizing after the results are known): Rückwärtsgerichteter Forschungsprozess, um interessante Effekte zu finden, statt Hypothesen vorab aufzustellen
• Publication Bias: Tendenz zur Veröffentlichung von Studien mit bestätigenden, großen oder neuartigen Effekten

Question 5

Open Science als Antwort auf die Replikationskrise

Answer 5

• Präregistrierung von Studien und Hypothesen:
  –> Online-Veröffentlichung von Forschungsabsichten, inklusive Hypothesen, Forschungsdesign, Stichprobenziehung und Auswertungsmethoden
  –> Verhindert HARKing
  –> Erweiterung durch “In Principal Acceptance”: Zusage der Veröffentlichung basierend auf Präregistrierung
• Veröffentlichung von Untersuchungsmaterialien:
  –> Vollständige Veröffentlichung von Stimuli, Fragebögen, Tests, und Anweisungen erleichtert Replikation
• Veröffentlichung der Daten:
  –> Bereitstellung von Rohdaten und aggregierten Daten ermöglicht Überprüfung und Weiterverwendung

-Öffentlicher Zugang zu wissenschaftlichen Artikeln:
–> Eigenveröffentlichung von Preprints erleichtert schnellen und offenen Wissensaustausch
–> Reduziert Hürden für den Zugang zu Forschungsergebnissen