Open Science für Forschende
Reproducibility and Replicability Knowledge
-
Dieses Video führt Studierende in die Idee und den aktuellen (2022) Stand von Open Science ein. Es zeigt verschiedene Definitionen, konzentriert sich auf die verschiedenen Aspekte der Open Science - offene Daten, Open Source, Open Access, Replizierbarkeit und Vorregistrierung, Bürgerwissenschaften und OER (Open Educational Resources) und betont die Bedürfnisse und Gründe für ihre Entwicklung. Das Video beschreibt auch die Herausforderungen und möglichen zukünftigen Schritte, um eine offenere und transparentere Wissenschaft zu erreichen.
Conceptual and Statistical Knowledge
Pre-registration
Bei einer Prä-Registrierung beschreiben Forschende vor Beginn der Datenerhebung (mindestens aber vor der Inspektion bereits gewonnener oder noch in der Erhebung befindlicher Daten, z.B. im Falle von Sekundär-Datenanalysen) die zentrale(n) Forschungsfrage(n) und Hypothesen, Details des Forschungsdesigns, der geplanten Stichprobe und der statistischen Analysen ihrer geplanten Studie und reichen diese bei einem Repositorium ein. Das erhöht die Transparenz im Forschungsprozess und schützt vor fragwürdigen Forschungspraktiken, wie z.B. dem sogenannten „HARKing“ (hypothesizing after results are known). Mit dem Einreichen bei einem Repositorium wird die Prä-Registrierung üblicherweise mit einem Zeitstempel versehen und kann nicht mehr geändert oder gelöscht werden.
Die nachfolgende Übersicht bietet eine Kurzinformation dreier häufig genutzter Optionen für die Prä-Registrierung.
-
- Link: https://aspredicted.org/
- AsPredicted erlaubt standardisierte Präregistrierungen von Studienplänen (inkl. Hypothesen, Fallzahl- und Analyseplanung) anhand von 10 vorgegebenen Fragen. Die durch diese Pflicht-Fragen vorgegebene Struktur erleichtert auch „Einsteigern“ das Anlegen einer Präregistrierung.
- Abgeschlossene (von allen AutorInnen bestätigte) Präregistrierungen können nicht verändert oder gelöscht werden, aber: wird innerhalb weniger Tage nach einer Präregistrierung eine neue angelegt, kann die vorherige als „Draft“ gekennzeichnet werden und wird dann durch die neue Registrierung überschrieben. Dies bietet sich an, wenn kurz nach einer Präregistrierung Fehler in dieser auffallen oder Ergänzungen gewünscht werden.
- Nützliche Ausfüllhinweise und FAQ werden bereitgestellt.
-
- Link: https://osf.io/
- OSF (Open Science Forum) ist ein Online-Repositorium für Forschungsprojekte
- Zu jedem in OSF angelegten Forschungsprojekt kann (können) eine (oder mehrere) Präregistrierung(en) angelegt werden
- Zahlreiche Registrierungs-Templates sind verfügbar, sie erlauben unterschiedliche Grade an Flexibilität vs. Standardisierung (z.B. maximal flexible „Open Ended Registration“ oder hoch-standardisierte „Pre-Registration in Social Psychology “; auch AsPredicted-Vorlage als Template verfügbar
- Nützliche Informationen und Ausfüllhinweise durch OSF verfügbar
-
- Link: https://www.psycharchives.org/en/item/088c79cb-237c-4545-a9e2-3616d6cc8453
- Prä-Registrierung von Studien auf der Plattform PreReg in Psychology, bereitgestellt durch das ZPID: Das Template „PRP-Quant“ wird heruntergeladen, ausgefüllt und anschließend auf die Plattform PsychArchives hochgeladen.
- PRP-Quant stellt eine ausführliche Vorlage zur Erstellung von Präregistrierungen als Ergebnis einer internationalen Taskforce verschiedener psychologischer Gesellschaften dar (u.a. DGPs, APA, BPS).
- PRP-Quant gibt 45 Fragen vor anhand derer detaillierte Aspekte der Theorie (inkl. Hypothesen), der Methodik und der geplanten Auswertung festgelegt werden. Zusätzlich zur ausgefüllten Vorlage müssen beim Hochladen in das Repositorium diverse Meta-Daten angegeben werden.
- Nützliche Informationen und Ausfüllhinweise sind in Form eines Webinars verfügbar.
-
AsPredicted OSF PreReg Strukturierung/Standardisierung hoch template-abhängig (sehr) hoch Repositorium Internet Archive
(web.archive.org)
Open Science Forum (OSF) Storage (USA oder Deutschland)
PsychArchives Host Wharton Credibility Lab
(University of Pensylvania)
Center for Open Science ZPID
(Leibniz-Institut für Psychologie)
Anmeldemodalitäten Nur Emailadresse ORCID oder OSF-Account
(kostenfrei)
ORCID oder Leibniz Psychology Account
(kostenfrei)
Prä-registrierung nach Abschluss der Datenerhebung möglich?
[ ❌ ]
(teilw. praktiziert, nicht empfohlen)
✔️
✔️
Einzelaspekte registrierbar?
(z.B. nur Hypothesen)
❌ ✔️
[ ❌ ]
(manuell können Teile aus der Vorlage vor dem Hochladen gelöscht werden)
Anonymisierbar?
(z.B. für blinded review)
✔️
✔️
[ ✔️ ]
(nur manuell möglich durch Entfernen der Namen aus dem Template)
Bestätigung durch alle AutorInnen 6 Tage 48 Stunden Nicht erforderlich Ohne Bestätigung Registrierung verfällt
(Zustimmungs-Regelung)
Registrierung erfolgt
(Widerspruchs-Regelung)
n/a ´DOI verfügbar ❌ ✔️
✔️
Entwurfs-Modus ✔️
(bei "self-destruct" Option verfällt die Registrierung nach 24 h)
✔️
("delete draft" Option vor Abschluss der Registrierung)
✔️
Nicht abgelossene Registrierungen verfallen nach 62 Tagen