Presentations and Workshop Materials

Here you can find documents on presentations and workshops of the Open Science Initiative (mainly in German).

Increasing Reproducibility Through Shareable Software Environments and Synthetic Datasets - Dr. Philippe Jawinski

"Open code is often regarded to increase reproducibility, facilitate collaboration, and enhance trust in scientific results. In practice, there are many obstacles for scientists to re-run code and verify results. One of these barriers is that researchers usually fail to provide crucial information on software package dependencies. For instance, stating in an article that ‘analyses were conducted using R package BayesFactor 0.9.12-4.4’ neglects that, during installation of BayesFactor, there are nine other packages plus their dependencies that will either be downloaded in their latest versions, or previous releases may be taken from the user’s current R library. As a consequence, researchers end up with varying software environments that hamper reproducibility. Critically, software configurations also change over time on the same computer, so that researchers may even fail to reproduce their own results. To overcome this issue, one easy-to-implement strategy is to use isolated project environments that contain a comprehensive record of exact package versions and can be shared among researchers. In my talk, I will give a brief practical introduction into the two environment managers ‘renv’ and ‘conda’ and will address both their pros and cons. Importantly, analysis code cannot be executed without datasets. In many situations, however, original data cannot be shared publicly as this may compromise research participants’ consent. In the second part of my talk, I will offer a glimpse in how to use ‘synthpop’ to create synthetic datasets that resemble the original data. With the presented tools I seek to draw attention to practical solutions that increase reproducibility and facilitate collaboration in psychological research."
Recording of the talk:
OSIP Talk - Increasing Reproducibility Through Shareable Software Environments and Synthetic Datasets - Dr. Philippe Jawinski.mp4

TUD Service Center Research Data and ZPID DataWiz

"The newly developed ‘Research Data Management Guidance’ of the Faculty of Psychology (‘Handreichung Forschungsdatenmanagement’) describes best practices, resources, tools and support structures for research data management and open science. To put this into practice, Denise Dörfel outlines the services of the Service Center Research Data (Kontaktstelle Forschungsdaten) of TU Dresden and present a promising tool of Leibniz Psychology (ZPID) – the DataWiz (https://datawiz.leibniz-psychology.org/DataWiz/)."
Recording of the talk:
Denise Dörfel - TUD Service Center Research Data and ZPID DataWiz.mp4

Was muss und was kann sich an deutschen Hochschulen ändern? Beschäftigung, Publikationen, Projekte - Prof. Tilman Reitz 

"Im deutschen Hochschulsystem häufen sich Fälle von Fehlverhalten, und dysfunktionale Strukturen geben Anlass zur Sorge. Befristete Verträge für das jüngere wissenschaftliche Personal und schlechte Chancen, danach eine Professur zu erlangen, schaffen enorme Abhängigkeiten. Metriken der Publikationsanerkennung und der Vorrang der Projektförderung geben Anreize, für die Kennzahlen, anstatt für die Erkenntnis zu forschen, belohnen häufig konformistisches oder blenderisches Verhalten, und beeinträchtigen so die Seriosität der Wissenschaft. Öffentliche Gelder werden für die Pflege von Projektfassaden und Profite einiger weniger Wissenschaftsverlage verschwendet. In meinem Vortrag will ich auf mögliche Reformen eingehen, mit denen diese Probleme abgebaut werden könnten, und diskutieren, wie erfolgversprechend diese Schritte wären. Dabei geht es mir konkret um a) unbefristete, unabhängige Arbeitsverhältnisse 'unterhalb' der Professur, b) eine Rückführung von Projektförderung in Grundfinanzierung, c) Open-Access-Publikationen mit gedeckelten Publikationsgebühren und d) eine Selbstorganisation, in der Forschende aus wissenschaftlicher Neugier zusammenarbeiten können, anstatt vorrangig um ihre berufliche Existenz und ihre metrisch beglaubigte Reputation kämpfen zu müssen."
Hier finden Sie die Videoaufzeichnung des Vortrags als Download:
OSIP Talk - Was muss und was kann sich an deutschen Hochschulen ändern? - Prof. Tilman Reitz.mp4
Bei Problemen mit dem Download finden Sie die Datei noch einmal hier: https://tud.link/y4e7

Early career researchers' perspectives on power abuse - Dr. Jana Lasser

"Power abuse is ubiquitous in academia, and is connected to deteriorating mental health of early career researchers and a serious threat to scientific integrity. The fertile ground on which power abuse flourishes are the steep hierarchies and multiple dependencies between early career researchers and their supervisors. During this talk, I am going to present early career researchers' perspectives on power abuse in academia, drawing on findings from three recent surveys in the Max Planck Society, Helmholtz Association and Leibniz society." Presentation slides on Dr Lasser's website
Recording of the talk:
OSIP Talk - Early career researchers' perspectives on power abuse - Dr. Jana Lasser.mp4
If you experience technical difficulties with the download, please click here: https://tud.link/yh93

Means to valuable exploration

Michael Höfler erläutert das Problem der Vermischung von explorativen und konfirmatorischen Ergebnissen und erläutert, wie wertvolle explorative Ergebnisse gewonnen werden können. Präsentationsfolien

Veröffentlichung von Forschungsdaten: Rechte und Pflichten

Anja Kräplin gibt einen kurzen Überblick über die Themen Datenschutzrecht, Urheberrecht, Leistungsschutzrechte und Rechte im Dienstverhältnis. Präsentationsfolien

Um Leben und Tod - Die Mortalitätssalienz-Hypothese auf dem Prüfstand

Simon Schindler gibt einen Einblick in die meta-analytische Forschung zur Terror Management Theory und der Mortalitätssalienz-Hypothese im Zusammenhang mit Open Science und questionable research practices.Präsentationsfolien

Umgang mit Ausreißern und Extremwerten

In der psychologischen Forschung herrscht oft Unsicherheit im Umgang mit Ausreißern und Extremwerten oder das Problem wird einfach ignoriert. Michael Höfler gibt Hinweise zur richtigen Identifikation und Untersuchung von Ausreißern sowie zum korrekten Umgang mit dem Thema. Präsentationsfolien

"Observed Power" und Umgang mit Zufallsfehlern

Michael Höfler beantwortet die Frage, wieso man die Analyse von Mittelwertsunterschieden und Power-Berechnungen nicht auf Grundlage derselben Daten durchführen darf. Außerdem geht er auf generelle Probleme des Power-Konzepts ein und gibt Hinweise zum Umgang mit Unsicherheit in Replikationsstudien. Präsentationsfolien

Standardisierungsmöglichkeiten in der Datenerhebung & Forschungsdatenmanagementsysteme

Das Verwalten von Forschungsdaten kann herausfordernd sein. Managementsysteme helfen beim Aufbereiten, Veröffentlichen und Archivieren auf Langzeit. Gesine Wieder gibt einen Einblick in ausgewählte Tools. Präsentationsfolien

REDCap - ein Überblick

Die Web-App REDCap bietet umfassende Möglichkeiten für das Forschungsdatenmanagement. Der Kurzworkshop zu REDCap von Gesine Wieder behandelt die Themen Datenbankerstellung für Projekte, Einpflegen von Daten,  Individualisierung von Erhebungsabläufen. Präsentationsfolien Vom dem heutigen Kurzworkshop wurde eine Videoaufzeichnung erstellt. Ergänzend finden Sie hier die Aufzeichnung einer Schulung, in der die Datenbankerstellung in REDCap behandelt wird

Bayesianische Statistik - Welche Probleme löst sie und welche nicht?

Michael Höfler zeigt anhand von 9 Problemen Grenzen und Stolperfallen frequentistischer Statistik in der psychologischen Forschung und geht darauf ein, ob diese mit bayesianischer Statistik gelöst werden könnten.  Präsentationsfolien

Causal Diagrams - Directed Acyclic Graphs

DAGs sind eine mathematische Methode, um Annahmen über Beziehungen auszudrücken und stellen eine qualitative Methode dar, die u.a. genutzt werden kann um zu entscheiden, nach welchen Variablen adjustiert werden muss. Michael Höfler zeigt, dass kausale Schlüsse immer über die Daten hinaus gehen, welche Regeln für cuasal diagrams gelten und wie damit kausale Effekte geschätzt werden können. Präsentationsfolien

Pre- & Post-Prints in der Open Science-Welt

Was macht Pre- und Post-Prints aus, welche Möglichkeiten der Veröffentlichung und Unterstützungsangebote der TUD/SLUB gibt es und welche rechtlichen Rahmenbedingungen gelten? Antworten auf diese Fragen geben Eloísa Deola Borges und Manuela Queitsch. Präsentationsfolien

Kosten und Effizienz verschiedener Replikationsregime

Robert Miller präsentiert ein Paper von Lewandowsky & Oberauer (2020) zu den Kosten und der Effizienz verschiedener Replikationsregime und stellt die zentralen Aussagen zur Diskussion Präsentationsfolien                                                                                                 Das Paper selbst ist Open Access publiziert und hier abrufbar.

A Walk in the Garden of Forking Paths - Workhop von Julia Rohrer

Die Unterlagen befinden sich im OSF .

Die Rolle von Standardisierung in der (meta-analytischen) Interpretation psychologischer Forschung - Workshop von Malte Elson

Was sind die Gefahren mangelnder Standardisierung und wie kann man damit umgehen? Präsentationsfolien