Diskussionsnotizen OSIP Meeting 09.02.2022
- Anwesende Personen:
OSIP-Mitglieder
Stefan Scherbaum, Anne Gärtner, Alexander Strobel, Caroline Surrey, Christoph Scheffel, Daniel Leising, Gundula Thiele, Josephine Zerna, Judith Herbers, Matthias Rudolf, Oliver Grenke, Peggy Wehner, René Dutschke, Anja Kräplin
Gäste und assoziierte Mitglieder
Vincent Zipper, Kristina Herzog, Ulrike Senftleben
- Protokoll: Vincent Zipper
- Moderation: Stefan Scherbaum
TOPs
-
Wie sollen Open Science Kriterien zukünftig in Berufungskommissionen berücksichtigt werden? 60min
-
OSIP im Sommersemester 5min
-
Verschiedenes 10min
In der Berufungskommission (BK) zur Professur Sozialpsychologie ist Open Science ein weiterer Indikator gewesen, der mit in die Bewertung eingegangen ist. Berücksichtigt wurden Präregistrierungen, Open Data, Open Code und Materials sowie zusätzliche Open Science Praktiken. Dazu wurde zunächst eine Selbstauskunft der Bewerber:innen eingeholt (Selbstbewertung mit 0-3 Punkten pro Kriterium). Die Mitglieder der BK bewerteten die Vertrauenswürdigkeit dieser Selbstauskunft auf Basis stichprobenartiger Überprüfung der Angaben (z.B. ob Präregistrierungen auffindbar sind) und vergaben einen Credibility Score von 0.33, 0.66 oder 0.99 mit dem die Punkte der Selbstauskunft multipliziert wurden. Die sich so ergebenden vertrauenswürdigen Punkte wurden zur Bewertung der Open Science Aktivitäten herangezogen.
Es stellt sich die Frage, wie und welche Open Science Kriterien in zukünftigen BKs berücksichtigt werden sollen. Kann ihnen ein Gewicht gegeben werden, etwa indem die restlichen Ergebnisse an ihnen relativiert werden? Die Anwesenden brainstormen.
- Man könnte einen Multiplikationsfaktor hinzufügen, z.B. basierend auf der Zahl der positiven Paper.
- Sollte ein Mindeststandard bei Open Science festgelegt werden, der erreicht werden muss?
- Bei den Methoden sollte differenziert werden. Ein Registered Report sollte mehr Gewicht bekommen als Open Data.
- Bewerber:innen könnten die aus ihrer Sicht 10 besten Paper aus den letzten Jahren benennen und selbst bewerten.
Es sollte eine Arbeitsgruppe durch den Fakultätsrat eingesetzt werden, die sich mit diesem Thema befasst und auch Input von anderen Universitäten liefern kann. An dieser sollten auch Studierende beteiligt sein
Zusätzlich wird eine Task Force erstellt, die sich mit der Implementierung von Open Science Kriterien in BKs befasst. DL und AG erklären sich bereit.
Es sollte auch auf Universitätsebene angesetzt werden. Alle Kriterien in BKs werden bisher in einer Excel-Tabelle festgehalten, die von den Vertreter:innen des Mittelbaus ausgefüllt wird. Dies ist eine große Belastung und sehr viel Arbeit. Eine Datenbank oder Tabelle zum Selbstausfüllen für Bewerber:innen könnte hier Entlastung bringen.
OSIP im Sommersemester
Die Termine der OSIP-Treffen im Sommersemester werden am 16.03. bestimmt.
Verschiedenes
- Die DGPS-Kommission “Anreizstrukturen in der Wissenschaft und wissenschaftliches Fehlverhalten” hat zum ersten Mal getagt und Daniel Leising zu ihrem Vorsitzenden bestimmt. Alle Mitglieder sind hoch motiviert.
- OSIP-Award: Die Fakultät stellt Gelder zur Verfügung. Arbeiten können demnächst eingereicht werden. Alle Informationen werden über den Mitarbeiterverteiler der Fakultät verbreitet.
Das nächste OSIP-Meeting findet am 16.03.2022 um 13:30 Uhr statt. Der Link zum virtuellen Meetingraum wird ca. eine Woche vorher über den Mailverteiler verschickt. Alle OSIPs sind herzlich eingeladen Themenvorschläge einzubringen.
Diskussionsnotizen OSIP Meeting 09.02.2022
OSIP-Mitglieder
Stefan Scherbaum, Anne Gärtner, Alexander Strobel, Caroline Surrey, Christoph Scheffel, Daniel Leising, Gundula Thiele, Josephine Zerna, Judith Herbers, Matthias Rudolf, Oliver Grenke, Peggy Wehner, René Dutschke, Anja Kräplin
Gäste und assoziierte Mitglieder
Vincent Zipper, Kristina Herzog, Ulrike Senftleben
TOPs
Wie sollen Open Science Kriterien zukünftig in Berufungskommissionen berücksichtigt werden?
60minOSIP im Sommersemester
5minVerschiedenes
10minWie sollen Open Science Kriterien zukünftig in Berufungskommissionen berücksichtigt werden?
In der Berufungskommission (BK) zur Professur Sozialpsychologie ist Open Science ein weiterer Indikator gewesen, der mit in die Bewertung eingegangen ist. Berücksichtigt wurden Präregistrierungen, Open Data, Open Code und Materials sowie zusätzliche Open Science Praktiken. Dazu wurde zunächst eine Selbstauskunft der Bewerber:innen eingeholt (Selbstbewertung mit 0-3 Punkten pro Kriterium). Die Mitglieder der BK bewerteten die Vertrauenswürdigkeit dieser Selbstauskunft auf Basis stichprobenartiger Überprüfung der Angaben (z.B. ob Präregistrierungen auffindbar sind) und vergaben einen Credibility Score von 0.33, 0.66 oder 0.99 mit dem die Punkte der Selbstauskunft multipliziert wurden. Die sich so ergebenden vertrauenswürdigen Punkte wurden zur Bewertung der Open Science Aktivitäten herangezogen.
Es stellt sich die Frage, wie und welche Open Science Kriterien in zukünftigen BKs berücksichtigt werden sollen. Kann ihnen ein Gewicht gegeben werden, etwa indem die restlichen Ergebnisse an ihnen relativiert werden? Die Anwesenden brainstormen.
Es sollte eine Arbeitsgruppe durch den Fakultätsrat eingesetzt werden, die sich mit diesem Thema befasst und auch Input von anderen Universitäten liefern kann. An dieser sollten auch Studierende beteiligt sein.
Zusätzlich wird eine Task Force erstellt, die sich mit der Implementierung von Open Science Kriterien in BKs befasst. DL und AG erklären sich bereit.
Es sollte auch auf Universitätsebene angesetzt werden. Alle Kriterien in BKs werden bisher in einer Excel-Tabelle festgehalten, die von den Vertreter:innen des Mittelbaus ausgefüllt wird. Dies ist eine große Belastung und sehr viel Arbeit. Eine Datenbank oder Tabelle zum Selbstausfüllen für Bewerber:innen könnte hier Entlastung bringen.
OSIP im Sommersemester
Die Termine der OSIP-Treffen im Sommersemester werden am 16.03. bestimmt.
Verschiedenes
Das nächste OSIP-Meeting findet am 16.03.2022 um 13:30 Uhr statt. Der Link zum virtuellen Meetingraum wird ca. eine Woche vorher über den Mailverteiler verschickt. Alle OSIPs sind herzlich eingeladen Themenvorschläge einzubringen.