Neue Veröffentlichung von Lukas Fink und Jan Marcus: „Replication Code Availability over Time and Across Fields“
News vom 02.12.2024
English Version - see below
Neue Veröffentlichung von Lukas Fink und Jan Marcus: „Replication Code Availability over Time and Across Fields“
Das Papier „Replication Code Availability over Time and Across Fields“ von Lukas Fink und Jan Marcus ist zur Veröffentlichung in Economic Inquiry angenommen worden: https://doi.org/10.1111/ecin.13267. Die Studie untersucht die Verfügbarkeit von Replikationscode für die Forschung mit Daten des deutschen Sozio-oekonomischen Panels (SOEP).
Replikationscode ist wichtig, um die Reproduzierbarkeit von wissenschaftlichen Studien zu gewährleisten - damit andere die Ergebnisse überprüfen, sich auf die Ergebnisse verlassen und auf früheren Forschungen aufbauen können. Doch wie verbreitet ist diese Praxis im akademischen Publikationswesen? Bei der Analyse von 2.518 begutachteten Artikeln (veröffentlicht zwischen 1985 und 2021), über 2.600 Autoren-Webseiten und Archiven stellte die Studie fest, dass nur 6 % der Studien Replikationscode enthalten. Erfreulicherweise hat die öffentlichen Bereitstellung von Code seit Anfang der 2010er Jahre drastisch zugenommen: 2021 enthielten 17,8 % der Studien Replikationscode. Technologische Fortschritte, Zeitschriftenrichtlinien und das zunehmende Problembewusstsein der Forschenden sind für diesen Wandel mitverantwortlich.
Im Rahmen der Studie wurden auch die Richtlinien für die Bereitstellung von Code in 478 Zeitschriften anhand der TOP Factor Database, der Webseiten der Zeitschriften und einer Umfrage unter mehr als 90 Herausgeber*innen untersucht. Die Ergebnisse zeigen, dass Richtlinien für das verpflichtende Bereitstellen von Code in allen Disziplinen zugenommen haben, wobei wirtschaftswissenschaftliche Fachzeitschriften eine Vorreiterrolle spielen. Wichtig ist, dass viele Forscher den Code über persönliche Webseiten und nicht in Artikeln oder Zeitschriftenarchiven freigeben, was die Rolle des zunehmende Problembewusstseins von Forschenden für die steigende Verfügbarkeit von Replikationscode unterstreicht. Diese Studie untermauert die Bedeutung von Transparenz in der „Credibility Revolution 2.0“: Sie fördert nicht nur strenge Methoden, sondern auch offene wissenschaftliche Praktiken wie die öffentliche Bereitstellung von Daten und Code.
Lesen Sie den vollständigen Artikel (Open Access über das Projekt DEAL): https://doi.org/10.1111/ecin.13267.
New Publication by Lukas Fink and Jan Marcus: "Replication Code Availability over Time and Across Fields"
The paper “Replication Code Availability over Time and Across Fields” by Lukas Fink and Jan Marcus, has been accepted for publication in Economic Inquiry: https://doi.org/10.1111/ecin.13267. The study explores the availability of replication code for research using data from the German Socio-Economic Panel (SOEP).
Replication code is essential for ensuring computational reproducibility—allowing others to verify results, trust findings, and build upon prior research. However, how common is this practice in academic publishing? By analyzing 2,518 peer-reviewed articles (published between 1985 and 2021), over 2,600 author webpages, and archives, the study found that only 6% of studies provide replication code. Encouragingly, code sharing has increased dramatically since the early 2010s: by 2021, 17.8% of studies included replication code. Technological advances, journal policies, and researcher awareness are likely to drive this change.
The research also examined code-sharing policies in 478 journals through the TOP Factor Database, journal webpages, and a survey of 90+ editors. Results show that code-sharing policies are increasingly being adopted across disciplines, with economics journals leading the way. Importantly, many researchers share code via personal webpages rather than in articles or journal archives, emphasizing the role of individual awareness in promoting transparency. This study highlights the importance of transparency in the “Credibility Revolution 2.0”: advancing not only rigorous methods but also open science practices like data and code sharing.
Read the full article (Open Access via project DEAL): https://doi.org/10.1111/ecin.13267.