Jeder im Twitter-Wasserkühler spricht über die Vorregistrierung – die Idee, dass Wissenschaftler ihren Forschungsplan einreichen und genehmigen lassen sollten, bevor sie Daten sammeln.
Es gibt zwei (oder mehr?) Seiten der Debatte; Eine Seite sagt, dass wir Forscher stoppen müssen, die selektiv Daten melden, die eine gute Geschichte erzählen, und bequemerweise keine Maßnahmen oder ganze Studien, die dies nicht tun. Der andere sagt, die Vorregistrierung funktioniert einfach nicht für einige Formen der Untersuchung und es bindet die Hände von Forschern, die die Freiheit wollen, Studie 2 nach dem Studium der Ergebnisse von Studie 1, etc. zu ändern. Sie können die beiden Seiten hier und hier lesen, und schau dir diese Storify-Version der Debatte hier an.
Die Registrierung ist ein Lehrbuch der Regulierung. Es ist eine Reihe von Regeln, die verhindern sollen, dass Menschen und / oder Institutionen Praktiken anwenden, die ihnen helfen, aber die Gesellschaft verletzen. Wir wollen nicht, dass die Leute mit ihren Daten "schummeln", also haben wir Regeln aufgestellt, die Betrug verhindern sollen.
Ich habe kein Problem mit der Regulierung. Ich würde den Mist aus der Wall Street und den Ölfirmen regeln, wenn ich das Sagen hätte. Aber ich habe ein paar Bedenken bezüglich der Voranmeldung.
1. Vertrauen. Psychologen zu regulieren ist, als würde man zu APS gehen und ein dickes fettes Schild aufstellen, auf dem steht: "Sie sind nicht vertrauenswürdig."
Vielleicht ist es wahr. Offensichtlich sind einige von uns wirklich nicht zu trauen, wie bekannte Skandale gezeigt haben. Aber ich denke, die meisten von uns sind vertrauenswürdig. Wenn wir darüber nachdenken, wie wir mit den Menschen umgehen sollen, denen wir vertrauen, können wir vielleicht durchkommen, wenn wir unsere Studenten und uns über die besten wissenschaftlichen Praktiken aufklären. Meiner Meinung nach ist dies einer der Punkte, bei denen sich die Voranmeldung lohnt. Ich mag es, vertraut zu werden, aber ich wäre OK, wenn ich ein wenig Vertrauen aufgeben würde, um mich und andere dazu zu zwingen, sich nicht mit Daten zu beschäftigen.
Was ist mit den Betrügern, denen wir wirklich nicht vertrauen können – Vorregistrierungshilfe? Natürlich nicht. Es gibt ein paar tolle Möglichkeiten. Sammeln Sie zuerst Ihre Daten und wenn Sie etwas Gutes haben, registrieren Sie die Methoden, bewegen Sie Ihre Finger für eine Weile, so als ob Sie Daten sammeln und veröffentlichen Sie dann Ihre schönen Daten. Wenn eine Studie Ergebnisse hervorbringt, registrieren Sie sie nicht vorher. Oder wenn das zu viel Aufwand ist, nehmen Sie den traditionellen Ansatz: Fake die Daten.
2. Feindschaftliche Beziehungen erzeugen Gegner. Wenn Sie den Leuten sagen, dass sie nicht vertrauenswürdig sind und dass es ein neues System gibt, das dafür sorgt, dass sie nicht gestört werden, wird das System zum Feind.
Ich würde behaupten, dass wir gerade eine Gesellschaft von überwiegend ehrenwerten und idealistischen Wissenschaftlern haben, die die Wahrheit finden und das Richtige tun wollen. Wiederum ist es eine Frage des Vertrauens, aber ich würde es hassen zu sehen, dass die Gefühle der Wissenschaftler in Bezug auf moralische Verantwortung nachlassen, weil sie die Regulierung als verantwortlich statt selbst sehen.
Ich mache mir Sorgen, dass Doktoranden, die gerade auftauchen, die Voranmeldung als Gegner und als Schmerzen im Nacken sehen werden. Es gibt Möglichkeiten, fast jedes System zu spielen, und es wäre naiv zu glauben, dass es keine Möglichkeiten für die Vorregistrierung gibt.
3. Selektivität ist gut. Ich mache viele Studien. Manche sind nicht großartig. Vielleicht waren sie zu Beginn dumme Ideen oder vielleicht haben sie langweilige, unbestimmte Ergebnisse. Wenn ich zur Psychonomie gehe und den Leuten von diesen Studien erzähle, aus irgendeinem Grund, den ich nicht ergründen kann, scheinen sie immer sofort einzuschlafen.
Das ist schlecht für mich und meine Freunde – also für Autoren und Leser. Erstens, wenn ich etwas vorregistriere, das langweilig wird, muss ich meine Zeit damit verbringen, es zu schreiben, und ich habe nicht genug Zeit, um die guten Sachen zu schreiben, wie es jetzt ist, und schon gar nicht das langweilige Zeug. Ich versuche nicht, schlechte Ergebnisse zu verstecken, sondern verbringe meine Zeit lieber mit Ergebnissen, die zur Literatur beitragen könnten.
Zweitens gibt es bereits viele Artikel zu lesen. Das letzte, was ich will, ist, dass vorregistrierte Artikel herauskommen, auch wenn die Ergebnisse langweilig sind. Außerdem fürchte ich, dass die Menschen anfangen werden, eine Verbindung zwischen "vorregistriertem Artikel" und "Artikel mit Art von langweiligen Ergebnissen" zu bilden. Nicht, dass gute Artikel nicht vorregistriert werden, sondern auch viele langweilige.
Alles in allem geht es wieder um Vertrauen. Wenn Sie an mich glauben, lassen Sie mich mich darauf konzentrieren, Ihnen von meinen besten Studien zu erzählen. Vertraue darauf, dass ich diejenigen, die meine Theorien nicht bestätigen, nicht verstecken werde, ich werde nur die Langweiligen verstecken.
Das Gegenargument zu diesem letzten Punkt ist ein guter: Was, wenn ich 50 unabhängige Studien mache und eines ein verrücktes soziales Priming-Ergebnis zeigt, so dass ich es nur veröffentliche? Aus wissenschaftlicher Sicht bin ich im Grunde Freddy Kruger. Vielleicht gewinnt die Voranmeldung diesen Abschnitt der Debatte.
4. Viele gute Studien wurden ohne Voranmeldung durchgeführt. Wenn Sie Waffen verbieten, haben nur Outlaws Waffen, und wenn Sie nicht vorregistrierte Studien verbieten, machen nur Outlaws nicht-vorregistrierte Studien. Mit anderen Worten, lassen Sie uns nicht alle entscheiden, dass Studien, die nicht vorregistriert sind, schlecht sind. Neurocritic hat einen Vorschlag für einige neue Forschungsabzeichen.
5. Bürokratie. Um sich vorregistrieren zu können, müssen Sie Studien schreiben, die am Ende langweilig sein könnten. Sie müssen diese einreichen, und je nach Situation müssen sie überprüft und genehmigt werden, bevor Sie die Studie durchführen.
Mit anderen Worten, wenn ich eine Studie machen möchte, könnte ich folgende Wahl haben:
Arghh. Voranmeldung würde den ganzen Spaß aus der Wissenschaft nehmen!
Das klingt vielleicht infantil, aber seien wir ehrlich: Sie hassen wahrscheinlich viele administrative und / oder bürokratische Regeln, von denen Sie denken, dass sie nur bürokratisch sind. Sie müssen dies der Verwaltung oder Abteilung melden; Sie müssen das mit dem IRS klären. Aber viele dieser Regeln und Verfahren haben sich wahrscheinlich als sinnvoll erwiesen, als sie vorgeschlagen wurden. Wird die Vorregistrierung in einem bereits langsamen Veröffentlichungsprozess wie eine Bürokratie erscheinen? Auch hier kommt es darauf an, wie es funktioniert. Aber die Gefahr ist definitiv da.
Zusammenfassend würde ich sagen, lasst uns nicht anfangen, Studien zu streichen, die noch nicht vorregistriert wurden. Und lasst uns anerkennen, dass die Vorabregistrierung unbeabsichtigte Konsequenzen haben könnte, einschließlich einer fortschreitenden Verringerung des Vertrauens und der Verantwortung unter den Wissenschaftlern und einer fortschreitenden Zunahme der Bürokratie.
Aber ich weiß nicht, wovon ich rede. Meine Empfehlung? Lassen Sie uns alle die Voranmeldung ausprobieren und sehen, wie es funktioniert.
Folge mir auf Twitter.
