Können Sie mit der Wahrheit über die Forschung umgehen?

Bevor Sie Forschungsergebnisse für selbstverständlich halten, sollten Sie alle Gründe dafür beachten.

Quelle: MEME

Kannst du mit der Wahrheit umgehen? Einige von Ihnen erinnern sich vielleicht an Jack Nicholsons Schrei auf dem Stand in A Few Good Men. Ich werde oft an diesen Ausdruck erinnert, wenn ich Forschungsergebnisse diskutiere. Leider liegt dies nicht an den beunruhigenden Befunden, obwohl viele der Fall sind, sondern weil, wie jeder gute Psychologe weiß, die Forschung Ihnen keine Wahrheiten gibt. Dies ist eine Wahrheit, die Sie im Hinterkopf behalten sollten, wenn Sie Schlagzeilen lesen, in denen „Research shows…“ genannt wird.

Die Leute möchten bestimmte Antworten bekommen. Wir lieben es, wenn die Wissenschaft uns sagen kann, was zu tun ist. Manchmal täuschen wir uns vor zu denken, dass die neuesten Erkenntnisse zu einem Thema (insbesondere wenn es unsere Ansicht stützt) die Wahrheit zu diesem Thema ist. Essen Sie dies für die Gesundheit. Tun Sie das nicht zum Glück. Wenn Sie sich mit dem wissenschaftlichen Unternehmen auskennen, wissen Sie, dass eine Studie nicht das Ende der Geschichte sein kann. Eine wissenschaftliche Studie stützt nur eine Hypothese. Eines der frustrierendsten zwei Worte, die ich in der Diskussion über Forschung aussprechen muss, ist “Es kommt darauf an”. Das ist aber die Wahrheit. Kommst du damit klar?

• Gefährden Smartphones und Computer Ihr Liebesleben?
• Autismus als Zeitreise: Gullivers Rückkehr
• Wie sich die #MeToo-Bewegung auf die Führungskräfteentwicklung auswirkt
• Wer hat chronische Schmerzen in den Vereinigten Staaten?
• Wie beeinflussen PTSD und Trauma Ihre Gehirnfunktion?

Das Verhalten ist komplex, weshalb es schwierig ist, endgültige Antworten zu erhalten. Die Ergebnisse können sich ändern, je nachdem, wie die Forschung durchgeführt wurde, welche Variablen gemessen wurden, wie die Teilnehmer rekrutiert wurden, wie groß die Stichprobe war, der Kontext, in dem die Studie durchgeführt wurde, und eine Reihe anderer Faktoren. Atul Gawande schrieb diesbezüglich überzeugend in Bezug auf die Medizin, wo er selbst Operationen unterzog, die sich als kompliziert, verwirrend und zutiefst menschlich erweisen, nichts, was in der Nähe der idealisierten “Ärzte hat alle Antworten”, die viele glauben.

Wir wissen auch, dass Studienergebnisse sich nicht einmal wiederholen. Es ist wahrscheinlicher, dass Sie etwas als die Wahrheit betrachten, wenn Sie jedes Mal dasselbe Ergebnis erzielen. In der Wissenschaft gab es viele Replikationsfehler, die erneut die Komplexität der Forschung belegen. Selbst wenn Sie die Methodik einer Studie vollständig wiederholt haben, erhalten Sie möglicherweise nicht die gleichen Ergebnisse. Aber es wird schlimmer.

Wenn Replikationsprobleme nicht schlimm genug waren, gibt es jetzt Beweise dafür, dass viele Wissenschaftler nicht ganz ehrlich waren, wie sie ihre Forschung durchgeführt haben. Im jüngsten Fall trat Dr. Brian Wansink von der Cornell University zurück, nachdem er jahrelang ermittelt hatte, dass er wissenschaftliches Fehlverhalten begangen hatte. Allein im letzten Monat wurden sechs seiner Artikel vom renommierten Journal der American Medical Association (JAMA) zurückgezogen. Viele seiner früheren Studien über das Essen sind jetzt suspekt. Aber es wird noch schlimmer.

• Eine echte Diätbehandlung für Depressionen
• Insomnia kann mit Online-Programmen behandelt werden
• Was ich am frühen Morgen-Training liebe (und hasse)
• Das geistige Leben eines Bankkreditalgorithmus: Eine wahre Geschichte
• Wenn ich bei dir bin: Jugendmord an Jugendlichen

Anscheinend liefern selbst dieselben Daten unterschiedliche Ergebnisse, je nachdem, wer sie analysiert. Diese Woche veröffentlichten Silberzahn und Kollegen (Silberzahn et al. 2018) eine Augenöffnungsstudie. Neunundzwanzig Teams, an denen 61 Wissenschaftler teilnahmen, testeten eine Frage: Sind Fußballschiedsrichter eher dunkelhäutigen Spielern rote Karten als hellfarbigen Spielern? Hier ist der Kicker. Sie erhielten alle den gleichen Datensatz. Die Ergebnisse variierten. Zwanzig Teams sagten JA. Neun Teams sagten NEIN. Von diesen Yay- und Nay-Sayern war die Stärke der Wirkung unterschiedlich.

Quelle: APS

Warum ist das passiert? Die Wissenschaftler untersuchten die Fragen anhand verschiedener Analysen. Verschiedene Gruppen werden für verschiedene Faktoren kontrolliert. Während einige Gruppen keine Faktoren kontrollierten, kontrollierten andere Gruppen bis zu sieben verschiedene Faktoren. Aber denken Sie daran, dass der Datensatz genau der gleiche war.

Diese Studie ist eine erstaunliche Erinnerung an etwas, über das selten gesprochen wird. Was der Forscher mit den Daten macht, macht die Welt aus. Wir sprechen nicht vom Fischen nach Ergebnissen, von Zahlen oder Schlimmerem, von falschen Ergebnissen. Diese Studie war ein offenes Fenster, wie Forscher ihre Gewohnheiten beeinflussen. Die Forscher verfügen über Tieranalysen und legen Wege fest, wie sie sich der Forschung nähern. Die große Entdeckung hier ist, dass diese Eigenheiten den Unterschied ausmachen können, ob ein Befund als wahr oder falsch angesehen wird.

Keine Forschungsstudie gibt Ihnen die Wahrheit. Jeder hat viele Einschränkungen. Stellen Sie sicher, dass Sie die wichtigsten Ergebnisse mit der gebotenen Vorsicht behandeln, und lassen Sie sich nicht von einer Studie mitreißen. Die Wissenschaft korrigiert sich selbst und Inkonsistenz treibt uns dazu, bessere Wissenschaft zu betreiben. Und das ist gut für uns alle.