Warum Interventionen funktionieren, ist so wichtig, als ob sie funktionieren

Ihre Bewertung sollte sich nicht mit einer Ja / Nein-Antwort zufrieden geben.

Tech. Sgt. Ryan Crane/Keesler

Quelle: Tech. Sgt. Ryan Crane / Keesler

Viele von uns werden nicht nach dem Reichtum unserer Ideen beurteilt, sondern nach der Qualität unserer Ergebnisse. Wie viele Studenten haben Sie rekrutiert? Wie viel Geld hast du das College gerettet? Wie viele Stipendien haben Sie erhalten? Unabhängig von den Messgrößen, die Ihren beruflichen Erfolg bestimmen (meine ist zum Glück nicht, wie viele Leute diesen Blog lesen), Fragen wie diese beschränken uns darauf, ob neue Programme und Innovationen funktionieren, und vernachlässigen, warum sie funktionieren oder nicht. Warum ist jedoch mehr als eine akademische Frage und kann bei der Bewertung mehrere Vorteile haben. Dieser Rat gilt insbesondere für den heutigen Zeitgeist des Anstoßens – kostengünstige, skalierbare Interventionen, die leicht implementiert und wiederholt werden können -, bei denen die Einfachheit dieser Strategien die komplexen psychologischen Reaktionen verschleiern kann, die sie von den Menschen hervorbringen, die wir unterstützen möchten. Die Frage, warum ein Programm funktioniert, kann uns dabei helfen, den Umfang unserer Bemühungen zu erweitern, ergänzende Lösungen zu entwerfen und Probleme zu diagnostizieren, wenn unsere Anstrengungen scheitern.

Fallstudie: Energiegewohnheiten ändern

Eine mittlerweile berühmte Reihe von Studien zeigte, wie sozialer Beweis den Energieverbrauch von Haushalten einschränken kann. Die meisten von uns wissen nicht, wie viel Energieverbrauch normal ist. Wenn wir also herausfinden, dass wir mehr als durchschnittlich verbrauchen, könnten wir motiviert sein, unseren Verbrauch der Norm näher zu bringen. Das Opower-Schutzprogramm sandte daher an seine Kunden Rechnungen, aus denen hervorgeht, wie viel Energie sie im Vergleich zu ihren Nachbarn verbrauchen. Und siehe da, Kunden, die mehr als durchschnittlich Energie verbrauchten, reduzierten ihren Verbrauch im Laufe der Zeit, was sich seit Jahren als recht robust erwies.

Warum ist der Energieverbrauch gesunken? Zwei verschiedene Analysen von Opower-Daten lieferten unterschiedliche Erklärungen:

# 1. Sozialer Beweis verändert Gewohnheiten. Wenn die Menschen ihre erste Rechnung erhielten, würde ihr täglicher Energieverbrauch stark sinken. Ihr Verbrauch würde sich langsam wieder erhöhen, bis die nächste Rechnung ankam. Dann sank der Energieverbrauch wieder. Mit der vierten Rechnung stabilisierte sich der Energieverbrauch der Menschen jedoch eher auf einem niedrigeren Niveau als dort, wo sie begonnen hatte. Daher gab es keinen Rückgang und keine Erholung. Den Forschern zufolge hatten sich neue Gewohnheiten (z. B. das Ausschalten der Beleuchtung beim Verlassen eines Raums; Nachstellen des Thermostats) durchgesetzt. Oder hatten sie?

# 2. Sozialer Beweis motiviert die Heimwerker. In einer konkurrierenden Analyse wurde untersucht, was mit dem Energieverbrauch von Haushalten nach dem Verkauf eines Hauses geschehen ist. Die neuen Bewohner waren nie sozialen Beweisen ausgesetzt, daher sollten sie sich nicht auf den normalen Energieverbrauch einlassen. Der Energieverbrauch in weiterverkauften Häusern stieg jedoch nicht an. Warum? Die Forscher argumentieren, dass die ursprünglichen Eigenheimbesitzer, die tatsächlich soziale Beweise erhielten, Verbesserungen wie programmierbare Thermostate und Energy Star-Geräte vorgenommen haben. Diese Erklärung legt nahe, dass vier Monate nicht die Zeit waren, in der sich neue Gewohnheiten gebildet hatten, sondern wie lange es dauerte, bis die Menschen ihre Häuser energieeffizienter machten. Dies blieb auch nach dem Abzug der ursprünglichen Hauseigentümer erhalten.

Ein Ergebnis, zwei Erklärungen… solange der soziale Beweis funktioniert, wen interessiert das? Stellen Sie sich jedoch vor, dieses Erhaltungsprogramm in einer Nachbarschaft mit niedrigem Einkommen aufzulegen. Wenn soziale Beweise die Energiegewohnheiten der Menschen verändern, sollte dies unabhängig vom Haushaltseinkommen funktionieren. Wenn soziale Beweise jedoch vor allem die Menschen dazu bringen, ihre Häuser zu verbessern, ist dies bei einer stärker benachteiligten Bevölkerung möglicherweise nicht möglich. Ebenso würden Menschen, die bereits in energieeffizienten Häusern leben, nur dann von sozialen Beweisen profitieren, wenn sie neue Gewohnheiten schaffen, weil sie keine weiteren Verbesserungen vornehmen müssen. Wie Sie sehen, ist das Warum extrem wichtig für die Planung, ein Programm wie dieses auf neue Orte zu skalieren.

Was kann “Warum” für Sie tun?

Das Opower-Beispiel zeigt einen wichtigen Grund, warum ein Programm funktioniert: Skalierbarkeit . Wenn wir ein neues Programm oder eine neue Technologie in die Hochschulbildung einführen, testen wir sie häufig mit einer bestimmten Gruppe von Studenten, planen jedoch eine umfassende Einführung, falls das Pilotprojekt erfolgreich verläuft. Wenn wir wissen, warum und nicht nur ob etwas funktioniert, können wir vorhersagen, wie neue Bevölkerungen reagieren werden. Wenn zum Beispiel eine neue Intervention für Studenten der ersten Generation, die auf dem Campus leben, die akademische Leistung vor allem durch die Motivation der Schüler zur Nachhilfe anregt, wird dies möglicherweise nicht für Pendler, berufstätige Erwachsene und Eltern, die möglicherweise keine zusätzliche Zeit in ihrem Leben haben, um zu widmen hilfesuchend Wenn diese Intervention durch die Schaffung effizienter Lerngewohnheiten funktioniert, ist dies jedoch eher für ein breiteres Spektrum von Studenten hilfreich. Wenn wir den zugrunde liegenden Mechanismus verstehen, wissen wir besser, wer sonst von unserer Intervention profitieren könnte.

Die Frage, warum ein Programm funktioniert, kann uns auch helfen , ergänzende Lösungen für die Herausforderungen der Studenten zu entwickeln . Nehmen wir an, wir führen eine erfolgreiche Wohlfühlinitiative durch, und durch Umfragen haben wir einen großen Einfluss auf die Verbesserung der Schlafgewohnheiten der Schüler gehabt. Wir können jetzt andere Wege zur Verbesserung des Schlafes einplanen, um diese Gewinne aufrechtzuerhalten und zu stärken, und darüber nachdenken, wie wir unsere Erkenntnisse im Hinblick auf den Schlaf am besten skalieren können. Aber sagen wir, obwohl unser Pilotprojekt erfolgreich war, haben wir wirklich nur Frauen geholfen, besser zu schlafen, nicht Männern. Jetzt wissen wir, wie wir Menschen auf neue Weise ansprechen und untersuchen können, ob eine Änderung ihrer Schlafgewohnheiten einen entsprechenden Einfluss auf ihr allgemeines Wohlbefinden hat.

Schließlich kann die Untersuchung, warum etwas funktioniert, auch helfen, zu diagnostizieren, warum etwas nicht funktioniert. Wenn ein Pilot ausfällt, geht das Baby oft mit dem Bade aus und wir beginnen von vorne. Aber wenn wir uns fragen, warum es uns zeigen mag, können wir den fatalen Fehler aufdecken, den wir in der nächsten Iteration beheben können. Stellen Sie sich zum Beispiel vor, Sie implementieren eine Nutzwertintervention für einführende STEM-Studenten, die zwar mehr Zeit für das Studium aufwenden, jedoch keine wesentlichen Auswirkungen auf die GPA haben. Vielleicht war der Effekt zu schwach (dh die Schüler müssen noch mehr lernen, bevor sich ihre Noten verbessern), oder der Mechanismus der Veränderung war unzureichend und Sie müssen stattdessen die Lerngewohnheiten der Schüler oder ihr Verhalten bei der Suche nach Hilfe anvisieren. Wenn Sie das Warum erforschen, haben Sie die Möglichkeit, Ihren Piloten aus neuen Perspektiven zu sehen und sachkundige Verbesserungen an ihm vorzunehmen, ohne von vorne zu beginnen.

Fazit

In dieser Welt des Nudgens kann es leicht sein, einen einfachen Eingriff zu implementieren und schnelle Ergebnisse zu erzielen, aber das bedeutet nicht, dass Sie nicht unter die Haube schauen sollten, um herauszufinden, was diesen Eingriff bewirkt. Es kann kein Zweifel bestehen, dass die Frage nach dem Grund schwierig sein kann: Oft müssen zusätzliche Daten erfasst werden, z. B. Umfragen, Interviews und Verhaltensaufzeichnungen. Dies alles erhöht die Kosten und Belastungen für Ihre Bewertung. Die Auszahlung in Bezug auf Skalierbarkeit, Entwicklung und Diagnose kann jedoch die zusätzliche Investition wert sein, die erforderlich ist, um die alles entscheidende Frage nach dem „Warum“ zu stellen.

Verweise

Allcott, H. & Rogers, T. (2014). Die kurz- und langfristigen Auswirkungen von Verhaltensinterventionen: Experimentelle Beweise aus der Energieeinsparung. American Economic Review, 104 (10), 3003-3037.

Brandon, A., Ferraro, PJ, List, JA, Metcalfe, RD, Price, MK, und Rundhammer, F. (2017). Bleiben die Auswirkungen sozialer Nudges bestehen? Theorie und Evidenz aus 38 Naturfeldversuchen (Nr. W23277). Nationales Büro für Wirtschaftsforschung.