Von Dr. Russell T. Warne (@Russwarne)
Im vergangenen Frühjahr nahmen über 4 Millionen Schüler an der High School mehr als 2 Millionen Advanced Placement (AP) -Tests vor. Die AP-Kurse, die vom College Board gesponsert werden, werden von High-School-Lehrern unterrichtet und ermöglichen es den Studenten, am Ende des Schuljahres einen College-Kredit zu erhalten, indem sie einen Test bestehen. Laut dem College Board, Studenten in AP-Kurse lernen mehr Material, sind besser auf das College vorbereitet, und beenden einen Bachelor-Abschluss früher als Nicht-AP-Studenten.
Und dennoch gibt es zwei Gründe, die es zu einfach machen zu behaupten, dass das AP-Programm zu akademischem Nutzen führt. Das erste ist, dass das AP-Programm – wie viele Bildungsprogramme – viele Komponenten hat, und es ist oft schwierig zu sagen, welche (s) zu akademischen Vorteilen führen. Zweitens entscheiden sich die Schüler häufig dafür, ob sie AP-Kurse belegen, und AP-Studierende unterscheiden sich häufig von Nicht-AP-Studenten in wichtigen Punkten. Dadurch werden die Auswirkungen des Programms auf die bereits vorhandenen Unterschiede zwischen den beiden Schülergruppen verfälscht. Eine aktuelle Studie, die mein Forschungsteam durchgeführt hat (Warne, Larsen, Anderson, & Odasso, im Druck), illustriert beide Punkte gut.
Viele "bewegliche Teile"
Bildungsprogramme sind selten einfach. Sie enthalten oft viele "bewegliche Teile", von denen jedes zum gesamten Programm beiträgt. Es kann für Forscher schwierig sein zu bestimmen, welche Komponenten eines Bildungsprogramms für die Steigerung des Lernens effektiv sind und welche nicht wichtig sind. Im AP-Programm gibt es zum Beispiel 34 Tests, die Themen auf College-Niveau abdecken, die von Englisch über Statistiken und Musiktheorie bis hin zur Weltgeschichte reichen. Jedes dieser Themen hat einen Lehrplan und einen standardisierten AP-Test, und jeder Klassenraum hat einen Lehrer, der Aufgaben erstellt, Tests entwirft und Schüler auf den Test vorbereitet. Schul-, Bezirks- und Staatsmerkmale können auch dazu beitragen, wie ein Programm funktioniert.
In unserer Studie des AP-Programms haben meine Co-Autoren und ich beschlossen, eine Komponente des AP-Programms zu isolieren: den Test. Wir wollten untersuchen, ob das bloße Einschreiben in eine AP-Klasse zu akademischen Gewinnen für Studenten führte oder ob es für die Studenten notwendig war, den AP-Test zu absolvieren. Dazu haben wir einen Datensatz mit über 90.000 Schülern verwendet und die Schüler in vier Gruppen eingeteilt: (a) Nicht-AP-Schüler, (b) AP-Schüler, die den AP-Test nicht bestanden haben, (c) AP-Studenten, die den Test bestanden haben, aber nicht bestanden haben, und (d) AP-Studenten, die den AP-Test bestanden und bestanden haben.
Wir verglichen die ACT-Werte der vier Schülergruppen. Wenn die Klasse selbst eine aktive Komponente wäre, dann sollte es einen Unterschied in den ACT-Werten zwischen den Gruppen (a) und (b) geben. Wenn der Test eine aktive Komponente wäre, dann sollte Gruppe (c) einen höheren ACT-Wert als Gruppe (b) haben. Wir fanden, dass die durchschnittlichen ACT-Werte 21,0 für Gruppe (a), 21,3 für Gruppe (b), 22,5 für Gruppe (c) und 26,5 für Gruppe (d) waren. Die Ergebnisse zeigen, dass die Einschreibung in die AP-Klasse den Schülern einen kleinen Vorteil bringt (0,3 Punkte auf dem 36-Punkte-ACT-Sekt), aber dass die Durchführung des Tests größere Vorteile bietet (1,2 Punkte).
Vorhandene Student Unterschiede
Auf den ersten Blick scheinen die Ergebnisse im vorherigen Absatz darauf hinzuweisen, dass sowohl die Klasse als auch der Test wirksam sind – obwohl der Test eindeutig die stärkere Wirkung hat. Aber das Problem bei dieser Art von Vergleich ist, dass diese vier Gruppen von Schülern nicht gleichwertig sind, weil die Schüler wählen, ob sie sich in AP-Kurse einschreiben wollen. Daher unterscheiden sich AP-Studierende von Nicht-AP-Studierenden (Sadler & Sonnert, 2010). Psychologen nennen diese Selbstselektion, und es ist sehr häufig in vielen Bereichen der psychologischen Forschung. In der Tat gibt es zwei Ebenen der Selbstselektion, die Forscher beim Studium des AP-Programms berücksichtigen müssen, da AP-Studenten auch die Möglichkeit haben, den Test zu absolvieren. Die Gründe für die Selbstauswahl in das AP-Programm oder den AP-Test sind oft unklar, aber administrative Richtlinien (wie die Entscheidung eines Staates, die AP-Gebühr für Studenten zu zahlen oder die Entscheidung einer Schule, eine bestimmte AP-Klasse anzubieten) und studentische Merkmale ( wie zum Beispiel, wie bereit ein Student für den Test ist) scheint von Bedeutung zu sein.
Um die Selbstauswahl zu handhaben, ist es notwendig, für bereits existierende Unterschiede zwischen den Schülern zu kontrollieren. Frühere Forscher (z. B. Long, Conger & Iatarola, 2012; Sadler & Sonnert, 2010) haben für Variablen gesteuert, in denen sich die Schülergruppen unterscheiden. Zum Beispiel haben AP-Schüler tendenziell höhere Schulnoten-Durchschnittsnoten (GPAs), sind oft motivierter und kommen mit geringerer Wahrscheinlichkeit aus einkommensschwachen Heimen. Ohne solche Variablen zu kontrollieren, würde die Wirkung des AP-Programms mit den Unterschieden zwischen den Studentengruppen verwechselt werden.
In unserer Studie kontrollierten wir etwa 70 Schülervariablen, darunter Geschlecht, Rasse / ethnische Gruppe, Notendurchschnitt, Schulleistungstest und ob das Kind in einer Sonderschule war. Wir haben dann die ACT-Werte der vier Gruppen nach diesen statistischen Anpassungen verglichen. Schüler ohne AP hatten einen durchschnittlichen ACT-Wert von 21,4. AP-Studenten, die den AP-Test nicht bestanden, hatten einen durchschnittlichen ACT-Wert von 21,2. AP-Schüler, die den AP-Test nicht bestanden haben, hatten einen durchschnittlichen ACT-Wert von 21,7. Schließlich hatten AP-Schüler, die den AP-Test bestanden hatten, einen durchschnittlichen ACT-Wert von 24,6.
Der Vergleich dieser Ergebnisse mit den nicht angepassten Ergebnissen zeigt, wie wichtig diese Anpassungen sind. Der Vorteil der Einnahme der AP-Klasse verdampft (wie in der Bewertungsdifferenz zwischen den ersten beiden Gruppen gezeigt) und der Einfluss der Testfälle von 1,2 Punkten auf 0,5 Punkte – über 50%. Ohne Kontrolle für bereits existierende Unterschiede sieht das AP-Programm viel effektiver aus als es wirklich ist. Am Ende haben meine Koautoren und ich erreicht, dass der AP-Test ein wichtiger Bestandteil des AP-Programms ist. Außerdem erhalten Schüler, die den Test bestehen, mehr Vorteile als ihre Klassenkameraden, die den AP-Test nicht bestehen oder den Test bestehen und ihn nicht bestehen.
Fazit
Diese Studie ist ein Beispiel für die Herausforderungen der Evaluierung und des Verständnisses von Bildungsprogrammen. Die vielen Komponenten einiger Bildungsprogramme und die bereits vorhandenen Unterschiede zwischen Gruppen von Schülern stellen Bildungspsychologen vor Herausforderungen. Aber die Herausforderungen sind nicht unüberwindbar. Ich lade die Leser ein, den Originalartikel zu untersuchen oder ein Video anzuschauen, das ich über die Studie gemacht habe. Beide sind (kostenlos) unter folgenden URLs verfügbar:
Vollständiger Artikel: http://www.tandfonline.com/doi/pdf/10.1080/00220671.2014.917253
Videozusammenfassung: https://www.youtube.com/watch?v=aViwSlcu2F0
Verweise
Sadler, PM, & Sonnert, G. (2010). High School Adanced Platzierung und Erfolg in College-Studienarbeiten in den Naturwissenschaften. In PM Sadler, G. Sonnert, RH Tai & K. Klopfenstein (Hrsg.), AP: Eine kritische Prüfung des Advanced Placement Program (S. 119-137). Cambridge, Massachusetts: Harvard Education Press.
Long, MC, Conger, D., & Iatarola, P. (2012). Auswirkungen der Sekundarschule auf den sekundären und postsekundären Erfolg. American Educational Research Journal, 49, 285-322. doi: 10.3102 / 0002831211431952
Warne, RT, Larsen, R., Anderson, B. & Johnson, AO (im Druck). Die Auswirkung der Teilnahme am Programm "Advanced Placement" auf die Testergebnisse von Studenten in der Hochschulzulassung. Das Journal der pädagogischen Forschung. doi: 10.1080 / 00220671.2014.917253
