Wie erfolgreich vermitteln Colleges kritische Denkfähigkeiten?

Erwartete Lernergebnisse. Kritisches Denken. Bewertung. Wert hinzugefügt.

Dies sind Begriffe, die, vielleicht erst in den frühen 2000er Jahren, in den Köpfen von relativ wenigen Hochschul- und Universitätsverwaltern und Fakultätsmitgliedern gewesen wären. Solche Begriffe sind jedoch ein unvermeidbarer Aspekt des Lebens für immer mehr Menschen, die im amerikanischen Hochschulwesen lehren – und diejenigen, die für die Qualität des Unterrichts verantwortlich sind.

Unter der Annahme, dass andere Universitäten denen ähneln, in denen ich unterrichte, müssen Ausbilder praktisch aller Kurse Bewertungsdaten sammeln und darüber berichten, inwieweit die Schüler spezifische Lernziele erfüllen, die in den Lehrplänen vorgegeben sind. Assessments, die über die Noten der Schüler hinausgehen müssen, können schriftliche Aufgaben, Prüfungsfragen, Fokusgruppen oder Umfragen enthalten – alles, was das Ausmaß quantifiziert, in dem die Schüler die Lernziele des Kurses erreichen. Mehrere Bewertungsmodi gelten als besser als singuläre.

Die Bewegung zur Bewertung, Quantifizierung und Dokumentation des Lernens von Schülern – angeführt von regionalen Akkreditierungsagenturen, die die Macht haben, den Universitäten saubere Gesundheitsrechnungen zu gewähren oder zu verweigern – ist Teil eines größeren Rahmens für Rechenschaftspflicht, der die amerikanische Gesellschaft durchdringt. Sport-Coaches werden nicht nur anhand ihrer Gewinn- / Verlust-Rekorde und ihrer Fernsehpersönlichkeiten beurteilt, sondern auch anhand ihrer Zuschauerzahlen. Heutzutage kann man kaum in einem Hotel bleiben, in einer Fluggesellschaft fliegen, in einem Restaurant essen oder sich (zumindest von nationalen Franchises) einen Haarschnitt schnappen, ohne eine Online-Umfrage ausfüllen zu müssen, deren Ergebnisse vermutlich genutzt werden durch das Management, um die Angestellten zu bewerten, mit denen Sie interagierten.

In dem Maße, in dem die Rechenschaftssysteme tatsächlich die Qualität der erbrachten Dienstleistungen verbessern, sollten sie begrüßt werden. Viele Fakultätsmitglieder – skeptisch, dass Assessments tatsächlich das Lernen von Studenten messen, frustriert darüber, dass noch eine andere Aufgabe Ansprüche auf ihre Zeit stellt und / oder besorgt über administrative Eingriffe in die Art, wie sie ihren Unterricht unterrichten – scheinen von der Assessment-Bewegung weniger begeistert zu sein. David Glenn, der in der Chronik der höheren Bildung schreibt , hat mehrere Artikel über Bewertung und Rechenschaftspflicht veröffentlicht. Dies ist insbesondere der Hintergrund der Debatte.

Der jüngste Beitrag zur Debatte kommt von den Bildungssoziologen Richard Arum und Josipa Roksa über ihr neues Buch Academically Adrift: Limited Learning on College Campus . Arum und Roksa berichten über die Ergebnisse einer nationalen Longitudinalstudie von 2.362 Erstsemestern an 24 Institutionen, die unter anderem die Collegiate Learning Assessment (CLA) während des Herbstsemesters 2005 ihrer Schulen und im zweiten Studienjahr absolvierten Die Autoren geben zu, dass "nationale Wahrscheinlichkeits-Stichprobenverfahren" nicht in vollem Umfang befolgt wurden, sondern zeigen, dass die Demografie der Studienstichprobe denen anderer Datenbanken von US-Hochschuleinschreibungen ähnelt.

Was ist der CLA? Arum und Roksa stellen wiederholt fest, dass es darauf abzielt, "kritisches Denken, komplexes Denken und Schreiben" im Gegensatz zu kursspezifischem Wissen zu bewerten. Die Autoren konzentrieren sich auf die "Performance-Aufgabe" des CLA und beschreiben sie als eine 90-minütige computergesteuerte Schreibaktivität, bei der die Schüler auf hypothetische reale Entscheidungsszenarien reagieren. Die Schüler erhalten ergänzende Materialien wie Zeitungsartikel, Statistiken und Memoranden zum Szenario. Nach dem Buch soll der CLA messen:

… wie gut der Student die Qualität und Relevanz der Evidenz bewertet, Daten und Informationen analysiert und synthetisiert, Schlüsse aus seiner Analyse zieht und alternative Perspektiven in Betracht zieht (S. 22).

Die wichtigsten Ergebnisse bezüglich der Veränderung der CLA-Leistungen der Studenten vom ersten bis zum zweiten Jahr des College beinhalteten:

  • eine durchschnittliche Verbesserung von 0,18 Standardabweichung (die führende Statistiker als "kleine" Verbesserung bezeichnen würden);
  • "Keine statistisch signifikanten Gewinne … für mindestens 45 Prozent der Studenten in unserer Studie" (S. 36); und
  • ein enormer Gewinn von 1,5 Standardabweichungen für Studenten, die bereits gut abschneiden (dh in den oberen 10 Prozent der Verteilung).

(Eine der üblichen Reservierungsdaten, die Analytiker zum Studium der Veränderung im Laufe der Zeit in den Ergebnis-Scores haben, sind "Deckeneffekte" [dh einige Teilnehmer erzielen bei der ersten Beurteilung so hohe Punktzahlen, dass bei der zweiten Bewertung kein Platz mehr vorhanden ist] Die oben genannten Ergebnisse, die zeigen, wie sich die Schüler an der Spitze immer noch verbessern, und zusätzliche Analysen, die auf den Seiten 153-154 des Buches präsentiert werden, scheinen die Bedenken über Deckeneffekte zu zerstreuen.

Die Autoren untersuchten auch Aspekte der Bildungserfahrung, die mit der Leistung des zweiten Jahrgangs korrelierten, und zwar über die Erwartungen hinaus, die man von den Leistungen der Schüler im ersten Jahr erwarten würde. In Anlehnung an die Ökonomie soll ein solcher Ansatz den Mehrwert der Teilnahme an einer Universität erfassen. Beispiele für Befunde waren, dass die Teilnahme an Kursen, die umfangreiche Lese- und Schreibaufgaben erforderten, mit einem Anstieg der CLA-Scores im zweiten Studienjahr verbunden war, während Studienstunden mit Gleichaltrigen in solchen Scores zurückgingen (siehe Tabelle A4.5).

In ihrer Schlussfolgerung warnen Arum und Roksa vor "High-Stake-Accountability-Schemata", die den CLA und verwandte Instrumente integrieren, was möglicherweise absolute Leistungskriterien und verbindliche Sanktionen für Lehr- und Aufsichtspersonal nach sich ziehen könnte, wenn die Studenten sie nicht erreichen. Wie sie argumentieren:

… wir befinden uns einfach nicht in einem Stadium wissenschaftlichen Wissens, in dem die Lernergebnisse von College-Studenten mit hinreichender Genauigkeit gemessen werden können, um ein zwanghaftes System der Rechenschaftspflicht ohne nennenswerte Vorbehalte zu rechtfertigen (S. 141).

Ein kürzlich erschienener Artikel über Bewertung, den der Provost und Vizevorsteher für Planung und Bewertung an meiner Heimatuniversität, Texas Tech, verfasst hat, ist hier verfügbar. Diese Beamten diskutieren den CLA und andere mögliche Instrumente zur Messung der Schülerleistungen, wobei der Schwerpunkt auf Lösungen liegt, die sie für Texas Tech am besten halten.

Ein trauriger Abschied von einem Kollegen: Die Academia hat eine leidenschaftliche Lehrerin und Forscherin verloren, als meine Texas-Tech-Kollegin Sarah Kulkofsky am 13. Januar 2011 im Alter von 30 Jahren starb. Das zuvor erwähnte Buch Academically Adrift schloss mit der Aufforderung an die Hochschulen eine "lebenslange Liebe zum Lernen" bei ihren Schülern. Wie die Zeugnisse von Sarahs Studenten und Kollegen bei ihrem Ableben deutlich machten, hatte Sarah auf spektakuläre Weise in diesem Bereich Erfolg gehabt.