Die neuesten TIMSS- und PIRLS-Scores

Teil I des Brown Center Reports 2013 über die amerikanische Bildung

braunMittelteil1AbdeckungIm Dezember 2012 wurden die neuesten internationalen Testergebnisse veröffentlicht. Die Trends in International Math and Science Study (TIMSS) wird alle vier Jahre und die Progress in International Reading Literacy Study (PIRLS) alle fünf Jahre durchgeführt. Die neuesten Ergebnisse stammen aus der Durchführung beider Tests im Jahr 2011, ein einzigartiges Ereignis. Aufgrund ihrer asynchronen Zeitpläne teilen sich die beiden Tests nur alle zwanzig Jahre dasselbe Jahr. Neunundvierzig Nationen und neun Benchmarking-Teilnehmer nahmen an PIRLS teil, das in der vierten Klasse vergeben wird, und 63 Nationen und 14 Benchmarking-Teilnehmern nahmen an TIMSS teil, das sowohl in der vierten als auch in der achten Klasse durchgeführt wird.eins






Nationale Errungenschaft der USA



Die USA schnitten in allen drei Fächern recht gut ab – Lesen, Mathematik und Naturwissenschaften. Beim Lesen erreichten die USA auf der internationalen Skala 556 Punkte. Alle in diesem Abschnitt besprochenen Tests haben einen Mittelwert von 500 und eine Standardabweichung von 100. Nur vier Länder schnitten beim Lesetest statistisch signifikant besser ab. (In der folgenden Diskussion wird der Begriff signifikant als Abkürzung für statistische Signifikanz bei p kleiner als 0,05 verwendet). Hongkong führt die Welt mit 571 Punkten an, gefolgt von der Russischen Föderation (568), Finnland (568) und Singapur (567). Der US-Score für 2011 bedeutete einen Anstieg um 14 Punkte seit 2001 (signifikant).



In Mathematik erreichten US-Viertklässler 541 Punkte, was in der TIMSS-Wertung nahe der Mitte der zweitrangigen Länder liegt. Die Spitzenreiter waren fünf asiatische Nationen: Singapur (606), Korea (605), Hongkong (602), Chinesisch-Taipeh (591) und Japan (585). Die Punktzahl der US-Viertklässler stellt einen 23-Punkte-Zuwachs seit 1995 dar (signifikant). Achtklässler in den USA erzielten 509 Punkte, was deutlich über dem internationalen Durchschnitt von 500 liegt – aber nur knapp. Der 509-Score ist eine Verbesserung um 17 Punkte gegenüber dem US-Score von 1995 (ein signifikanter Zuwachs).



In den Naturwissenschaften erzielten US-Viertklässler 544 Punkte, wobei sechs Länder deutlich bessere Ergebnisse erzielten. Der Zuwachs in der vierten Klasse von 2 Punkten seit 1995 ist statistisch nicht signifikant. Achtklässler schnitten mit 525 Punkten deutlich über dem internationalen Durchschnitt und deutlich unter Schülern aus acht anderen Nationen ab. Der 12-Punkte-Zuwachs seit 1995 ist statistisch signifikant.



Zusammenfassend lässt sich sagen, dass die jüngsten internationalen Ergebnisse überwiegend positiv für die US-amerikanischen Schüler sind, die bei allen fünf Bewertungen der Noten-Fächer-Paarungen über dem internationalen Durchschnitt liegen. Bei vier der fünf Tests sind die Zuwächse seit 1995 statistisch signifikant. Trotz dieser ermutigenden Ergebnisse gibt es viel Raum für Verbesserungen. In den letzten zehn Jahren waren die Länder, die TIMSS beigetreten sind, wirtschaftlich aufstrebende Länder oder, im Fall des Nahen Ostens, Länder mit großem nationalen Reichtum, aber ohne eine Tradition der öffentlichen Schulbildung. Solche Veränderungen in der Zusammensetzung können dazu führen, dass internationale Durchschnitte leichter übertroffen werden. In den Bereichen Lesen, Mathematik oder Naturwissenschaften weltweit führend zu sein, bleibt eine Herausforderung für die USA.




Staatserfolg auf TIMSS

Neun Staaten nahmen an der TIMSS-Bewertung teil (siehe Tabelle 1-1). Konzentrieren wir uns auf die Mathematik der achten Klasse, da dies der einzige Test ist, an dem alle neun teilgenommen haben. Als Anhaltspunkte sei daran erinnert, dass der internationale Durchschnitt für den Test bei 500 lag, die nationale Punktzahl der USA bei 509 lag und die Nation mit der höchsten Punktzahl Korea mit 613 war.



lovelesstbl11



Massachusetts führte das Feld mit 561 Punkten an, gefolgt von Minnesota (545) und North Carolina (537). Fünf der Staaten hatten zuvor TIMSS genommen, und drei verzeichneten seit ihrer ersten Teilnahme statistisch signifikante Gewinne. Wie in Tabelle 1-2 angegeben, lassen sich die TIMSS-Scores einigermaßen gut auf die NAEP-Scores abbilden. Da 2011 auch NAEP erteilt wurde, konnte das Nationale Zentrum für Bildungsstatistik eine NAEP-TIMSS-Verknüpfungsstudie durchführen.zweiItems aus TIMSS und NAEP wurden in die gleichen Hefte eingebettet, so dass Items aus beiden Tests gleichzeitig von demselben Studenten bearbeitet wurden. Die Ergebnisse der Studie werden im Laufe des Jahres 2013 veröffentlicht. Es besteht die Hoffnung, dass zukünftige Analysten in der Lage sein werden, die prognostizierten staatlichen TIMSS-Werte basierend auf den NAEP-Werten mit angemessener Genauigkeit zu berechnen, sodass lokale Führungskräfte die Leistung des Staates in einen internationalen Kontext einordnen können.3

lovelesstbl12



Namen berühmter Wikingerschiffe


Finnland



Finnland generierte Schlagzeilen von TIMSS. Die finnische Wundergeschichte wurde in Frage gestellt. In den letzten Jahren wurde die populäre Presse mit Geschichten über Finnlands wunderbares Bildungssystem gefüllt. Der Bildungstourismus führte viele Beobachter nach Finnland, um die Schulen aus erster Hand zu sehen. Es gab viele Geschichten über keine Hausaufgaben, keine Tests mit hohem Einsatz, keine verspäteten Glocken, einen kurzen Schultag und die nationale Überzeugung, dass die Verpflichtung von Kindern, vor dem siebten Lebensjahr eingeschult zu werden, das Recht der Kinder, Kinder zu sein, verletzt.4Die Besucher staunten über die entspannte, heimelige Atmosphäre – Kamine in Lounges, Kinder ohne Schuhe, Lehrer mit Vornamen.5Die gegenwärtige weltweite Angst (insbesondere in den USA und Großbritannien) vor Leistung, Produktivität und steigenden Testergebnissen, die durch Reformen wie Schulwahl und Rechenschaftspflicht verfolgt werden, stellt einen so starken Kontrast dar, dass sie sogar ein abfälliges Akronym – GERM – von a . gezogen hat Finnischer Gelehrter. Das steht für Global Educational Reform Movement.6

Ein Problem. Finnlands Ruf basiert weitgehend auf seiner Leistung bei PISA, einem ganz anderen Test als TIMSS. Der Abstand zwischen den USA und Finnland bei PISA ist bei der Mathematikkompetenz statistisch signifikant. Bei der TIMSS 2011 hatten Finnland und die USA jedoch sowohl in der vierten als auch in der achten Klasse in Mathematik statistisch nicht unterscheidbare Ergebnisse.



Sehen Sie sich noch einmal Tabelle 1-1 an. Finnlands Punktzahl von 514 in Mathematik in der achten Klasse reiht sich in die Mitte der Staatenliste ein. Die Werte von Alabama und Kalifornien sind die einzigen beiden Staaten, die statistisch signifikant unter Finnland liegen; die Werte für Colorado, Connecticut und Florida sind ungefähr gleich wie für Finnland; und vier Bundesstaaten – Massachusetts, Minnesota, North Carolina und Indiana – schnitten deutlich besser ab als Finnland. Wäre Finnland 2011 ein US-Bundesstaat gewesen, hätte es beim NAEP wahrscheinlich im Mittelfeld gelandet. Noch beunruhigender für die Finnen ist, dass ihre TIMSS-Werte deutlich zurückgegangen sind. Finnlands Siebtklässler absolvierten den Test 1999 mit 520 Punkten und 2011 erneut mit 482 Punkten. Der Rückgang um 38 Punkte ist einer der größten, der von einem TIMSS-Teilnehmer verzeichnet wurde.




Ein Fortschrittsbericht über die A+ Länder

Querschnittsdaten müssen mit Vorsicht interpretiert und mit großer Sorgfalt für Vorhersagezwecke verwendet werden. Finnland zeigt, dass sich die Dinge manchmal ändern.

Hier ist ein weiteres Beispiel für diese Lektion, diesmal von einer Gruppe von Nationen. Die A+-Länder sind sechs Nationen, die im TIMSS-Ranking 1995 in Mathematik der achten Klasse an der Spitze standen. Sie sind Belgien (flämische Gemeinschaft),7Tschechien, Hongkong, Japan, Korea und Singapur. Als die TIMSS-Scores von 1995 veröffentlicht wurden, wurde viel darüber geredet. Im Jahr 2008 wurden sie im Abschlussbericht des Nationalen Mathematikbeirats als Beispiele erwähnt. William H. Schmidt, Richard T. Houang und Kollegen haben eine Reihe von Studien mit einer Rubrik veröffentlicht, die auf den mathematischen Lehrplänen der A+-Länder basiert.8Die Idee ist, dass andere Länder den A+-Ländern ähnlicher sein sollten. Eine Studie von Schmidt und Houang aus dem Jahr 2012 erklärte, dass die Common Core-Mathematikstandards in Bezug auf Fokus und Kohärenz mit den Lehrplänen der A+-Länder vergleichbar sind. Darüber hinaus fanden sie heraus, dass Staaten mit mathematischen Standards von 2007, die denen der A+-Länder ähnlich waren – wiederum mit derselben Rubrik von 1995 – beim NAEP 2007 sehr gut abgeschnitten haben. Die Ergebnisse wurden so präsentiert, dass sie implizieren, dass die USA durch den gemeinsamen Kern den A+-Ländern ähnlicher werden.9

Tabelle 1-3 bietet ein Update zu den A+ Ländern. Wie geht es Ihnen? Betrachten wir die Tabelle von unten nach oben. Die Tschechische Republik hat die TIMSS-Studie nach 2007 verlassen, ein Jahr, in dem ihr TIMSS-Score um 42 Punkte gegenüber zwölf Jahren zuvor zurückgegangen war. Belgien (Flämisch) hat seit 2003 nicht mehr an TIMSS teilgenommen. Seine Leistung bei TIMSS ging um 13 Punkte zurück, bevor es die Studie verließ. Die anderen vier Länder nahmen 2011 alle TIMSS ein. Hongkong (+17) und Korea (+32) verzeichneten deutliche Zuwächse, Japan einen deutlichen Rückgang (-11) und Singapur zeigte keine signifikante Veränderung (+2). Von den sechs Nationen hatten zwei statistisch signifikante Gewinne, drei statistisch signifikante Verluste und eine erzielte ungefähr die gleichen Werte. Die durchschnittliche Ergebnisveränderung für die sechs Nationen beträgt -2,5 Punkte, was ungefähr der durchschnittlichen Veränderung der 20 Nationen entspricht, die sowohl 1995 als auch 2011 teilnahmen. Anders ausgedrückt, das durchschnittliche A+-Land hat bei den Leistungen in Mathematik nicht mehr Fortschritte gemacht als jedes andere Land in TIMSS.

lovelesstbl13

wann ist die nächste mondfinsternis 2016

Ganzen Nationen Noten zu geben, mag vielen Menschen albern erscheinen, aber da die A+-Bezeichnungen eine so breite Akzeptanz gefunden haben, werden die Leser um ihre Toleranz gebeten. Es ist klar, dass A+ nicht mehr für alle diese Länder die angemessene Note ist.10Korea und Hongkong haben ihre hervorragenden Ergebnisse von 1995 verbessert und verdienen immer noch ein A+. Auch Singapur behält, obwohl es keine signifikanten Zuwächse erzielt, seinen A+-Status, da es eine von nur drei Nationen mit einer Skala von 600+ ist. Dann wird es brenzlig. Das flämische Belgien rutschte ab, als es 2003 die TIMSS verließ. Die Viertklässler nahmen 2011 jedoch teil und schnitten gut ab und erzielten 549 Punkte. Das ist deutlich höher als die USA mit 541 und ungefähr so ​​​​wie Florida mit 545. Aber es bedeutet keinen Fortschritt aus den früheren TIMSS-Ergebnissen der belgischen Viertklässler. Nennen Sie Flämisches Belgien ein Fragezeichen – vielleicht ein A- oder B+, aber definitiv kein A+. Ohne neuere Daten aus der achten Klasse wissen wir es nicht genau.

Japans Punktzahl von 570 rechtfertigt ein A, kein A+, und der Abwärtstrend ist bemerkenswert. Vergleiche Korea mit Japan. Beide erreichten 1995 581 Punkte. Im Jahr 2011 erzielte Korea 43 Punkte mehr. Am dramatischsten ist der Rückgang bei den Scores der Tschechischen Republik mit 42 Punkten. Der Wert von 504 für 2007 ist statistisch nicht vom internationalen Durchschnitt von 500 zu unterscheiden. Wie das flämische Belgien nahmen auch die Viertklässler der Tschechischen Republik an der TIMSS 2011 teil und erzielten 511 Punkte, was einem Rückgang von 30 Punkten gegenüber 1995 entspricht. Die Tschechische Republik erhält ein C+ oder B- .


Fazit

Was sollen wir davon halten? Im Jahr 1995 wurden sechs Nationen mit hohen Leistungen als A+ beschrieben, um die USA zu höheren mathematischen Leistungen anzuspornen. Ihre mathematischen Lehrpläne wurden als Ideale hochgehalten. Und doch wird der US-Gewinn von 17 Punkten in Mathematik in der achten Klasse seit 1995 nur von einer A+-Nation, Korea, übertroffen und von einer anderen, Hongkong, übertroffen. Die anderen vier A+-Länder machten weniger Fortschritte als die USA. In Bezug auf Gewinne sollten sich die USA also nicht an die A+-Länder orientieren. Trotzdem sind fünf der sechs A+-Länder weiterhin weltweit führend in den Matheleistungen der achten Klasse, und sie schneiden weiterhin deutlich besser ab als die USA.

Die Divergenz zwischen Gewinnbewertungen und Statusbewertungen veranschaulicht ein Problem, das in den beiden verbleibenden Teilen dieses Berichts behandelt wird. Die Tendenz besteht darin, dass Beobachter, wenn Testergebnisse veröffentlicht werden, sich auf die Leistungsträger konzentrieren, fragen, was die führenden Nationen tun, und dann den Rest der Welt dazu auffordern, diese Dinge zu tun. Diese Antwort ist verständlich, aber auch potenziell irreführend. Kausalität ist aus Querschnittsdaten schwer zu bestimmen. Der Lehrplan spielt zweifellos eine Rolle, aber es muss noch viel mehr Arbeit geleistet werden, um potenzielle Lehrplaneffekte in internationalen Daten zu identifizieren und gut formulierte Hypothesen mit Längsschnittmodellen zu testen. Idealerweise würden randomisierte Studien zu den besten Lehrplanprogrammen durchgeführt, um unbeobachtete Einflüsse auf das Lernen herauszufinden. Zu diesen Einflüssen gehören eine Kultur, die großen Wert auf schulischen Erfolg legt, Erziehungspraktiken, die den Erfolg fördern, und Gleichaltrige, die ihren Status aufgrund ihrer harten Arbeit in der Schule vergeben. Sie tragen sicherlich dazu bei, warum einige Nationen A+ sind, während andere nur danach streben, es zu sein.

Einführung Teil II: Das Wiederaufleben der Fähigkeit und die Beständigkeit des Trackings

Teil I Anmerkungen:

1. In diesem Abschnitt wurde die folgende Regel angewendet, um das Lesen des Textes zu erleichtern. Subnationale Einheiten wie Hongkong können als Nationen oder Länder bezeichnet werden.

2. 2011 NAEP-TIMSS Linking Study, Nationales Zentrum für Bildungsstatistik, http://nces.ed.gov/timss/naeplink.asp.

3. Es wurde bereits versucht, NAEP und internationale Tests zu verknüpfen. Siehe Gary W. Phillips, Internationales Benchmarking: Staatliche Bildungsleistungsstandards (Washington, DC: American Institutes for Research, Oktober 2010) und Global Report Card, Jay P. Greene und Josh B. McGee, http://globalreportcard.org/.

4. Siehe The Finnish Miracle, Hank Pellissier, http://www.greatschools.org/students/2453-finland-education.gs.

5. Jenny Anderson, aus Finnland, ein faszinierendes Schulreformmodell, New York Times , 12. Dezember 2011, http://www.nytimes.com/2011/12/13/education/from-finland-an-intriguing-school-reform-model.html?pagewanted=all&_r=0.

1500er Kleidung

6. Pasi Sahlberg, Finnischunterricht: Was kann die Welt vom Bildungswandel in Finnland lernen? (New York: Teachers College Press, 2011).

7. Die flämische, französisch- und deutschsprachige Gemeinschaft betreibt getrennte Schulsysteme.

8. William H. Schmidt und Richard T. Houang, Mangelnde Konzentration im Mathematik-Curriculum: Symptom oder Ursache? in Lektionen gelernt: Was uns internationale Tests über mathematische Leistungen sagen , Hrsg. Tom Loveless (Washington: Brookings Institution Press, 2007).

9. William H. Schmidt und Richard T. Houang, Curricular Coherence and the Common Core State Standards for Mathematics, Bildungsforscher 41, Nr. 8 (2012): 294-308.

10. Eine Regression zum Mittelwert ist möglich, aber die Varianz der Gewinnwerte der A+-Länder lässt vermuten, dass dies unwahrscheinlich ist.