Publikasjon

Skoleferdigheter i endring: Utviklingen over tid målt ved nasjonale prøver

Forfattere: Markussen, Simen, Henrik Galligani Ræder, Ole Røgeberg, Oddbjørn Raaum
Publisert: 2024
Sammendrag: Norwegian 5th and 8th graders answer common tests in reading, mathematics and English every year. According to official statistics the average skills were virtually un-changed during the years 2014 to 2021. This stability is surprising in light of patterns in international surveys, consequences of the pandemic, change in reading practices, and increased exposure to English. In this article, we re-analyze detailed data at item-student level. The tests for con-secutive cohorts can be compared on the same scale using a subgroup of (randomly drawn) students each year who are given some tasks used in previous years (“anchor items”). We get a simple measure of skills development by seeing whether the anchor students do better or worse on the anchor items over time. We also analyze the develop-ment over time using IRT models and these confirm clear changes over time. The skills of Norwegian 5th and 8th graders have changed significantly, with markedly increased skills in English at both grade levels. For reading and mathematics, the changes over time are smaller, but our evidence indicates a negative trend for both reading and mathematics after 2016. The analyses also reveal the reason why the official figures are wrong. The software the Directorate of Education has used (XCalibre) assumes that the skills each year reflect a standardized skill distribution. It is obviously impossible to detect changes in skills across cohorts if one assumes that the cohorts, in expectation, are exactly the same.Our findings show that national tests provide a richer insight into pupils’ skill development over time than previously thought: National tests shed light on important patterns for the design of – and the priorities in – Norwegian schools.
Offisielle tall basert på standardiserte nasjonale prøver i Norge viser stabile ferdigheter i lesing, regning og engelsk på 5. og 8. trinn mellom 2014 og 2021. Dette er over-raskende: Norske tall viser endring i internasjonale undersøkelser som PISA og TIMSS, pandemien innebar store endringer i skolehverdagen, og lesepraksis og eksponering for engelsk har endret seg systematisk over tid. Vi benytter detaljerte data på oppgave-elev-nivå for å ettergå de offisielle tallene. Prøvene er rapportert på en felles skala ved hjelp av et design der en tilfeldig under-gruppe elever («ankerelever») får deler av oppgavesettet byttet ut med hemmeligholdte oppgaver som brukes over flere år («ankeroppgaver»). Vi viser at de tilfeldig trukne ankerelevene i snitt gjør det like bra som sine medelever på de års-spesifikke oppgavene, men systematisk annerledes enn ankerelever fra andre år når vi ser på sammenfallende ankeroppgaver. Vi analyserer også tidsutviklingen ved hjelp av IRT-modeller, og disse bekrefter klare endringer over tid. På begge klassetrinn lå gjennomsnittseleven i 2021 rundt et halvt standardavvik over 2014-snittet i engelsk. Det er mindre endringer for lesing og regning, men noe dårligere prestasjoner etter 2016. Våre analyser avdekker også årsaken til at de offisielle tallene ikke fanger opp utviklingen. Programvaren Utdanningsdirektoratet har brukt (XCalibre) legger til grunn at ferdighetene hvert år avspeiler en standardisert ferdighetsfordeling. Det er åpenbart umulig å avdekke endring i ferdigheter på tvers av årskull dersom man antar at årskull-ene, i forventning, er helt like.Samlet viser funnene at nasjonale prøver gir en rikere innsikt i elevers ferdighets-utvikling over tid enn tidligere antatt: Nasjonale prøver belyser viktige mønstre av betydning for utformingen av – og prioriteringene i – norsk skole.
DOI: 10.5617/adno.10310
Referanse: Markussen, Simen, Henrik Galligani Ræder, Ole Røgeberg, Oddbjørn Raaum, 2024, «Skoleferdigheter i endring: Utviklingen over tid målt ved nasjonale prøver», Acta Didactica Norden, vol 18(1)
Keywords: nasjonale prøver, utdanningsmåling, trend, Item Response Theory, prøvelenking
Les fulltekstversjonen av artikkelen
Utdanning