The COVID-19 School Closure
and Math Learning Inequalities

About

[Scorrere verso il basso per il testo in italiano]

Because of the COVID-19 virus, Italian schools have been locked down since February 24, 2020 and school learning has been replaced, when feasible, by distance education. There are important reasons to be concerned about detrimental effects of such school closures on learning outcomes, in particular for disadvantaged students. The Education Endowment Foundation (2020) claims that the attainment gap between disadvantaged children and their peers may widen by 36% when pupils return to school. The European Commission suggests that the increased disparity in cognitive and non-cognitive skills, which is likely to have happened during the COVID-19 pandemic, may have consequences in both short and long-term. Moreover, for the first time since the concept was developed, the United Nations Development Programme expects a steep reduction in human development in 2020 due to reduced economic activity and a reduction in educational attainments (UNDP 2020).

The aim of the project "The Covid-19 School Closure and Math Learning Inequalities in Primary School in the Torino Province" (MATGAP) is to measure the effect of the Covid-19 school closures on math skills, among primary school children in grade 3, with special attention to children with a disadvantaged background. Being be the first such evaluation done in Italy, the project will allow us to identify the children who have been most affected by the school lockdown.

The project builds on the experiences gained and on the data collected during the previous intervention (Tackling the Gender Gap in Mathematics in Torino Province). It takes advantage from an ongoing interdisciplinary collaboration between scholars working in the Economics of Education, Social Statistics, and Mathematics Education, and is supported by the Regional Board of Education of Piedmont (USR). Thanks to the involvement of the USR and to the involvement of schools, math assessment tests have been conducted in the fall of 2020.

Results show that the school closure during the first lockdown had a negative and significant impact on math competencies for all pupils (-0.19 s.d., corresponding to about 3 months of school); the effect is particularly large for children with low-educated parents with medium-high level of initial skills and for daughters of low-educated parents.

Publication

Contini, D., Di Tommaso, M.L., Muratori, C., Piazzalunga, D., Schiavon, S. (2022) Who Lost the Most? Mathematics Achievement during the COVID-19 Pandemic, B.E. Journal of Economic Analysis & Policy 22(2): 399-408. https://doi.org/10.1515/bejeap-2021-0447.

This article estimates the effect of school closures in the spring of 2020 on the math skills of primary school children in Italy, which was the first Western country hit by the COVID-19 pandemic, responding with a strict lockdown and total school closures through the end of the school year. Leveraging unique longitudinal data collected in the province of Torino, a large metropolitan area in northern Italy, we analyse the learning outcomes of two adjacent cohorts of pupils, the pre-Covid and the Covid cohort. The pandemic had a large mean negative impact on pupils’ performance in mathematics (−0.19 standard deviations). Learning loss was greater for girls and for high-achieving children of low-educated parents. Net of individual characteristics, the impact was harshest in schools with a disadvantaged social composition.

Presentations

INVALSI, CIRSDe Torino, convegno Scuola Democratica, ESPAnet, AIEL, SEHO
Collegio Carlo Alberto, Univerity of Trento, University of Torino, University of Verona FBK-IRVAPP,

Presentation at EMiL Workshop, University of Trento, slides below

covid1_dec2021_unitn.pdf

In sintesi

Dal 24 febbraio 2020 e fino alla fine dell'anno scolastico, l'Italia ha chiuso le scuole al fine di contenere la diffusione del virus COVID-19, e, quando possibile, la didattica in presenza è stata sostituita dalla didattica a distanza. La maggior parte degli Stati ha temporaneamente seguito la stessa strada: a livello globale circa 1,6 miliardi di studenti e studentesse non ha potuto andare a scuola ad aprile 2020. Studi nazionali e internazionali suggeriscono che ciò avrà importanti ricadute negative sull'apprendimento degli studenti. La Education Endowment Foundation (2020) riporta che la chiusura delle scuole amplierà il divario dei bambini provenienti da famiglie povere rispetto agli altri bambini del 36%. La Commissione Europea sottolinea che la pandemia avrà effetti negativi sia sulle abilità cognitive sia sulle abilità non cognitive, con conseguenze non solo nel breve periodo ma anche nel lungo periodo. Inoltre, il Programma delle Nazioni Unite per lo Sviluppo (UNDP) stima una forte riduzione dello sviluppo umano a livello mondiale nel 2020, dovuta sì al rallentamento economico ma soprattutto ai profondi cambiamenti nei percorsi d’istruzione, conseguenze dell’emergenza sanitaria COVID-19 (UNDP 2020). In particolare, i bambini più poveri e fragili risultano essere i più esposti ai rischi negativi della pandemia anche in termini di apprendimento.

Obiettivo del progetto "The Covid-19 School Closure and Math Learning Inequalities in Primary School in the Torino Province" (MATGAP) è misurare gli effetti della chiusura delle scuole sull'apprendimento della matematica, con attenzione particolare ai bambini provenienti da contesti svantaggiati. Trattandosi della prima valutazione di questo tipo in Italia, il progetto permetterà di identificare gli studenti più colpiti dalla chiusura delle scuole.

Il progetto si basa sull'esperienza e sui dati raccolti durante il progetto precedente (Affrontare il divario di genere in matematica nella provincia di Torino). Sfrutta la sinergia di una collaborazione interdisciplinare tra studiosi di Economia dell'Istruzione, Statistica Sociale, Didattica della Matematica, ed è supportato dall'Ufficio Scolastico Regionale. Grazie al coinvolgimento dell'USR e alla disponibilità delle scuole, i test di matematica sono stati condotti tra settembre e ottobre 2020.

A seguito della chiusura della scuola causata dalla pandemia i bambini/e hanno perso in media 0,19 deviazioni standard rispetto alla coorte precedente, una perdita equivalente a circa tre mesi di scuola. Il danno maggiore in termini di apprendimento è stato sperimentato da bambini/e con genitori non laureati e con rendimenti scolastici superiori alla media (fino a -0,51 deviazioni standard per i bambini più bravi), e le figlie femmine di genitori poco istruiti (-0,30 deviazioni standard).

Presentazioni (Italiano)

Webinar INVALSI "L’importanza dei dati e delle metodologie statistiche di ricerca: l’emergenza Covid-19"

Covid19_LearningLoss_INVALSI_jun2021.pdf

Registrazione del webinar INVALSI 16 giugno 2021

Tutors

Elena Dutto, Alice Gregorio, Federica Lucco-Castello, Riccardo Minisola, Martina Montagnani, Elena Siviero

Participating schools - Scuole partecipanti

  1. I.C. Favria

  2. I.C. D'Azeglio

  3. I.C. Santa Maria - Moncalieri

  4. I.C. Nichelino 3

  5. I.C. La Loggia

  6. I.C. Nasi - Moncalieri

  7. I.C. 66 Martiri- Grugliasco

  8. I.C. 1 San Mauro Torinese

  9. I.C. Niccolò Tommaseo

  10. I.C. G. Pacchiotti - Via Revel

  11. Circolo Didattico Pietro Baricco

  12. I.C. Parri - Vian

  13. I.C. Buttigliera Alta

  14. I.C. Almese

  15. I.C. Druento (DR)

  16. I.C. Volpiano (VL)

  17. I.C. Chieri 1 (CH)