Validating school-based measures of educational disadvantage in Ireland

• Lorraine Gilleece ^[1] ; Gráinne McHugh ^[1]
  1. [1] Educational Research Centre
• Localización: Archivos Analíticos de Políticas Educativas=Education Policy Analysis Archives, ISSN-e 1068-2341, Vol. 30, Nº. 1, 2022
• Idioma: inglés
• Títulos paralelos:
  • Validación de las medidas escolares de desventaja educativa en Irlanda
  • Validação de medidas escolares de desvantagem educacional na Irlanda
• Enlaces
  • Texto completo
• Resumen
  • español

    Reducir la brecha de logros socioeconómicos es un objetivo clave de la política educativa a nivel internacional. Desde 2017, la intención declarada en Irlanda es utilizar el índice de privación Pobal HP para identificar las escuelas que atienden a una gran proporción de estudiantes desfavorecidos. A pesar de esto, pocas investigaciones publicadas compararon el desempeño del índice HP con medidas de encuestas más ricas de evaluaciones educativas a gran escala o examinaron su asociación con el rendimiento educativo en el nivel primario o secundario. Este documento tiene como objetivo evaluar la validez y la idoneidad para el uso del índice HP en la identificación de escuelas que atienden a altas concentraciones de estudiantes con desventajas socioeconómicas. Los análisis se basan en el conjunto de datos del Programa para la Evaluación Internacional de Estudiantes (PISA) de Irlanda de 2018 combinado con datos administrativos. Los hallazgos muestran una fuerte correlación entre el HP promedio escolar y otras medidas socioeconómicas examinadas. Sin embargo, aproximadamente una de cada cinco escuelas se identifican como posibles 'falsos positivos' o 'falsos negativos' cuando se utiliza el HP promedio de la escuela con fines de identificación. Además, el HP promedio escolar explica menos variación en el rendimiento en lectura que otras variables consideradas. Las conclusiones reconocen los beneficios del índice HP pero enfatizan la necesidad de un examen continuo de los métodos de identificación más apropiados.

  • English

    Reducing the socio-economic achievement gap is a key goal of education policy internationally. Since 2017, the stated intention in Ireland is to use the Pobal HP Deprivation Index to identify schools serving high proportions of disadvantaged students. In spite of this, little published research has compared the performance of the HP index to richer survey measures from large-scale educational assessments or examined its association with educational achievement at primary or second level. This paper aims to assess the validity and fitness for purpose of the HP index for use in identifying schools serving high concentrations of socio-economically disadvantaged students. Analyses draw on Ireland’s Program for International Student Assessment (PISA) 2018 dataset matched with administrative data. Findings show a strong correlation between school-average HP and other socio-economic measures examined. However, about one-in-five schools are identified as potential ‘false positives’ or ‘false negatives’ when school-average HP is used for identification purposes. Also, school-average HP explains less variance in reading achievement than other variables considered. Conclusions recognize the benefits of the HP index but emphasize the need for ongoing examination of the most appropriate methods of identification.

  • português

    Reduzir a lacuna de desempenho socioeconômico é um objetivo fundamental da política educacional internacional. Desde 2017, a intenção declarada na Irlanda é usar o Pobal HP Deprivation Index para identificar escolas que atendem altas proporções de alunos desfavorecidos. Apesar disso, poucas pesquisas publicadas compararam o desempenho do índice HP com medidas de pesquisa mais ricas de avaliações educacionais em larga escala ou examinaram sua associação com o desempenho educacional no ensino fundamental ou médio. Este artigo tem como objetivo avaliar a validade e adequação do índice HP para uso na identificação de escolas que atendem altas concentrações de alunos em desvantagem socioeconômica. As análises baseiam-se no conjunto de dados do Programa Internacional de Avaliação de Estudantes (PISA) 2018 da Irlanda, combinado com dados administrativos. Os resultados mostram uma forte correlação entre o HP médio escolar e outras medidas socioeconômicas examinadas. No entanto, cerca de uma em cada cinco escolas são identificadas como potenciais “falsos positivos” ou “falsos negativos” quando o HP médio da escola é usado para fins de identificação. Além disso, o HP médio escolar explica menos variância no desempenho em leitura do que outras variáveis consideradas. As conclusões reconhecem os benefícios do índice HP, mas enfatizam a necessidade de exame contínuo dos métodos de identificação mais adequados.