Validity of a reading comprehension test for portuguese students

Abstract

The purpose of this work was to collect construct and criterion-related evidence of validity for a reading comprehension test (TCL - Teste de Compreensão da Leitura) with three vertically scaled forms, designed to assess students from second, third and fourth grade. Method: Two studies were conducted. In the fi rst (n = 1,229), a confi rmatory factor analysis was performed to analyse the test dimensionality. In the second (n= 402), concurrent and predictive evidence of validity was analysed using correlations between TCL, other reading tests and academic achievement. Results: Confi rmatory factor analysis results supported a one-factor structure. Correlation coeffi cients with other reading tests were low to moderate and statistically signifi cant. The TCL forms were shown to be good predictors of students’ reading comprehension as assessed by teachers and of the National Exams of Portuguese Language results. Conclusions: Present results provide empirical evidence for the validity of the TCL forms.

Validez de un test de comprensión lectora para alumnos portugueses. Antecedentes: el objetivo de este trabajo fue recoger evidencia de validez de constructo y de criterio para un test de comprensión lectora (TCL- Teste de Compreensão da Leitura) con tres versiones escaladas verticalmente para evaluar alumnos portugueses de segundo, tercero y cuarto cursos de Primaria. Método: se efectuaron dos estudios. En el primero (n= 1,229) se analizó la dimensionalidad de la prueba recurriendo al análisis factorial confi rmatorio. En el segundo (n= 402) se proporcionan datos sobre evidencia de validez concurrente y predictiva, analizando las correlaciones entre los resultados en TCL, los resultados en otras pruebas de lectura y los resultados académicos. Resultados: los análisis factoriales confi rmatorios revelaron que el modelo de un factor se ajusta a los datos. Se obtuvieron coefi cientes de correlación bajos a moderados y estadísticamente signifi cativos entre las puntuaciones en el TCL y en otros tests de lectura. Las puntuaciones en TCL predijeron las puntuaciones obtenidas por los alumnos en los exámenes nacionales de lengua portuguesa y en las competencias de comprensión evaluadas por los maestros. Conclusiones: estos resultados proporcionan evidencia empírica para la validez de las versiones de TCL.