Assessing the dimensionality of the Student School Engagement Survey: Support for a multidimensional bifactor model

Abstract

The Student School Engagement Survey (SSES) is used to evaluate student engagement interventions run by the National Center for Student Engagement in the U.S. It was designed to measure the behavioral, emotional, and cognitive components of engagement, but its factorial structure has not been validated. To address this limitation, we tested the factorial structure of the Portuguese version of the SSES using a representative sample of 4866 adolescents. An exploratory factor analysis revealed five theoretically meaningful factors describing subtypes of emotional and behavioral engagement, and teacher support for learning. A confirmatory factor analysis supported modeling a shortened version of the SSES with a bifactor model. Bifactor indices indicated total SSES scores are interpretable as a measure of a single student engagement construct. Finally, as evidence of concurrent validity, the scale had a strong positive correlation with an established measure of student engagement. The proposed version of the SSES is a psychometrically adequate measure of student engagement, although cannot be said to measure cognitive engagement.

Resumen

El “Student School Engagement Survey” (SSES) es un cuestionario utilizado para evaluar las intervenciones de compromiso estudiantil realizadas por el Centro Nacional de Participación Estudiantil en los Estados Unidos. Este cuestionario ha sido diseñado para medir los componentes conductuales, emocionales y cognitivos del compromiso e implicación del alumnado en la escuela; sin embargo, su estructura factorial no ha sido validada. Para abordar esta limitación, se ha probado la estructura factorial de la versión portuguesa del SSES utilizando una muestra de 4.866 adolescentes. Un análisis factorial exploratorio ha revelado cinco factores teóricamente significativos que describen subtipos de compromiso emocional y conductual, y el apoyo de los maestros para el aprendizaje. Un análisis factorial confirmatorio ha apoyado el modelo de una versión abreviada del SSES con un modelo bifactorial. Los índices del modelo bifactorial han indicado que los valores totales del SSES son interpretables como una medida de un único constructo de la implicación del estudiante en la escuela. Finalmente, como evidencia de validez convergente, la escala ha tenido una fuerte correlación con una medida establecida de participación estudiantil. La versión propuesta del SSES es una medida psicométricamente adecuada desde el punto de vista del compromiso del estudiante, aunque no se puede decir que mida el compromiso cognitivo.