covid
Buscar en
Revista Latinoamericana de Psicología
Toda la web
Inicio Revista Latinoamericana de Psicología Invarianza factorial del Cuestionario para Evaluar Clima Social del Centro Escol...
Información de la revista
Vol. 49. Núm. 2.
Páginas 119-127 (mayo - agosto 2017)
Compartir
Compartir
Descargar PDF
Más opciones de artículo
Visitas
3974
Vol. 49. Núm. 2.
Páginas 119-127 (mayo - agosto 2017)
Original
Open Access
Invarianza factorial del Cuestionario para Evaluar Clima Social del Centro Escolar en estudiantes chilenos y colombianos
Factorial invariance of the Questionnaire for evaluating School Social Climate in Chilean and Colombian students
Visitas
3974
José Luis Gálvez-Nietoa,
Autor para correspondencia
jose.galvez@ufrontera.cl

Autor para correspondencia.
, Sonia Salvob, Ricardo Pérez-Lucoc, Christian Hederichd, Ítalo Trizano-Hermosillae
a Doctor en Ciencias de la Educación, Universidad de La Frontera, Académico Departamento de Trabajo Social, Investigador del Laboratorio de Investigación en Ciencias Sociales Aplicadas (LICSA), Temuco, Chile
b Doctora en Estadística, Universidad de La Frontera, Académica Departamento de Matemática, Investigadora del Laboratorio de Investigación en Ciencias Sociales Aplicadas (LICSA), Temuco, Chile
c Doctor en Psicología, Universidad de La Frontera, Académico Departamento de Psicología, Temuco, Chile
d Doctor en Psicología, Matemático, Universidad Pedagógica Nacional en Bogotá, Bogotá, Colombia
e Máster en Metodología de las Ciencias del Comportamiento y de la Salud, Estudiante de Doctorado de la Universidad Autónoma de Madrid, Madrid, España
Este artículo ha recibido

Under a Creative Commons license
Información del artículo
Resumen
Texto completo
Bibliografía
Descargar PDF
Estadísticas
Tablas (4)
Tabla 1. Matriz de correlaciones (diagonal superior, muestra chilena; inferior, muestra colombiana), media y desviación típica de los ítems para ambas muestras
Tabla 2. Saturaciones factoriales de los 14 ítems de CECSCE en muestra chilena y colombiana
Tabla 3. Índices de bondad de ajuste y comparación de modelos Chile-Colombia
Tabla 4. Índice de homogeneidad y alfa al eliminar elemento
Mostrar másMostrar menos
Resumen

La investigación tuvo como objetivo estudiar el grado de equivalencia psicométrica del Cuestionario para Evaluar Clima Social del Centro Escolar (CECSCE) en adolescentes chilenos y colombianos. Los participantes fueron seleccionados a partir de un muestreo no probabilístico intencionado en 11 establecimientos públicos y particulares subvencionados de Chile y Colombia. Participaron 1233 adolescentes de ambos sexos, con una edad promedio de 14.82 (DT = 1.83). Los resultados obtenidos a partir de los análisis factoriales confirmatorios ratificaron la estructura de 2 factores correlacionados en la muestra chilena con el índice chi-cuadrado de Satorra Bentler(76)=175.664, p<.001; índice de ajuste comparativo=.956; índice de Tucker-Lewis=.948; error cuadrático medio de aproximación=.044 (IC90%=.035-.052) y en la muestra colombiana con el índice chi-cuadrado de Satorra Bentler(76)=131.508, p<.001; índice de ajuste comparativo=.942; índice de Tucker-Lewis=.931; error cuadrático medio de aproximación=.037 (IC90%=.026-.047). El análisis de invarianza factorial evidenció que el grado de equivalencia transcultural del instrumento se presenta plausible a nivel de invarianza de configuración (M1=Δ índice chi-cuadrado de Satorra Bentler=35.583; Δgl=12; p<.001; Δíndice de ajuste comparativo=.007). La escala presentó adecuados índices de fiabilidad por consistencia interna y homogeneidad.

Palabras clave:
Invarianza factorial
Clima social en centros educativos
Contextos escolares
Abstract

This study aims to determine the degree of psychometric equivalence of the questionnaire for evaluating School Social Climate in Chilean and Colombian adolescents. Using an intentional non-probability sampling, the adolescents were selected from 11 public schools and subsidised private schools in Chile and Colombia. The study involved 1,233 adolescents of both sexes, with a mean age of 14.82 years (SD=1.83). The results from confirmatory factor analysis ratified the correlated two-factor structure in the Chilean sample Satorra Bentler's chi-square(76)=175.664, P<.001; comparative fit index=.956; Tucker-Lewis index=.948; root mean square error of approximation=.044 (90% CI=.035-.052), and in the Colombian sample Satorra Bentler's chi-square(76)=131.508, P<.001; comparative fit index=.942; Tucker-Lewis index=.931; root mean square error of approximation=.037 (90% CI=.026-.047). Invariance factorial analysis showed that the cross cultural level of the instrument is plausible at invariance configuration level (M1=ΔSatorra Bentler's chi-square=35.583; Δgl=12; P<.001; Δcomparative fit index=.007). The resulting scale depicted adequate indices of reliability for internal consistency and homogeneity.

Keywords:
Factorial invariance
School social climate
School context
Texto completo

La investigación psicológica ha planteado la necesidad de evaluar el grado de pertinencia y estabilidad de los constructos teóricos en distintas culturas (Ruiz, Bringas, Rodríguez-Díaz & García-Cueto, 2014). En este contexto y como se desarrollará a continuación, la evidencia empírica nacional e internacional muestra un exiguo avance en estudios psicométricos que analicen el efecto de la cultura sobre las medidas de clima social escolar.

El clima social escolar se define como la percepción que los miembros de la institución escolar tienen respecto del ambiente en el cual desarrollan sus actividades habituales (Aron, Milicic & Armijo, 2012; Fan, Williams & Corkin, 2011; Gálvez, Tereucán, Muñoz, Briceño & Mayorga, 2014; Gálvez-Nieto, Vera-Bachmann, Trizano & García, 2015b; Hombrados-Mendieta & Castro-Travé, 2013; Steffgen, Recchia & Viechtbauer, 2013; Thapa, Cohen, Guffey & Higgins-D’Alessandro, 2013; Trianes, Blanca, de la Morena, Infante & Raya, 2006), el cual está compuesto por todos aquellos factores físicos, elementos estructurales de la institución educativa (Cohen, McCabe, Michelli & Pickeral, 2009; Jia et al., 2009; López, Bilbao & Rodríguez, 2011) y por aspectos relacionales, y se destacan la importancia del vínculo entre iguales y la calidad de la relación entre el docente y el estudiante (Álvarez, Álvarez-García, González-Castro, Núñez & González-Pienda, 2006; García-Hierro & Cubo, 2009; Giovazolias, Kourkoutas, Mitsopoulou & Georgiadi, 2010; LaRusso & Selman, 2011).

El clima social escolar es una variable relevante dado su aporte al desarrollo cognitivo y social de los adolescentes (Hallinan, Kubitschek & Liu, 2009). Diversas investigaciones han demostrado el aporte del clima social escolar positivo, relacionándolo con un mayor rendimiento académico en contextos de establecimientos con dificultades sociales y económicas (Barboza et al., 2009; Elías & Haynes, 2008; Jia et al., 2009; Valdés et al., 2008) y como una de las variables con mayor poder explicativo en el rendimiento académico (Lee, 2009; Salvo, Moraga, Miranda, Ramírez & Vera-Bachmann, 2012; Treviño, Place & Gempp, 2012).

El clima social escolar se ha asociado con un menor consumo de drogas y un mayor sentido de pertenencia hacia la comunidad escolar (Gregory, Cornell & Fan, 2012; LaRusso, Romer & Selman, 2008), así también se han demostrado sus efectos positivos que favorecen el desarrollo de habilidades a nivel emocional y la adquisición de nuevos aprendizajes (Brown, Jones, LaRusso & Aber, 2010; García, 2009). Ahora bien, un clima social escolar negativo se asocia con mayor violencia escolar (Astor, Benbenisty & Estrada, 2009; Johnson, 2009; Lee & Song, 2012), acoso escolar (Agirdag, Demanet, van Houtte & van Avermaet, 2011; Birkett, Espelage & Koenig, 2009; Richard, Schneider & Mallet, 2012; Waasdorp, Pas, O’brennan & Bradshaw, 2011), mayores problemas de comportamiento y establecimiento de relaciones con pares que presentan conductas de riesgo (Wang, Selman, Dishion & Stormshak, 2010).

En cuanto al estudio del constructo en Colombia, se evidencia que ha existido interés por su evaluación. En este contexto se han realizado estudios de tipo descriptivo (Castro & Gaviria, 2006; Giraldo & Mera, 2000; López de Mesa-Melo, Carvajal-Castillo, Soto-Godoy &Urrea-Roa, 2013) y un estudio psicométrico que analizó uno de los cuestionarios clásicos para evaluar el clima escolar -CES- (Prado, Ramírez & Ortiz, 2010). Sin embargo, aún no se cuenta con estudios que utilicen la medida específica de clima social escolar (Cuestionario para Evaluar Clima Social del Centro Escolar [CECSCE]).

En Chile se han realizado estudios que asocian el clima escolar con violencia escolar (Tijmes, 2012; Vera-Bachmann & Gálvez, 2014) y con actitudes hacia la autoridad institucional (Gálvez-Nieto et al., 2015b), así como estudios descriptivos que analizan su influencia según dependencia administrativa del establecimiento (Guerra, Vargas, Castro, Plaza & Barrera, 2012). En este país se presentan algunas investigaciones psicométricas relacionadas con la medida específica de clima social del escolar -CECSCE- (Gálvez-Nieto, Vera-Bachmann & Trizano, 2015a; Gálvez et al., 2014; Guerra, Castro & Vargas, 2011).

El Cuestionario para Evaluar Clima Social del Centro Escolar como medida de clima social escolar: descripción y estructura teórica del constructo

La medida de clima social escolar (CECSCE) ha generado importantes aportes desde su creación en España; se presentó como un instrumento centrado en las relaciones interpersonales de estudiantes y profesores (Trianes et al., 2006). Es una medida útil para la evaluación e intervención psicoeducativa en áreas relacionadas con la salud, adaptación individual y prevención de violencia escolar (Trianes et al., 2006). Además, proporciona un constructo preciso que, sin comprometer capacidad explicativa, provee de una medida de corta extensión, ideal para su uso en el contexto aplicado y en estudios multivariantes.

Respecto de su estructura teórica (Trianes et al., 2006), inicialmente se presentó una medida de clima social escolar compuesta por dos dimensiones: clima referente al centro escolar y clima social referente al profesorado. Un estudio realizado en Chile (Guerra et al., 2011), presenta una estructura factorial diferenciada, propone que el CECSCE puede ser entendido como una medida unidimensional; sin embargo, esta solución presenta una escasa capacidad explicativa (un 35.65% de varianza explicada). Este mismo estudio presenta evidencia psicométrica que avala una solución factorial con dos dimensiones, tal cual fue propuesto inicialmente por el estudio español; esta solución mejora su capacidad explicativa (un 45.29% de varianza explicada). Otros estudios recientes (Gálvez et al., 2014; Gálvez-Nieto et al., 2015a), reportan adecuados índices de calidad psicométrica confirmando la estructura teórica original de dos dimensiones para medir el clima social escolar.

Ahora bien, el contexto colombiano y el chileno presentan variantes culturales sustantivas, y dichas diferencias generan una matriz identitaria que distingue a cada país. Sin embargo, Chile y Colombia comparten un elemento importante que es el idioma, el cual posee leves diferencias que han sido modeladas por cada cultura. Considerando estos antecedentes, es pertinente preguntarse si las variables culturales pueden modificar la percepción del clima social escolar, llevar a entender de manera distinta el cuestionario y hacer variar la estructura teórica de la escala. Por lo tanto, el objetivo de este estudio es analizar si la medida de clima social escolar (CECSCE) es un instrumento válido e invariante en ambos países.

Ambos planteamientos conducen a formular la hipótesis de que la versión chilena del CECSCE y la versión adaptada en Colombia serán equivalentes en cuanto a su estructura factorial, es decir, mismo número de ítems y mismo número de factores.

MétodoParticipantes

Participaron de la investigación 1233 estudiantes adolescentes, seleccionados a partir de un muestreo no probabilístico en 11 establecimientos públicos y particulares subvencionados de Chile y Colombia. Este tamaño muestral posibilitó alcanzar la variabilidad requerida por el análisis psicométrico multivariante, además de proporcionar mayor estabilidad en los resultados. Ambos grupos se describen a continuación:

  • Muestra chilena. Participaron 692 estudiantes chilenos de ambos sexos (el 49.9% hombres y el 50.1% mujeres) de edades comprendidas entre los 12 y 20 años (M=14.82; DT=1.83). Los estudiantes cursaban enseñanza secundaria en 6 centros educativos públicos y particulares subvencionados de la Región de la Araucanía, Chile.

  • Muestra colombiana. Participaron 541 estudiantes colombianos de ambos sexos (el 47.6% hombres y el 52.4% mujeres) de edades comprendidas entre los 12 y 18 (M=14.72; DT=1.26). Los estudiantes cursaban enseñanza secundaria en 5 establecimientos públicos de Bogotá, Colombia.

Con el objetivo de evaluar la equivalencia de las muestras entre los países se analizaron asociaciones entre la variable sexo a través del test chi-cuadrado (χ2 [gl=1]=.622 p=.43) y diferencia de medias para la edad mediante la prueba t de Student (t [gl=1230]=1.101; p=.271). No se presentaron diferencias estadísticamente significativas entre las muestras.

Instrumento

El CECSCE es una escala de autoinforme elaborada originalmente en España (Trianes et al., 2006). Evalúa el clima social escolar desde la perspectiva de los estudiantes a partir de 14 ítems a los que se responde en una escala ordinal de 5 puntos (1=muy en desacuerdo, 5=muy de acuerdo). En Chile (Gálvez et al., 2014; Gálvez-Nieto et al., 2015a; Guerra et al., 2011) los estudios evidencian que el CECSCE posee un adecuado ajuste psicométrico y 2 factores: clima social del centro escolar, que se refiere a las relaciones entre pares, capacidad de ayuda y sentimiento de bienestar; y clima social profesores, que evalúa exigencia académica, justicia y trato con los estudiantes (Trianes et al., 2006).

Procedimiento

Para la aplicación del instrumento se tomó contacto con los directores de los establecimientos y se solicitó autorización para aplicar los cuestionarios. Con el objetivo de obtener la autorización de los padres y apoderados, se realizaron reuniones informativas en donde se explicaron los objetivos y alcances del proyecto. Finalmente apoderados y estudiantes firmaron consentimientos informados, resguardando los principios éticos de la investigación. Los estudiantes que accedieron a participar, lo hicieron de manera voluntaria y anónima.

El ajuste conceptual de los ítems del CECSCE se realizó mediante juicio experto, al respecto se solicitó a tres jueces que revisaran los coloquialismos chilenos que posiblemente no serían comprendidos por los estudiantes colombianos. Los resultados indicaron que en general la escala sería bien comprendida; sin embargo, se debía sustituir la expresión los desordenados por los indisciplinados correspondientes al ítem 13.

Análisis de datos

En primer lugar, se realizaron análisis descriptivos (media y desviación típica) de los ítems del CECSCE para las muestras chilena y colombiana, también se evaluó la normalidad de cada ítem mediante la prueba Kolmogorov-Smirnov. Posteriormente, con el fin de obtener evidencias de validez de la estructura interna, se realizó análisis factoriales confirmatorio en ambas muestras considerando la estructura teórica propuesta. Estos modelos se llevaron a cabo utilizando el software MPLUS 7.11 (Muthén & Muthén, 2012). Para la estimación de los índices de bondad de ajuste se utilizó el método máxima verosimilitud robusta. Este procedimiento permite un análisis adecuado para datos que no cumplen con el supuesto de normalidad multivariante, como es el caso de los resultados obtenidos a través del test de Mardia estandarizado (Mardia, 1970) en la muestra chilena=18.13 y en la muestra colombiana=9.64. La estimación máxima verosimilitud robusta permite la obtención de índices robustos, así como estimaciones apropiadas de los parámetros y su nivel de error (Finney & DiStefano, 2006; Flora & Curran, 2004). Los análisis factoriales confirmatorios fueron analizados a través de los siguientes índices de bondad de ajuste; chi-cuadrado de Satorra Bentler -SB-χ2- (Satorra & Bentler, 2001), índice de ajuste comparativo (CFI), índice de Tucker-Lewis (TLI) y error cuadrático medio de aproximación (RMSEA). Para los primeros índices, CFI y TLI, se considera un ajuste adecuado del modelo los valores superiores a .90 (Schumacher & Lomax, 1996), mientras que para el RMSEA se considera un ajuste razonable los valores inferiores a .08 (Browne & Cudeck, 1993).

Posteriormente se evaluó el grado de invarianza factorial del cuestionario entre ambas muestras, considerando los siguientes modelos (Vandenberg & Lance, 2000): M0-Invarianza de configuración, igual número de factores e ítems en ambos grupos; M1-Invarianza métrica, igualdad entre las saturaciones factoriales; M2-Invarianza escalar, igualdad entre las intersecciones (medias de ítems iguales); y M3-Invarianza de medias latentes, igualdad de las medias de los factores latentes. La comparación de los modelos se realizó tomando como criterio la diferencia de chi-cuadrado de Satorra Bentler ΔSB-χ2 (Asparouhov & Muthén, 2013) y el criterio de cambio de ΔCFI (Cheung & Rensvold, 2002). Una vez confirmada la solución factorial se evaluó la fiabilidad de los factores utilizando el coeficiente alfa de Cronbach, el coeficiente de fiabilidad ordinal (Elosua & Zumbo, 2008) y el índice de homogeneidad ítem total.

ResultadosAnálisis descriptivos y evaluación de la estructura factorial

En la tabla 1 se presentan la media y desviación típica de los ítems y la matriz de correlaciones para las 2 muestras. Al evaluar la normalidad univariada, mediante la prueba Kolmogorov-Smirnov, se rechazó la hipótesis nula (p<.001) para todos los ítems, por lo que se ratifica la elección de métodos de estimación robustos al incumplimiento de la normalidad.

Tabla 1.

Matriz de correlaciones (diagonal superior, muestra chilena; inferior, muestra colombiana), media y desviación típica de los ítems para ambas muestras

Ítems  Ítem 1  Ítem 2  Ítem 3  Ítem 4  Ítem 5  Ítem 6  Ítem 7  Ítem 8  Ítem 9  Ítem 10  Ítem 11  Ítem 12  Ítem 13  Ítem 14 
Correlaciones
Ítem1  .360  .129  .342  .244  .320  .245  .361  .218  .239  .353  .355  .319  .263 
Ítem2  .143  .191  .476  .333  .459  .257  .402  .242  .340  .441  .449  .416  .450 
Ítem3  .190  .158  .179  .139  .112  .162  .187  .105  ,058  .176  .160  .175  .171 
Ítem4  .241  .203  .143  .301  .406  .272  .377  .198  .264  .399  .380  .409  .294 
Ítem5  .221  .185  .179  .168  .440  .333  .227  .375  .241  .389  .521  .271  .251 
Ítem6  .227  .281  .206  .221  .323  .366  .292  .294  .325  .503  .516  .362  .389 
Ítem7  .191  .118  .134  .227  .232  .218  .301  .232  .266  .350  .334  .179  .211 
Ítem8  .239  .211  .183  .173  .168  .234  .157  .201  .355  .358  .303  .409  .332 
Ítem9  .181  .088  .049  .215  .174  .184  .294  .206  .304  .321  .364  .225  .205 
Ítem10  .232  .124  .141  ,083  .183  .247  .312  .094  .209  .457  .307  .278  .214 
Ítem11  .301  .216  .093  .179  .289  .387  .312  .232  .204  .333  .515  .360  .354 
Ítem12  .226  .196  .124  .242  .320  .364  .283  .266  .215  .217  .405  .384  .331 
Ítem13  .146  .228  .098  .262  .124  .156  .213  .243  .218  .118  .171  .240  .337 
Ítem14  .165  .314  .107  .210  .132  .188  .123  .280  ,077  .117  .219  .172  .156 
Ítems  Ítem 1  Ítem 2  Ítem 3  Ítem 4  Ítem 5  Ítem 6  Ítem 7  Ítem 8  Ítem 9  Ítem 10  Ítem 11  Ítem 12  Ítem 13  Ítem 14 
Chile
Media  3.69  3.67  3.76  3.54  3.72  3.05  3.28  3.90  3.86  3.73  2.99  3.62  3.68  2.53 
Desviación típica  1.03  1.08  .96  1.21  1.20  1.21  1.00  1.14  1.18  1.19  1.14  1.17  1.23  1.38 
Colombia
Media  3.78  3.89  4.07  3.80  3.17  3.14  3.44  3.70  4.43  3.99  3.21  3.73  3.85  2.85 
Desviación típica  1.00  .69  .77  .96  .85  .98  .84  1.04  .82  .85  .96  .95  .96  1.29 

A continuación se evaluó la estructura interna del cuestionario ajustando el modelo de acuerdo con los antecedentes teóricos y empíricos. El modelo de 2 factores correlacionados para estudiantes chilenos proporcionó un ajuste satisfactorio SB-χ2(76)=175.664, p<.001; CFI=.956; TLI=.948; RMSEA=.044 (IC90%=.035-.052). Del mismo modo, para estudiantes colombianos el modelo reveló un ajuste satisfactorio SB-χ2(76)=131.508, p<.001; CFI=.942; TLI=.931; RMSEA=.037 (IC90%=.026-.047).

Los índices anteriormente seleccionados ratifican que el modelo de 2 factores correlacionados (Gálvez et al., 2014; Gálvez-Nieto et al., 2015a; Guerra et al., 2011; Trianes et al., 2006) ajusta de manera adecuada a los datos. Todas las saturaciones de los ítems fueron estadísticamente significativas con un valor p<.001; para Chile oscilaron entre .277 y .727, mientras que para Colombia las saturaciones variaron entre .314 y .639 (ver tabla 2); además se confirmó la correlación positiva entre ambos factores, tanto para Chile .839 (p<.001) como para Colombia .739 (p<.001).

Tabla 2.

Saturaciones factoriales de los 14 ítems de CECSCE en muestra chilena y colombiana

ÍtemsColombiaChile
Clima social establecimiento  Clima social profesores  Clima social establecimiento  Clima social profesores 
Ítem 1. Cuando hay una emergencia, hay alguien para ayudarme  .449    .501   
Ítem 2. Los profesores de este colegio son agradables con los estudiantes    .489    .727 
Ítem 3. Trabajo en las tareas escolares    .314    .277 
Ítem 4. Cuando los estudiantes rompen las reglas, son tratados justamente    .463    .638 
Ítem 5. El colegio está muy ordenado y limpio  .486    .602   
Ítem 6. Se puede confiar en la mayoría de la gente de este colegio  .580    .701   
Ítem 7. Los estudiantes realmente quieren aprender  .491    .492   
Ítem 8. Los profesores me dicen cuando hago un buen trabajo    .505    .588 
Ítem 9. Los estudiantes de origen indígena son respetados  .390    .471   
Ítem 10. Mi curso tiene un aspecto muy agradable  .448    .512   
Ítem 11. La gente de este colegio se cuida uno al otro  .639    .719   
Ítem 12. Mi colegio es un lugar muy seguro  .600    .727   
Ítem 13. Los profesores hacen un buen trabajo identificando a los desordenados    .449    .613 
Ítem 14. Me siento cómodo hablando con mis profesores de mis problemas    .464    .562 

Todas las saturaciones son estadísticamente significativas: p<.001.

Evaluación del grado de invarianza factorial

El análisis comenzó examinando la bondad de ajuste de la estructura de 2 factores de la escala CECSCE en la muestra chilena y colombiana simultáneamente; este modelo fue denominado M0. En la tabla 3 se evidencia que los índices de bondad de ajuste de M0 resultaron satisfactorios, cada uno de los parámetros de este modelo fueron estadísticamente significativos.

Tabla 3.

Índices de bondad de ajuste y comparación de modelos Chile-Colombia

  SB-χ2 (glSB-χ2/gl  TLI  CFI  RMSEA  ΔSB-χ2  Δgl  p (ΔSB-χ2ΔCFI 
1 M0  308.597 (152)*  2.030  .943  .952  .037         
2 M1  343.246 (164)*  2.093  .939  .945  .046  35.583  12  .0004  .007 
3 M2  658.683 (176)*  3.743  .847  .852  .065        −.093 

CFI: índice de ajuste comparativo; gl: grados de libertad; RMSEA: error cuadrático medio de aproximación; SB-χ2: chi-cuadrado robusto de Satorra y Bentler; TLI: índice de ajuste de Tucker-Lewis; ΔCFI: cambio en CFI; Δgl: cambio en grados de libertad; ΔSB-χ2: cambio en chi-cuadrado Satorra y Bentler.

*

p<.001.

Lo anterior ratifica que la estructura de 2 factores, con los mismos ítems, de CECSCE, se mantiene estable en ambos países. Por lo tanto, se consideró este modelo como referencia para la siguiente anidación de restricciones.

A continuación se evaluó el modelo de invarianza métrica (M1), incorporando restricciones a las saturaciones de los ítems. Lo anterior indica que la matriz de saturaciones factoriales de la muestra chilena es equivalente a la matriz de saturaciones factoriales de la muestra colombiana. Los índices de ajuste para este modelo resultaron satisfactorios (ver tabla 3); sin embargo, al comparar este modelo con M0 se encuentran diferencias estadísticamente significativas, por lo que se rechaza la equivalencia entre ambos modelos (ΔSB-χ2=35.583, Δgl=12, p<.001; ΔCFI=.007). Considerando este resultado, no es pertinente continuar con el siguiente nivel de anidación (M2), que impone igualdad de interceptos. Por lo tanto solo se acepta el nivel de invarianza en la configuración entre la muestra chilena y colombiana (tabla 3).

Evidencias de fiabilidad

Posteriormente se evaluó la fiabilidad de las puntuaciones de las escalas, para cada país, mediante el coeficiente alfa de Cronbach y el coeficiente de fiabilidad ordinal, dispuesto entre paréntesis a continuación (tabla 4). Para Chile la fiabilidad de clima social escolar fue de .81 (.83) y de clima social de profesores fue de .74 (.77), mientras que para Colombia la fiabilidad fue de .74 (.77) para el primer factor y .59 (.64) para el segundo, así, se encontraron valores aceptables aunque levemente menores a los hallados en la muestra chilena.

Tabla 4.

Índice de homogeneidad y alfa al eliminar elemento

ColombiaChile
Correlación elemento-total corregida  Alfa de Cronbach si se elimina el elemento  Correlación elemento-total corregida  Alfa de Cronbach si se elimina el elemento 
Ítem 1  .368  .726  .416  .804 
Ítem 5  .413  .715  .552  .786 
Ítem 6  .467  .704  .604  .778 
Ítem 7  .430  .712  .452  .800 
Ítem 9  .335  .729  .450  .801 
Ítem 10  .407  .716  .454  .801 
Ítem 11  .544  .688  .637  .773 
Ítem 12  .487  .700  .643  .772 
  Alfa factor establecimiento=.738Alfa factor establecimiento=.811
Ítem 2  .386  .532  .600  .672 
Ítem 3  .218  .582  .252  .756 
Ítem 4  .330  .541  .519  .692 
Ítem 8  .374  .520  .513  .695 
Ítem 13  .325  .543  .527  .690 
Ítem 14  .356  .537  .468  .711 
  Alfa factor profesores=.588Alfa factor profesores=.741
Discusión

El propósito de este artículo fue analizar si el CECSCE es un instrumento válido, fiable e invariante en estudiantes chilenos y colombianos. Los resultados permiten concluir que el CECSCE presenta evidencia de calidad psicométrica para su utilización en los contextos de Chile y Colombia, además el grado de invarianza factorial se presenta plausible a nivel de invarianza de configuración (M0).

La escala inicialmente fue desarrollada por Trianes et al. (2006) y se basa en una medida de clima social escolar compuesta por 14 ítems organizados en una estructura factorial de 2 dimensiones. El análisis empírico de la estructura teórica del CECSCE revela que se confirma la estructura bidimensional. Los 2 factores que componen el instrumento dan cuenta de dimensiones distintas, pero suficientemente relacionadas para medir el clima escolar. La propuesta teórica original se muestra consistente con estudios psicométricos recientes realizados en Chile (Gálvez et al., 2014, Gálvez-Nieto et al., 2015a; Guerra et al., 2011).

Los resultados del análisis factorial confirmatorio realizado de modo separado en la muestra chilena y colombiana ratifican la validez de la estructura teórica de 2 factores correlacionados. Los factores denominados clima social del centro escolar, referido a las relaciones entre pares, capacidad de ayuda y sentimiento de bienestar con su establecimiento, y el factor clima social profesores relativo a aspectos como exigencia académica, justicia y trato con los estudiantes, demostraron ser la estructura teórica que mejor ajustaba a los datos en ambos grupos en estudio.

Posteriormente, se analizó el nivel de invarianza factorial del CECSCE en ambas muestras de estudiantes. Este análisis consideró como primer paso examinar la consistencia teórica de la escala evaluando su invarianza de configuración. El primer modelo evidenció que el número de factores y los ítems que correspondían a cada factor eran los mismos en la muestra de estudiantes chilenos que en la de colombianos; por lo tanto, el cuestionario puede ser aplicado en ambos contextos siguiendo el modelo teórico original.

El segundo modelo puesto a prueba evidenció que las cargas factoriales de los ítems no eran invariantes en ambas muestras; por lo tanto, no se continuó con el siguiente nivel de análisis, que imponía restricciones a la configuración del constructo, las cargas factoriales y las intersecciones de los ítems de la escala (M2). Estas diferencias en las saturaciones factoriales pueden ser explicadas por las diferencias en ambos grupos culturales y de manera concreta en las leves variaciones de idioma en ambos países, las cuales afectan de manera directa en la capacidad de discriminación de los ítems.

Las evidencias de fiabilidad de la escala demuestran que los ítems y los factores poseen una consistencia interna adecuada, que facilita su aplicación en ambos contextos culturales. El análisis de homogeneidad estimado a partir del coeficiente de correlación ítem total demostró adecuados niveles en cuanto al aporte de cada sentencia a la medición del constructo, sin embargo llama la atención el comportamiento del ítem 3 en la muestra colombiana –trabajo en las tareas escolares– (coeficiente de correlación ítem total=.218), que evidenció un ajuste más bajo respecto del resto de los ítems. Al respecto es necesario señalar que el punto de corte de .30 no es fijo y algunos autores sugieren que una correlación ítem total de .20 puede ser adecuada (Schmeiser & Welch, 2006).

Los resultados de esta investigación evidencian que el CECSCE en adolescentes chilenos y colombianos presenta la misma configuración y permite su utilización en estos contextos. Entre las limitaciones de este estudio se encuentra la muestra que, a pesar de ser amplia, debería ser probabilística y representativa de otras poblaciones que aporten evidencias para la generación de normas de baremación para facilitar la interpretación de las puntuaciones de la escala. Así también, sería relevante poder abarcar más estudios transculturales en Latinoamérica que permitan establecer la comparabilidad y estabilidad de los constructos teóricos entre los distintos países. Como futuras líneas de investigación se requieren estudios que consideren variables culturales y permitan explicar las diferencias en el grado de discriminación (saturaciones factoriales) de los ítems en ambos grupos culturales, de manera que permitan desarrollar modelos explicativos que consideren el rol de la cultura y su impacto en el grado de invarianza psicométrica de los instrumentos utilizados.

Agradecimientos

Este artículo reporta los resultados de una investigación original que ha sido financiada por la Dirección de Investigación de la Universidad de La Frontera. Proyecto DIUFRO n.o DI13-0027.

Referencias
[Agirdag et al., 2011]
O. Agirdag, J. Demanet, M. van Houtte, P. van Avermaet.
Ethnic school composition and peer victimization: A focus on the interethnic school climate.
International Journal of Intercultural Relations, 35 (2011), pp. 465-473
[Álvarez et al., 2006]
L. Álvarez, D. Álvarez-García, P. González-Castro, J.C. Núñez, J. González-Pienda.
Evaluación de los comportamientos violentos en los centros educativos.
Psicothema, 18 (2006), pp. 686-695
[Aron et al., 2012]
A.M. Aron, N. Milicic, I. Armijo.
Clima Social Escolar: una escala de evaluación. Escala de Clima Social Escolar, ECLIS.
Universitas Psychologica, 11 (2012), pp. 803-813
[Asparouhov and Muthén, 2013]
Asparouhov, T., & Muthén, B. (2013). Computing the strictly positive Satorra-Bentler chi-square test in Mplus. Mplus Web Notes: 12 [consultado 22 Ago 2014]. Recuperado de http://www.statmodel.com/examples/webnotes/SB5.pdf
[Astor et al., 2009]
R.A. Astor, R. Benbenisty, J.N. Estrada.
School violence and theoretically atypical schools: The principal's centrality in orchestrating safe schools.
American Educational Research Journal, 46 (2009), pp. 423-461
[Barboza et al., 2009]
G. Barboza, L. Schiamberg, J. Oehmke, S. Korzeniewski, L. Post, C. Heraux.
Individual characteristics and the multiple contexts of adolescent bullying: An ecological perspective.
Journal of Youth and Adolescence, 38 (2009), pp. 101-121
[Birkett et al., 2009]
M. Birkett, D.L. Espelage, B.W. Koenig.
LGB and questioning students in schools: The moderating effects of homophobic bullying and school climate on negative outcomes.
Journal of Youth and Adolescence, 38 (2009), pp. 989-1000
[Brown et al., 2010]
J.L. Brown, S.M. Jones, M.D. LaRusso, J.L. Aber.
Improving classroom quality: Teacher influences and experimental impacts of the 4rs program.
Journal of Educational Psychology, 102 (2010), pp. 153-167
[Browne and Cudeck, 1993]
M. Browne, R. Cudeck.
Alternative ways of assessing model fit.
Testing structural equation models.,
[Castro and Gaviria, 2006]
B. Castro, M.B. Gaviria.
Clima escolar y comportamientos psicosociales en niños.
Revista Facultad Nacional de Salud Pública, 23 (2006), pp. 59-69
[Cheung and Rensvold, 2002]
G.W. Cheung, R.B. Rensvold.
Evaluating goodness-of-fit indexes for testing measurement invariance.
Structural Equation Modeling, 9 (2002), pp. 233-255
[Cohen et al., 2009]
J. Cohen, L. McCabe, N. Michelli, T. Pickeral.
School climate: Research, policy, teacher education and practice.
Teachers College Record, 111 (2009), pp. 180-213
[Elías and Haynes, 2008]
M.J. Elías, N.M. Haynes.
Social competence, social support, and academic achievement in minority, low-income, urban elementary school children.
School Psychology Quarterly, 23 (2008), pp. 474-495
[Elosua and Zumbo, 2008]
P. Elosua, B.D. Zumbo.
Coeficientes de fiabilidad para escalas de respuesta categórica ordenada.
Psicothema, 20 (2008), pp. 896-901
[Fan et al., 2011]
W. Fan, C.M. Williams, D.M. Corkin.
A multilevel analysis of student perceptions of school climate: The effect of social and academic risk factors.
Psychology in the Schools, 48 (2011), pp. 632-647
[Finney and DiStefano, 2006]
S. Finney, C. DiStefano.
Non normal and categorical data in structural equation modeling.
Structural equation modeling. A second course, pp. 269-314
[Flora and Curran, 2004]
D.B. Flora, P.J. Curran.
An empirical evaluation of alternative methods of estimation for confirmatory factor analysis with ordinal data.
Psychological Methods, 9 (2004), pp. 466-491
[Gálvez et al., 2014]
J.L. Gálvez, J. Tereucán, S. Muñoz, C. Briceño, C. Mayorga.
Propiedades psicométricas del cuestionario para evaluar clima social del centro escolar (CECSCE).
Liberabit, 20 (2014), pp. 165-174
[Gálvez-Nieto et al., 2015a]
J.L. Gálvez-Nieto, D. Vera-Bachmann, I. Trizano.
Estudio confirmatorio del Cuestionario para Evaluar Clima Social del Centro Escolar en Chile.
Revista Mexicana de Psicología, 32 (2015), pp. 160-168
[Gálvez-Nieto et al., 2015b]
J.L. Gálvez-Nieto, D. Vera-Bachmann, I. Trizano, J.A. García.
Examen psicométrico de la Escala de Actitudes hacia la Autoridad Institucional (AAI-A), en estudiantes chilenos.
Revista Iberoamericana de Diagnóstico y Evaluación Psicológica, 39 (2015), pp. 57-67
[García, 2009]
B. García.
Las dimensiones afectivas de la docencia.
Revista Digital Universitaria, 10 (2009), pp. 1-14 [consultado 22 Jul 2014]
Recuperado de http://www.revista.unam.mx/vol.10/num11/art71/int71.htm
[García-Hierro and Cubo, 2009]
M. García-Hierro, S. Cubo.
Convivencia escolar en Secundaria: aplicación de un modelo de mejora del clima social.
Revista Electrónica Interuniversitaria de Formación del Profesorado, 12 (2009), pp. 51-62 [consultado 21 Jul 2014]
Recuperado de http://www.aufop.com/aufop/uploaded_files/articulos/1240872615.pdf
[Giovazolias et al., 2010]
T. Giovazolias, E. Kourkoutasb, E. Mitsopouloua, M. Georgiadib.
The relationship between perceived school climate and the prevalence of bullying behavior in Greek schools: Implications for preventive inclusive strategies.
Procedia Social and Behavioral Sciences, 5 (2010), pp. 2208-2215
[Giraldo and Mera, 2000]
L. Giraldo, R. Mera.
Clima social escolar: percepción del estudiante.
Colombia Médica, 31 (2000), pp. 23-27
[Gregory et al., 2012]
A. Gregory, D. Cornell, X. Fan.
Teacher safety and authoritative school climate in high schools.
American Journal of Education, 118 (2012), pp. 401-425
[Guerra et al., 2011]
C. Guerra, L. Castro, J. Vargas.
Examen psicométrico del Cuestionario de Clima Social del Centro Escolar en estudiantes chilenos.
Psicothema, 23 (2011), pp. 140-145
[Guerra et al., 2012]
C. Guerra, J. Vargas, L. Castro, H. Plaza, P. Barrera.
Percepción del clima escolar en estudiantes de enseñanza media de Valparaíso de colegios municipales, particulares subvencionados y particulares.
Estudios Pedagógicos, 37 (2012), pp. 103-115
[Hallinan et al., 2009]
M.T. Hallinan, W.N. Kubitschek, G. Liu.
Student interracial interactions and perceptions of school as a community.
Social Psychology of Education, 12 (2009), pp. 5-19
[Hombrados-Mendieta and Castro-Travé, 2013]
I. Hombrados-Mendieta, M. Castro-Travé.
Apoyo social, clima social y percepción de conflictos en un contexto educativo intercultural.
Anales de Psicología, 29 (2013), pp. 108-122
[Jia et al., 2009]
Y. Jia, N. Way, G. Ling, H. Yoshikawa, X. Chen, D. Hughes, et al.
The influence of student perceptions of school climate on socio-emotional and academic adjustment: A comparison of Chinese and American adolescents.
Child Development, 80 (2009), pp. 1514-1530
[Johnson, 2009]
S.L. Johnson.
Improving the school environment to reduce school violence: A review of the literature.
Journal of School Health, 79 (2009), pp. 451-465
[LaRusso et al., 2008]
M. LaRusso, D. Romer, R. Selman.
Teachers as builders of respectful school climates: Implications for adolescent drug use norms and depressive symptoms in high school.
Journal of Youth & Adolescence, 37 (2008), pp. 386-398
[LaRusso and Selman, 2011]
M. LaRusso, R. Selman.
Early adolescent health risk behaviors, conflict resolution strategies, and school climate.
Journal of Applied Developmental Psychology, 32 (2011), pp. 354-362
[Lee, 2009]
D. Lee.
The impact of resilience on the academic achievement of at-risk students in the upward bound program in Georgia.
Georgia Southern University, (2009),
(Tesis doctoral)
[Lee and Song, 2012]
C. Lee, J. Song.
Functions of parental involvement and effects of school climate on bullying behaviors among South Korean middle school students.
Journal of Interpersonal Violence, 27 (2012), pp. 2437-2464
[López et al., 2011]
V. López, M. Bilbao, J. Rodríguez.
La sala de clases sí importa: incidencia del clima de aula sobre la percepción de intimidación y victimización entre escolares.
Universitas Psychologica, 11 (2011), pp. 91-101
[López de Mesa-Melo et al., 2013]
C. López de Mesa-Melo, C.A. Carvajal-Castillo, M.F. Soto-Godoy, P.N. Urrea-Roa.
Factores asociados a la convivencia escolar en adolescentes.
Educación y Educadores, 16 (2013), pp. 383-410 [consultado 23 Ago 2014]
Recuperado de http://educacionyeducadores.unisabana.edu.co/index.php/eye/article/view/2716/3349
[Mardia, 1970]
K.V. Mardia.
Measures of multivariate skewnees and kurtosis with applications.
Biometrika, 57 (1970), pp. 519-530
[Muthén and Muthén, 2012]
L.K. Muthén, B.O. Muthén.
Mplus user's guide.
7.a ed., Muthén & Muthén, (1998-2012),
[Prado et al., 2010]
V.M. Prado, M.L. Ramírez, M.S. Ortiz.
Adaptación y validación de la escala de clima social escolar (CES).
Actualidades Investigativas en Educación, 10 (2010), pp. 1-13
[Richard et al., 2012]
J. Richard, B. Schneider, P. Mallet.
Revisiting the whole-school approach to bullying: Really looking at the whole school.
School Psychology International, 33 (2012), pp. 263-284
[Ruiz et al., 2014]
J.I. Ruiz, C. Bringas, F.J. Rodríguez-Díaz, E. García-Cueto.
Validación transcultural de una escala de Clima Emocional para ámbitos organizacionales penitenciarios (CEP).
Revista Latinoamericana de Psicología, 46 (2014), pp. 92-101
[Salvo et al., 2012]
Salvo, S., Moraga, A., Miranda, H., Ramírez, M., & Vera-Bachmann, D. (2012). Avanzando en la identificación de factores que explican un mejor rendimiento escolar en estudiantes y establecimientos chilenos, en las áreas de Matemática, Ciencias y Lenguaje: propuesta para el diseño de políticas públicas. Proyecto FONIDE n.o FE111007, Ministerio de Educación de Chile.
[Satorra and Bentler, 2001]
A. Satorra, P. Bentler.
A scaled difference chi-square test statistic for moment structure analysis.
Psychometrika, 66 (2001), pp. 507-514
[Schmeiser and Welch, 2006]
C.B. Schmeiser, C.J. Welch.
Test development.
Educational measurement, 4.a ed., pp. 307-353
[Schumacher and Lomax, 1996]
R. Schumacher, R. Lomax.
A beginner's guide to structural equation modeling.
Lawrence Erlbaum, (1996),
[Steffgen et al., 2013]
G. Steffgen, S. Recchia, W. Viechtbauer.
The link between school climate and violence in school: A meta-analytic review.
Aggresion and Violent Behavior, 18 (2013), pp. 300-309
[Thapa et al., 2013]
A. Thapa, J. Cohen, S. Guffey, A. Higgins-D’Alessandro.
A review of school climate research.
Review of Educational Research, 83 (2013), pp. 357-385
[Tijmes, 2012]
C. Tijmes.
Violencia y clima escolar en establecimientos educacionales en contextos de alta vulnerabilidad social de Santiago de Chile.
PSYKHE, 21 (2012), pp. 105-117
[Treviño et al., 2012]
E. Treviño, K. Place, R. Gempp.
Análisis del clima escolar: poderoso factor que explica el aprendizaje en América Latina y el Caribe.
UNESCO-OREALC, (2012),
[Trianes et al., 2006]
M. Trianes, M. Blanca, L. de la Morena, L. Infante, S. Raya.
Un cuestionario para evaluar el clima social del centro escolar.
Psicothema, 18 (2006), pp. 272-277
[Valdés et al., 2008]
H. Valdés, E. Treviño, C.G. Acevedo, M. Castro, S. Carrillo, R. Costilla, et al.
Los aprendizajes de los estudiantes de América Latina y el Caribe.
LLECE–OREALC/UNESCO, (2008),
[Vandenberg and Lance, 2000]
R. Vandenberg, C. Lance.
A review and synthesis of the measurement invariance literature: Suggestions, practices, and recommendations for organizational research.
Organizational Research Methods, 3 (2000), pp. 4-70
[Vera-Bachmann and Gálvez, 2014]
D. Vera-Bachmann, J. Gálvez.
Evaluación psicométrica de la escala de conducta delictiva y violenta en el aula, en estudiantes chilenos.
Liberabit, 20 (2014), pp. 325-334
[Waasdorp et al., 2011]
T.E. Waasdorp, E.T. Pas, L.M. O’brennan, C.P. Bradshaw.
A multilevel perspective on the climate of bullying: Discrepancies among students, school staff, and parents.
Journal of School Violence, 10 (2011), pp. 115-132
[Wang et al., 2010]
M.T. Wang, R.L. Selman, T.J. Dishion, E.A. Stormshak.
A Tobit regression analysis of the covariation between middle school students’ perceived school climate and behavioral problems.
Journal of Research on Adolescence, 20 (2010), pp. 274-286
Copyright © 2016. Fundación Universitaria Konrad Lorenz
Descargar PDF
Opciones de artículo