Psychometric analysis of an ultra-short measure for academic engagement: UWES-3S UWES-3S in college students
Main Article Content
Abstract
The aim was to analyze the equivalence between the 17- and 9-items versions of the Utrech Work Engagement Scale - Student (UWES-S) and the UWES-3S, from an internal analysis (association between versions) and external (associations with exhaustion emotional, academic self-efficacy and sex). The research was quantitative and instrumental. Were evaluated 497 university students (63.4% women; Mage = 20.44; SDage = 3.18) from various professional careers of a private university in Arequipa (region of southern Peru). The results shows that the UWES-9S and UWES-17S are invariant across men and women. Likewise, the association between the UWES-3S and the more extensive versions of the UWES was high (rcorrected > .80). On the other hand, the three versions presented significant associations with emotional exhaustion and academic self-efficacy (r > .20), as well as sex (d > .20), and the magnitude of each association in the UWES-3S did not differ statistically from the found in the other versions. In addition, the reliability indicators were satisfactory and similar (rij > .40). Then, the UWES-3S is an equivalent version to the extensive versions in Peruvian university students.
Article Details
This work is licensed under a Creative Commons Attribution 4.0 International License.
La RACC aplicará la licencia internacional de atribuciones comunes creativas (Reconocimiento 4.0 Internacional: https://creativecommons.org/licenses/by/4.0/).
Bajo esta licencia, se permite cualquier explotación de la obra, incluyendo la explotación con fines comerciales y la creación de obras derivadas, la distribución de las cuales también está permitida sin ninguna restricción. Esta licencia es una licencia libre según la Freedom Defined. La única condición es que siempre y en todos los casos se cite a los autores y a la fuente original de publicación (i.e., RACC). Esta licencia fue desarrollada para facilitar el acceso abierto, gratuito y libre a trabajos originales científicos y artísticos.
How to Cite
References
Alarcón, G. M. (2011). A meta-analysis of burnout with job demands, resources, and attitudes. Journal of Vocational Behavior, 79(2), 549-562. doi: 10.1016/j.jvb.2011.03.007
Asociación Médica Mundial (1964). Declaración de Helsinki. Recuperado de: http://www.conamed.gob.mx/prof_salud/pdf/helsinki.pdf
Asparouhov, T., & Muthén, B. (2006). Robust chi square difference testing with mean and adjusted test statistics. Recuperado de: https://www.statmodel.com/download/webnotes/webnote10.pdf
Ato, M., López, J., & Benavente, A. (2013). Un sistema de clasificación de los diseños de investigación en psicología. Anales de Psicología, 29(3), 1038-1059. doi: 10.6018/analesps.29.3.178511
Bakker, A. B., Albrecht, S. L., & Leiter, P. (2011). Key questions regarding work engagement. European Journal of Work and Organizational Psychology, 20(1), 4-28. doi: 10.1080/1359432X.2010.485352
Bakker, A. B., Demerouti, E., & Sanz-Vergel, A. I. (2014). Burnout and Work Engagement: The JD–R Approach. Annual Review of Organizational Psychology and Organizational Behavior, 1(1), 389–411. doi: 10.1146/annurev-orgpsych-031413-091235
Caballero, C. C., González, O., & Palacio, J. (2015). Relación del burnout y el engagement con depresión, ansiedad y rendimiento académico en estudiantes universitarios. Salud Uninorte, 31(1), 59-69. doi: 10.14482/sun.31.1.5085
Caballero, C. C., Hederich, C., & García, A. (2015). Relación entre burnout y engagement académicos con variables sociodemográficas y académicas. Psicología desde el Caribe, 32(2), 254-267. doi: 10.14482/psdc.32.2.5742
Cavazos, J., & Encinas, F. (2016). Influencia del engagement académico en la lealtad de estudiantes de posgrado: un abordaje a través de un modelo de ecuaciones estructurales. Estudios Gerenciales, 32(140), 228–238. doi: 10.1016/j.estger.2016.07.001
Carmona-Halty, M. A., Schaufeli, W. B., & Salanova, M. (2019). The Utrecht Work Engagement Scale for Students (UWES–9S): Factorial Validity, Reliability, and Measurement Invariance in a Chilean Sample of Undergraduate University Students. Frontiers in Psychology, 10, 1017. doi: 10.3389/fpsyg.2019.01017
Chen, F. F. (2007). Sensitivity of goodness of fit indexes to lack of measurement invariance. Structural Equation Modeling, 14(3), 464-504. doi: 10.1080/10705510701301834
Clark, L. A., & Watson, D. (1995). Constructing validity: Basic issues in objective scale development. Psychological Assessment, 7(3), 309-319. doi: 10.1037/1040-3590.7.3.309
Cohen, J. (1992). A power primer. Psychological Bulletin, 112(1), 155–159. doi: 10.1037//0033-2909.112.1.155
Colegio de Psicólogos del Perú (2017). Código de ética y deontología. Recuperado de: https://www.cpsp.pe/documentos/marco_legal/codigo_de_etica_y_deontologia.pdf
DiStefano, C., Liu, J., Jiang, N., & Shi, D. (2018). Examination of the weighted root mean square residual: Evidence for trustworthiness? Structural Equation Modeling: A Multidisciplinary Journal, 25(3), 453-466. doi: 10.1080/10705511.2017.1390394
Dominguez-Lara, S. (2016). Valores normativos de una escala de autoeficacia académica en estudiantes universitarios de Lima. Interacciones, 2(2), 91-98. doi: 10.24016/2016.v2n2.31
Dominguez-Lara, S., & Merino-Soto, C. (2019). Medición con ítem único del agotamiento emocional académico en estudiantes universitarios peruanos: evidencias de validez y confiabilidad. Revista Iberoamericana de Diagnóstico y Evaluación – e Avaliação Psicológica, 50(1), 45-56. doi: 10.21865/RIDEP50.1.04
Dominguez-Lara, S., Sánchez-Villena, A., & Fernández-Arata, M. (2020). Psychometric properties of the UWES-9S in Peruvian college students. Acta Colombiana de Psicología, 23(2), 7-23. doi: 10.14718/ACP.2020.23.2.2.
Dominguez-Lara, S., Fernández-Arata, M., Manrique-Millones, D., Alarcón-Parco, D., & Díaz-Peñaloza, M. (2018). Datos normativos de una escala de agotamiento emocional académico en estudiantes universitarios de psicología de Lima (Perú). Educación Médica, 19(3), 246-255. doi: 10.1016/j.edumed.2017.09.002
Fontana, S. (2011). Estudio preliminar de las propiedades psicométricas de la escala de desgaste emocional para estudiantes universitarios. Revista Argentina de Ciencias del Comportamiento, 3(2), 44-48. doi: 10.32348/1852.4206.v3.n2.5227
Fuentes, F., & Sánchez, S. (2010). Análisis del perfil emprendedor: una perspectiva de género. Estudios de Economía Aplicada, 28(3), 1-28.
García-Renedo, M., Llorens, S., Cifré, E., & Salanova, M. (2006). Antecedentes afectivos de la autoeficacia docente: un modelo de relaciones estructurales. Revista de Educación, 339, 387-400.
Gignac, G. E., & Kretzschmar, A. (2017). Evaluating dimensional distinctness with correlated-factor models: Limitations and suggestions. Intelligence, 62, 138 - 147. doi: 10.1016/j.intell.2017.04.001
Guadalupe, C., León, J., Rodríguez, J. S., & Vargas, S. (2017). Estado de la Educación en el Perú. Análisis y perspectivas de la educación básica. Lima: GRADE.
Hinrichs, C., Ortíz, L., & Pérez, C. (2016). Relación entre el bienestar académico de estudiantes de kinesiología de una universidad tradicional de Chile y su percepción del ambiente educacional. Formación Universitaria, 9(1), 109-116. doi: 10.4067/S0718-50062016000100012
Hobfoll, S. (1989). Conservation of resources: A new attempt at conceptualizing stress. American Psychologist, 44(3), 513–524. doi: 10.1037/0003-066X.44.3.513
Kruyen, P. M., Emons, W. H. M., & Sijtsma K. (2013). On the shortcoming of shortened tests: a literature review. International Journal of Testing, 13(3), 223-248. doi: 10.1080/15305058.2012.703734
Kulikowski, K. (2017). Do we all agree on how to measure work engagement? Factorial validity of Utrecht Work Engagement Scale as a standard measurement tool – a literature review. International Journal of Occupational Medicine and Environmental Health, 30(2), 161–175. doi: 10.13075/ijomeh.1896.00947
Leon, M. R., Halbesleben, J. R. B., & Paustian-Underdahl, S. C. (2015). A dialectical perspective on burnout and engagement. Burnout Research, 2(2-3), 87–96. doi: 10.1016/j.burn.2015.06.002
Levy, P. (1967). The correction for spurious correlation in the evaluation of short-form tests. Journal of Clinical Psychology, 23(1), 84-86. doi: 10.1002/1097-4679(196701)23:1<84::aid-jclp2270230123>3.0.co;2-2
Lovakova, A. V., Agadullina, E. R., & Schaufeli, W. B. (2017). Psychometric properties of the Russian version of the Utrecht Work Engagement Scale (UWES-9). Psychology in Russia: State of the Art, 10(1), 145-162. doi: 10.11621/pir.2017.0111
Martínez, I., & Marques, A. (2005). Burnout en estudiantes universitarios de España y Portugal y su relación con variables académicas. Aletheia, 21, 21-30.
Martínez, I., & Salanova, M. (2003). Niveles de burnout y engagement en estudiantes universitarios. Relación con el desempeño y desarrollo profesional. Revista de educación, 330(1), 331-384.
Maslach, C., & Leiter, M. P. (1997). The truth about burnout. San Francisco, CA: Jossey-Bass.
McDonald, R. P., & Ho, M.-H. R. (2002). Principles and practice in reporting structural equation analyses. Psychological Methods, 7(1), 64–82. doi: 10.1037/1082-989X.7.1.64
Medrano, L. A., Moretti, L., & Ortiz, A. (2015). Medición del engagement académico en estudiantes universitarios. Revista Iberoamericana de Diagnóstico y Evaluación-e Avaliação Psicológica, 2(40), 114-124.
Meng, L., & Jin, Y. (2017). A confirmatory factor analysis of the Utrecht Work Engagement Scale for students in a Chinese sample. Nurse Education Today, 49, 129-134. doi: 10.1016/j.nedt.2016.11.017
Merino-Soto, C., Dominguez-Lara, S., & Fernández-Arata, M. (2017). Validación inicial de una Escala Breve de Satisfacción con los Estudios (EBSE) en estudiantes universitarios de Lima. Educación Médica, 18(1), 74-77. doi: 10.1016/j.edumed.2016.06.016
Mills, M. J., Culbertson, S. S., & Fullagar, C. J. (2012). Conceptualizing and measuring engagement: An analysis of the Utrecht Work Engagement Scale. Journal of Happiness Studies, 13(3), 519-545. doi: 10.1007/s10902-011-9277-3
Moreta-Herrera, R., Lara-Salazar, M., Camacho-Bonilla, P., & Sánchez-Guevera, S. (2019). Análisis factorial, fiabilidad y validez de la escala de autoeficacia general (EAG) en estudiantes ecuatorianos. Psychology, Society, & Education, 11(2), 193-204. doi: 10.25115/psye.v10i1.2024
Muthén, L. K., & Muthén, B. O. (1998-2015). Mplus User’s guide (7th ed.). Los Angeles, CA: Muthén & Muthén.
Nikodijević, A., Labrović, J. A., & Đoković, A. (2012). Academic Burnout Among Students at Faculty of Organizational Sciences. Education Management, 64, 565–570. doi: 10.7595/management.fon.2012.0019
Organización para la Cooperación y el Desarrollo Económicos, OCDE. (2015). Education at a glance interim report: Update of employment and educational attainment indicators. OCDE: París. Recuperado de: www.oecd.org/edu/EAG-Interim-report.pdf.
Palenzuela, D. (1983). Construcción y validación de una escala de autoeficacia percibida específica de situaciones académicas. Análisis y Modificación de Conducta, 9(21), 185-219. doi: 10.33776/amc.v9i21.1649
Parada, M., & Pérez, C. (2014). Relación del engagement académico con características académicas y socioafectivas en estudiantes de Odontología. Educación Médica Superior, 28(2), 199-215.
Pendergast, L. L., von der Embse, N., Kilgus, S. P., & Eklund, K. R. (2017). Measurement equivalence: A non-technical primer on categorical multi-group confirmatory factor analysis in school psychology. Journal of School Psychology, 60, 65-82. doi: 10.1016/j.jsp.2016.11.002
Ponterotto, J. G., & Charter R. A. (2009). Statistical extensions of Ponterotto and Ruckdeschel´s (2007) reliability matriz for estimating the adequacy of internal consistency coefficients. Perceptual and Motor Skills, 108(3), 878–886. doi: 10.2466/PMS.108.3.878-886
Rammstead, B., & Beierlein, C. (2014). Can’t we make it any shorter? Journal of Individual Differences, 35(4), 212–220. doi: 10.1027/1614-0001/a000141
Raykov, T. (2012). Evaluation of latent construct correlations in the presence of missing data: a note on a latent variable modelling approach. The British Journal of Mathematical and Statistical Psychology, 65(1), 19–31. doi: 10.1348/000711010X498162
Rodriguez, A., Reise, S. P., & Haviland, M. G. (2016). Applying bifactor statistical indices in the evaluation of psychological measures. Journal of Personality Assessment, 98(3), 223-237. doi: 10.1080/00223891.2015.1089249
Salanova, M., Bresó, E., & Schaufeli, W. B. (2005). Hacia un modelo espiral de las creencias de eficacia en el estudio del burnout y del engagement. Ansiedad y Estrés, 11(2-3), 215-231.
Sánchez-Herrero, S., Sánchez-López, M., & Dresch, V. (2009). Hombres y trabajo doméstico: variables demográficas, salud y satisfacción. Anales de Psicología, 25(2), 299-307.
Saucier, G. (1994). Mini-markers: A brief version of Goldberg´s unipolar Big-Five markers. Journal of Personality Assessment, 63(3), 506-516. doi: 10.1207/s15327752jpa6303_8
Schaufeli, W., & Bakker, A. B. (2003). UWES Utrecht Work Engagement Scale. Utrecht: Utrecht University. Recuperado de: https://www.wilmarschaufeli.nl/publications/Schaufeli/Test%20Manuals/Test_manual_UWES_Espanol.pdf
Schaufeli, W. B., & Bakker, A. (2010). Defining a measuring work engagement: Bringing clarity to the concept. En A. B. Bakker & M. P. Leiter (Eds.), Work engagement: A handbook of essential theory and research (pp. 10-24). New York: Psychology Press.
Schaufeli, W. B., & De Witte, H. (2017). Work Engagement in Contrast to Burnout: Real or Redundant? Burnout Research, 5, 1-2. doi: 10.1016/j.burn.2017.06.001
Schaufeli, W. B., & Salanova, M. (2007). Efficacy or inefficacy, that’s the question: Burnout and engagement, and their relationships with efficacy beliefs. Anxiety, Coping & Stress, 20(2),177-196. doi: 10.1080/10615800701217878
Schaufeli, W. B., & Salanova, M. (2011). Work engagement: On how to better catch a slippery concept. European Journal of Work and Organizational Psychology, 20(1), 39-46. doi: 10.1080/1359432X.2010.515981
Schaufeli, W. B., Bakker, A. B., & Salanova, M. (2006). The measurement of work engagement with a short questionnaire: a cross–national study. Educational and Psychological Measurement, 66(4), 701–716. doi: 10.1177/0013164405282471
Schaufeli, W. B., Martinez, I. M., Marques–Pinto, A., Salanova, M., & Bakker, A. (2002). Burn out and engagement in university students: a cross–national study. Journal of Cross-Cultural Psychology, 33(5), 464–481. doi: 10.1177/0022022102033005003
Schaufeli, W. B., Shimazu, A., Hakanen, J., Salanova, M., & De Witte, H. (2019). An ultra-short measure for work engagement: The UWES-3 validation across five countries. European Journal of Psychological Assessment, 35(4), 577–591. doi: 10.1027/1015-5759/a000430
Serrano, C., Andreu, Y., Murgui, S., & Martínez, P. (2019). Psychometric properties of Spanish version student Utrecht Work Engagement Scale (UWES–S–9) in high-school students. The Spanish Journal of Psychology, 22, e21. doi: 10.1017/sjp.2019.25.
West, S. G., Taylor, A. B., & Wu, W. (2012). Model fit and model selection in structural equation modeling. En R. H. Hoyle (Ed.), Handbook of Structural Equation Modeling (pp. 209–231). New York, NY: Guilford.
Ziegler, M., Kemper, C. J., & Kruyen, P. (2014). Short-scales- Five misunderstandings and ways to overcome them. Journal of Individual Differences, 35(4), 185–189. doi: 10.1027/1614-0001/a000148
Zou, G. (2007). Toward using confidence intervals to compare correlations. Psychological Methods, 12(4), 399-413. doi: 10.1037/1082-989X.12.4.399