Evidencias de validez del Cuestionario de Evaluación de la Competencia Docente Universitaria
Barra lateral del artículo
Contenido principal del artículo
Resumen
El propósito del artículo es presentar la estrategia metodológica seguida para la obtención de evidencias de validez de la estructura interna del Cuestionario de Evaluación de la Competencia Docente (CECD) con base en la opinión de los estudiantes. El CECD se aplicó a muestras representativas de estudiantes de licenciatura de dos universidades mexicanas (n1=511 y n2=503) y se utilizó el análisis factorial confirmatorio como procedimiento analítico. La modelización confirmatoria incluyó la identificación del modelo, la especificación del modelo, la selección de medidas, la evaluación de los criterios de calidad de ajuste y la modificación del modelo de medición. Los resultados permitieron confirmar el ajuste del modelo hipotético con el sustento del CECD; se observó una estructura bifactorial con índices de ajuste aceptables e índices de consistencia interna superiores a .90 en ambas muestras. El sustento teórico y empírico del CECD avala su utilización en los ámbitos universitarios descritos.
Descargas
Detalles del artículo
© 2020 Universidad Nacional Autónoma de México, Instituto de Investigaciones sobre la Universidad y la Educación. Este es un artículo Open Access bajo la licencia CC BY-NC-ND (http://creativecommons.org/licenses/by-nc-nd/4.0/).
Citas
American Educational Research Association/American Psychological Association/National Council on Measurement in Education (2014), Standars for Educational and Psychological Testing, Washington, DC, American Educational Research Association.
Andrade-Abarca, Paola, Lizeth Ramón-Jaramillo y María Loaiza-Aguirre (2018), “Aplicación del SEEQ como instrumento para evaluar la actividad docente universitaria”, Revista de Investigación Educativa, vol. 26, núm. 1, pp. 259-275. DOI: http://doi.org/10.6018/rie.36.1.260741
Arbuckle, James (2013), IBM SPSS Amos 22 User’s Guide, Chicago, Amos Development Corporation.
Batista, Joan y Gema Coenders (2012), Modelos de ecuaciones estructurales, Madrid, La Muralla.
Benton, Stephen y Dan Li (2015), “Validity and Reliability of IDEA ‘Teaching Essentials’”, IDEA, en: https://eric.ed.gov/?id=ED573675 (consulta: 8 de diciembre de 2019).
Benton, Stephen, Dan Li, Ron Brown, Meixi Guo y Patricia Sullivan (2015), “Revising the IDEA Student Ratings of Instruction System: 2002–2011 Data”, IDEA, en: https://www.ideaedu.org/Portals/0/Uploads/Documents/Technical-Reports/Revising-the-IDEA-Student-Ratings-of-Instruction-System-2002-2011-Data_Technical_report_18.pdf (consulta: 8 de diciembre de 2019).
Borsboom, Denny (2006), “The Attack of the Psychometricians”, Psychometrika, vol. 71, núm. 3, pp. 425-440. DOI: https://doi.org/10.1007/s11336-006-1447-6
Boysen, Guy (2016), “Using Student Evaluations to Improve Teaching: Evidence-based recommendations”, Scholarship of Teaching and Learning in Psychology, vol. 2, núm. 4, pp. 273-284. DOI: https://doi.org/10.1037/stl0000069
Brennan, Robert (2013), “Commentary on Validating the Interpretations and Uses of Test Scores”, Journal of Educational Measurement Spring, vol. 50, núm. 1, pp. 74-83.
Bujanda, Elena (2017), “Diseño de un cuestionario de competencias docentes del profesorado de Formación Profesional de la Familia, Servicios Socioculturales y a la Comunidad”, Revista de Educación Social, núm. 24, pp. 1163-1178.
Byrne, Barbara y Fons Van de Vijver (2010), “Testing for Measurement and Structural Equivalence in Large-Scale Cross-Cultural Studies: Addressing the issue of nonequivalence”, International Journal of Testing, vol. 10, núm. 2, pp. 107-132. DOI: https://doi.org/10.1080/15305051003637306
Cano, Elena (2015), “Las rúbricas como instrumentos de evaluación de competencias en educación superior: ¿uso o abuso?”, Profesorado. Revista de Currículum y Formación del Profesorado, vol. 19, núm. 2, pp. 265-280.
Cisneros-Cohernour, Edith, Benilde García-Cabrero, Edna Luna y Rigoberto Marín (2012), Evaluación de competencias docentes en la educación superior, México, Red para el Desarrollo y Evaluación de Competencias Académicas/Juan Pablos Editor.
Córdova, Alfredo, Julia Moreno, Mihaela Stegaru y Carlos Staff (2015), “Construcción de un instrumento para evaluar competencias profesionales durante la formación preclínica en Medicina”, Investigación en Educación Médica, vol. 4, núm. 15, pp. 145-154. DOI: https://doi.org/10.1016/j.riem.2015.01.001
Denyer, Monique, Jacques Furnemont, Roger Poulain y Georges Vanloubbeeck (2007), Las competencias en la educación, un balance, México, Fondo de Cultura Económica.
Felman, Kenneth (2007), “Identifying Exemplary Teachers and Teaching: Evidence from student ratings”, en Raymond Perry y John Smart (eds.), The Scholarship of Teaching and Learning in Higher Education: An evidence-based perspective, Dordrecht, Springer, pp. 93-129.
Fernández Nogales, Ángel (1998), Investigación de mercados: obtención de información, Madrid, Ed. Civitas, Biblioteca Civitas Economía y Empresa, colección Empresa.
García-Cabrero, Benilde, Javier Loredo y Guadalupe Carranza (2008a), “Análisis de la práctica educativa de los docentes: pensamiento, interacción y reflexión”, Revista Electrónica de Investigación Educativa, vol. 10, núm. especial, pp. 1-15, en: http://redie.uabc.mx/NumEsp1/contenido-garcialoredocarranza.html (consulta: 8 de diciembre de 2019).
García-Cabrero, Benilde, Javier Loredo, Guadalupe Carranza, Alma Elena Figueroa, Isabel Arbesú, Miguel Monroy y Rafael Reyes (2008b), “Las aproximaciones teórico-metodológicas en los trabajos de la RIED: consideraciones en torno a la construcción de un modelo de evaluación de la práctica docente”, en Mario Rueda (ed.), La evaluación de los profesores como recurso para mejorar su práctica, México, UNAM-IISUE/Plaza y Valdés, pp. 162-220.
García-Cabrero, Benilde, Javier Loredo, Edna Luna y Mario Rueda (2014), Competencias docentes en educación media y superior. Desarrollo y validación de un modelo de evaluación, México, UABC/Juan Pablos Editor.
Gargallo, Bernardo, Jesús Suárez, Pedro Garfella y Amparo Fernández (2011), “El cuestionario CEMEDEPU. Un instrumento para la evaluación de la metodología docente y evaluativa de los profesores universitarios”, Estudios sobre Educación, vol. 21, pp. 9-40.
Gonzáles, Julia y Robert Wawenaar (eds.) (2003), Tunning Educational Structures in Europe. Informe final. Fase uno, Bilbao, Universidad de Deusto, en: http://tuningacademy.org/wp-content/uploads/2014/02/TuningEUI_Final-Report_SP.pdf (consulta: 8 de diciembre de 2019).
Guardia, Joan (2016), “Esquema y recomendaciones para el uso de los Modelos de Ecuaciones Estructurales”, Revista de Estudios e Investigación en Psicología y Educación, vol. 3, núm. 2, pp. 75-80. DOI: https://doi.org/10.17979/reipe.2016.3.2.1847
Gunnell, Katie, Philip Wilson, Bruno Zumbo, Diane Mack y Peter Crocker (2012), “Assesing Psychological Nedd Satisfaccion in Exercise Contexts: Issues of score invariance, item modification, and context”, Measurement in Physical Education and Exercise Science, vol. 16, núm. 3, pp. 219-236.
Hair, Joseph, William Black, Barry Babin y Rolph Anderson (2010), Multivariate Data Analysis, New Jersey, Pearson Prentice Hall.
Hooper, Daire, Joseph Coughlan y Michael Mullen (2008), “Structural Equation Modelling: Guidelines for determining model fit”, Electronic Journal of Business Research Methods, vol. 6, núm. 1, pp. 53-60.
Hornstein, Henry (2017), “Student Evaluations of Teaching are an Inadequate Assessment Tool for Evaluating Faculty Performance”, Cogent Education, vol. 4, núm. 1. DOI: https://doi.org/10.1080/2331186X.2017.1304016
House, Ernest (1998), “Acuerdos institucionales para la evaluación”, Perspectivas, vol. 28, núm. 1, pp. 123-131.
Hu, Li-tze y Peter Bentler (1999), “Cutoff Criteria for Fit Indexes in Covariance Structure Analysis: Conventional criteria versus new alternatives”, Structural Equation Modeling, vol. 6, núm. 1, pp. 1-55. DOI: https://doi.org/10.1080/10705519909540118
Kim, Kevin y Peter Bentler (2006), “Data Modeling: Structural equation modeling”, en Judith Green, Gregory Camili y Patricia Elmore (eds.), Handbook of Complementary Methods in Education Research, Nueva York, American Education Research Association, pp. 161-175. DOI: https://doi.org/10.4324/9780203874769
Kline, Rex (2016), Principles and Practice of Structural Equation Modeling, Nueva York, Guillford Press.
Linse, Angela (2017), “Interpreting and Using Student Ratings Data: Guidance for faculty serving as administrators and on evaluation committees”, Studies in Educational Evaluation, vol. 54, pp. 94-106.
Luna, Edna (2010), “Aspectos implícitos sobre la enseñanza reflejados en los cuestionarios de evaluación de la docencia”, en Mario Rueda y Frida Díaz-Barriga Arceo (eds.), Evaluación de la docencia. Perspectivas actuales, México, Paidós, pp. 63-83.
Luna, Edna y Erika Reyes (2015), “Validación de constructo de un cuestionario de evaluación de la competencia docente”, Revista Electrónica de Investigación Educativa, vol. 17, núm. 3, pp. 13-27, en: http://redie.uabc.mx/vol17no3/contenido-luna-pinuelas.html (consulta: 8 de diciembre de 2019).
Marsh, Herbert (2007), “Students’ Evaluations of University Teaching: Dimensionality, reliability, validity, potential biases and usefulness”, en Raymond Perry y John Smart (eds.), The Scholarship of Teaching and Learning in Higher Education: An evidence-based perspective, Dordrecht, Springer, pp. 319-383.
Messick, Samuel (1995), “Validity of Psychological Assessment, Validation of Inferences from Person´s Responses and Performances as Scientific Inquiry into Score Meaning”, American Psychologist, vol. 50, núm. 9, pp. 741-749.
Moreno, Tiburcio (2018), “La evaluación docente en la universidad: visiones de los alumnos”, REICE. Revista Iberoamericana sobre Calidad, Eficacia y Cambio en Educación, vol. 16, núm. 3, pp. 87-101. DOI: https://doi.org/10.15366/reice2018.16.3.005
Muñiz, José y Eduardo Fonseca-Pedrero (2008), “Construcción de instrumentos de medida para la evaluación universitaria”, Revista de Investigación en Educación, vol. 5, pp. 13-25.
Organisation for Economic Co-operation and Development (OECD) (2002), Definition and Selection of Competencies: Theoretical and conceptual foundations (DeSeCo) Annual Report, París, OECD, en: https://deseco.ch/bfs/deseco/en/index/01.parsys.70925.downloadList.59988.DownloadFile.tmp/2001annualreport.pdf (consulta: 8 de diciembre de 2019).
Ortiz Uribe, Frida (2016), Diccionario de metodología de la investigación científica, Madrid, Limusa.
Red Iberoamericana de Investigadores de la Evaluación de la Docencia (2008), “Reflexiones sobre el diseño y puesta en marcha de programas de evaluación de la docencia”, Revista Iberoamericana de Evaluación Educativa, vol. 1, núm. 3, pp. 163-168.
Rios, Joseph y Craig Wells (2014), “Validity Evidence Based on Internal Structure”, Psicothema, vol. 26, núm. 1, pp. 108-16. DOI: https://doi.org/10.7334/psicothema2013.260
Royal, Kenneth (2017), “A Guide for Making Valid Interpretations of Student Evaluation of Teaching (SET) Results”, Journal of Veterinary Medical Education, vol. 44, núm. 2, pp. 316-322, en: https://jvme.utpjournals.press/doi/abs/10.3138/jvme.1215-201R (consulta: 8 de diciembre de 2019).
Ruíz, Miguel, Antonio Pardo y Rafael San Martín (2010), “Modelos de ecuaciones estructurales”, Papeles del Psicólogo, vol. 31, núm. 1, pp. 34-45.
Schreiber, James, Amaury Nora, Frances Stage, Elizabeth Barlow y Jamie King (2006), “Reporting Structural Equation Modeling and Confirmatory Factor Analysis Results: A review”, The Journal of Educational Research, vol. 99, núm. 6, pp. 323-337.
Spooren, Pieter, Bert Brockx y Dimitri Mortelmans (2013), “On the Validity of Student Evaluation of Teaching”, Review of Educational Research, vol. 83, núm. 4, pp. 598-642. DOI: https://doi.org/10.3102/0034654313496870
Van Der Schaaf, Marieke, Bert Slof, Leonie Boven y Angela de Jong (2019), “Evidence for Measuring Teachers’ Core Practices”, European Journal of Teacher Education, vol. 42, núm. 5, pp. 675-694. DOI: https://doi.org/10.1080/02619768.2019.1652903