Desarrollo y Validación de un Instrumento para Evaluar la Práctica Docente en Educación Preescolar
Resumen
Actualmente se reconoce que la calidad de la enseñanza contribuye a elevar los aprendizajes de los niños, por ello se tiene un interés creciente en evaluar de forma eficiente y precisa lo que realizan los docentes en las aulas. Este artículo da cuenta de las evidencias de validez de contenido y constructo de un instrumento para evaluar la práctica docente en educación preescolar, así como la consistencia de la medición y del proceso de observación. El instrumento en su versión más acabada se compone de 30 rúbricas divididas en tres dimensiones: planeación, intervención y evaluación. Para ello se analiza la planeación didáctica y la práctica docente en el aula. La información brindada por el instrumento logró una alta consistencia interna y buen ajuste al modelo de Rasch. El análisis factorial exploratorio permitió identificar tres factores subyacentes, con diferencias respecto a la estructura teórica. Los análisis para identificar la confiabilidad entre los observadores, Kappa cuadrática ponderada y análisis de la varianza a partir de la Teoría de la Genereralizabilidad ofrecieron resultados coincidentes: adecuada consistencia en las distintas observaciones.
Palabras clave: Evaluación docente, Educación preescolar, Observación sistemática, Rúbricas, Confiabilidad, Validez.
Development and Validation of an Instrument for Evaluating the Teaching Practice in Early Childhood Education
This article reports the content and construct-related validity evidence of an instrument for evaluating teaching practice in early childhood education. In addition, it shows evidence of the consistency of measurement and observation process. The instrument consists of 30 rubrics divided into three dimensions: planning, intervention and evaluation. To do this, the planning and the teaching practice is analyzed. The information provided by the instrument achieved a high internal consistency and a good fit to the Rasch model. Exploratory factor analysis identified three underlying factors, with differences in the theoretical structure. Analyses to identify reliability among observers, quadratic weighted Kappa and analysis of variance based on the generalizability theory, showed consistent results: proper consistency among the different observations. Further analyses are needed with a larger sample of examinees, in order to confirm the factorial structure and adjust the instrument to increase its accuracy
Keywords: Teacher Evaluation; Early childhood education; Measurement of instruction; Rubrics, Validity.
Descargas
Citas
Arter, J. A. (2010). Scoring rubrics. En P. Peterson, E. Baker y B. McGaw (Eds.), International encyclopedia of education (pp. 123-139). Nueva York, NY: Elsevier.
Basto, M. y Pereira, J. M. (2012). An SPSS R-menu for ordinal factor analysis. Journal of Statistical Software, 46(4), 1-29. doi:10.18637/jss.v046.i04
Centra, J. A. (1993). Reflective faculty evaluation. San Francisco, CA: Jossey-Bass.
Darling-Hammond, L. (2012). Desarrollo de un enfoque sistémico para evaluar la docencia y fomentar una enseñanza eficaz. Pensamiento Educativo: Revista de Investigación Educacional Latinoamericana, 49(2), 1-20. doi:10.7764/PEL.49.2.2012.1
Diario Oficial de la Federación [DOF], (2010). Ley Federal de Protección de Datos Personales en Posesión de Particulares. Recuperado de: http://www.diputados.gob.mx/LeyesBiblio/pdf/LFPDPPP.pdf
Frías-Navarro, D. y Pascual Soler, M. (2012). Prácticas del análisis factorial exploratorio (AFE) en la investigación sobre conducta del consumidor y marketing. Suma Psicológica, 19(1), 47-58.
García, B., Loredo, J., Luna, E. y Rueda, M. (2008). Modelo de evaluación de competencias docentes para la educación media y superior. Revista Iberoamericana de Evaluación Educativa, 1(3), 124-136.
Hamre, B., Pianta, R., Downer, J., DeCoster, J., Mashburn, A., Jones, S. y Hamagami, A. (2013). Teaching through interactions: Testing a developmental framework of teacher effectiveness in over 4,000 classrooms. The Elementary School Journal, 113(4), 461-487. doi:10.1086/669616
Harms, T., Clifford, R. y Debby C. (1988). Early Childhood Environment Rating Scale, Revised Edition (ECERS-R). Williston, VT: Teachers College Press.
Gordon, R. A., Hofer, K. G., Fujimoto, K. A., Risk, N., Kaestner, R. y Korenman, S. (2015). Identifying high-quality preschool programs: New evidence on the validity of the Early Childhood Environment Rating Scale–Revised (ECERS-R) in relation to school readiness goals. Early Education and Development, 26(8), 1086-1110. doi:10.1080/10409289.2015.1036348
Jornet, J. M., González Such, J. y Suárez, J. M. y Perales, M. J. (2011). Diseño de procesos de evaluación de competencias: Consideraciones acerca de los estándares en el dominio de las competencias. Revista Bordón, 63(1), 125-145.
Landis, J. R. y Koch, G. G. (1977). The measurement of observer agreement for categorical data. Biometrics, 33(1), 159-174. doi:10.2307/2529310
Linacre, J. M. (2007). A user's guide to Winsteps Ministeps: Rasch-model computer programs. Chicago, IL: Electronic Publication.
Masters, G. N. (1982). A Rasch model for partial credit scoring. Psychometrika, 47(2), 149-174. doi:10.1007/bf02296272
Martínez, J. F., Borko, H. y Stecher, B. M. (2012). Measuring instructional practice in science using classroom artifacts: Lessons learned from two validation studies. Journal of Research in Science Teaching, 49(1), 38-67. doi:10.1002/tea.20447
Millis, B. J. (2006). Peer observations as a catalyst for faculty development. En P. Seldin (Ed.), Evaluating faculty performance. A practical guide to assessing teaching, research, and service (pp. 82-95). San Francisco, CA: Anker Publishing Compay.
Myers, R., Martínez J. F. & Linares M.E., (2003). En Búsqueda de la Calidad Educativa en Centros Preescolares. Informe presentado a la Secretaría de Educación Pública. Dirección General de Investigación Educativa. Hacia una Cultura Democrática, A.C. México, D.F. Documento no publicado.
Pedroza, L. H., Álvarez, A. C. y Jiménez, A. B. (2013). La implementación del PEP 2004 en las aulas. En INEE (Eds.), Prácticas pedagógicas y desarrollo profesional docente en Preescolar (pp. 15-57). Ciudad de México: Instituto Nacional para la Evaluación de la Educación.
Pedroza, L. H., Vilchis, J. E., Álvarez, A. C., López, A. Y. y García, M. A. (2013). Prácticas pedagógicas y desarrollo profesional docente en preescolar. Reporte técnico. Ciudad de México: Instituto Nacional para la Evaluación de la educación. Recuperado de http://publicaciones.inee.edu.mx/buscadorPub//P1/D/240/P1D240_13E13.pdf
Pianta, R. C. y Hamre, B. K. (2009). Conceptualization, measurement, and improvement of classroom processes: Standardized observation can leverage capacity. Educational Researcher, 38(2), 109–119. doi:10.3102/0013189x09332374
Secretaría de Educación Pública (SEP). (2006). La implementación de la reforma curricular en la educación preescolar: Orientaciones para fortalecer el proceso en las entidades federativas. Programa de Renovación Curricular y Pedagógica en la Educación Preescolar. Ciudad de México: Autor.
Secretaría de Educación Pública (SEP). (2011). Programa de Educación Preescolar 2011. Guía para la educadora. Ciudad de México: Autor.
Secretaría de Educación Pública (SEP). (2015). Evaluación del desempeño docente. Ciclo escolar 2015-2016. Perfil, parámetros e indicadores para docentes. Ciudad de México: Autor.
Shavelson, R. J. y Webb, N. M. (1991). A primer on generalizability theory. Thousand Oaks, CA: Sage Publications.
Shulman, L. (2005). Conocimiento y enseñanza: Fundamentos de la nueva Reforma. Revista de Currículum y Formación del Profesorado, 9(2), 1-30.
Smith, A. B., Rush, R., Fallowfield, L. J., Velikova, G. y Sharpe, M. (2008). Rasch fit statistics and sample size considerations for polytomous data. BMC Medical Research Methodology, 8(1), 1-18. doi:10.1186/1471-2288-8-33.