Longitudinal Evaluation to Improve the Digital Competence of a Secondary School
Keywords:
Digital competence, Secondary education, Single case study, Longitudinal evaluation, Mixed method
This work is licensed under a Creative Commons Attribution-NonCommercial-NoDerivatives 3.0 Unported License.
Abstract
This article summarizes the results of a longitudinal evaluative research (from 2018 to 2023) whose main objective is to evaluate the digital transformation processes for the improvement of learning that are being carried out in a Secondary Education center according to the dimensions contemplated in the European Framework for Digitally Competent Educational Organisations (DigCompOrg). A mixed method and evaluative research design has been chosen based on the use of the SELFIE questionnaire, focus groups, document analysis and research diary. The participating sample consisted of 11 members of the management team, 44 teachers and 641 students. This article collects the results of the quantitative data analysis of the last evaluation carried out (2022-2023 academic year). The results show that in the center studied, areas such as leadership (digital strategy), infrastructure and equipment or pedagogy: supports and resources have been consolidated. However, there are areas that are advancing more slowly, such as collaboration and networking or assessment practices. This research is a solid example of good practices related to the digital transformation of educational institutions in formal education based on the feedback obtained through continuous evaluation processes
Downloads
References
Alzás García, T., Casa García, L. M., Luengo González, R., Torres Carvalho, J. L. y Catarreira, S. V. (2016). Revisión metodológica de la triangulación como estrategia de investigación. Investigación Cualitativa en Ciencias Sociales, 3, 639-648.
Arnal, J., Rincón, D. y Latorre, A. (2003). Bases metodológicas de la investigación educativa. Ediciones Experiencia S.L.
Balaban, I., Redjep, N. B. y Calopa, M. K. (2018). The analysis of digital maturity of schools in Croatia. International Journal of Emerging Technologies in Learning, 13(6). https://doi.org/10.3991/ijet.v13i06.7844
Ballester, L., Nadal, A. y Amer, J. (2017). Métodos y técnicas de investigación educativa. (2ª ed.). Edicions de la Universitat de les Illes Balears.
Barragán-Sánchez, R., Palacios-Rodríguez, A. y Corujo-Vélez, M. C. (2021). Claves organizativas para la integración de las TIC en los centros educativos. En M. D. Díaz-Noguera y R. Barragán-Sánchez (Eds.), Centros educativos. Transformación digital y organizaciones sostenibles. Aprender y enseñar en tiempos de pandemia. Dykinson.
Begicevic Redjep, N., Balaban, I. y Zugec, B. (2021). Assessing digital maturity of schools: framework and instrument. Technology, Pedagogy and Education, 30(5), 643-658. https://doi.org/10.1080/1475939X.2021.1944291
Bocconi, S., Panesi, S. y Kampylis, P. (2020). Fostering the digital competence of schools: piloting SELFIE in the Italian education context. IEEE Revista Iberoamericana de Tecnologías del Aprendizaje, 15(4), 417-425. https://doi.org/10.1109/RITA.2020.3033228
Brolpito, A., Lightfoot, M., Radišic, J. y Šcepanovic, D. (2016). Digital and online learning in vocational education and training in Serbia: a case study. European Training Foundation.
Cabero-Almenara, J., Barragán-Sánchez, R. y Palacios-Rodríguez, A. D. P. (2021). DigCompOrg: Marco de referencia para la transformación digital de los centros educativos andaluces. eCO. Revista Digital de Educación y Formación del Profesorado, 18, 1-21.
Cachia, R., Pokropek, A. y Giannoutsou, N. (2024). Supporting the monitoring of the digital capacity of schools through optimal shortening of the SELFIE tool. Computers & Education, 208, 104938. https://doi.org/10.1016/j.compedu.2023.104938
Capperucci, D., Scierri, I. D. M., Salvadori, I., Batini, F., Toti, G., Barbisoni, G. y Pera, E. (2022). Remote Teaching during COVID-19 Emergency: Teaching and Assessment Strategies and the Role of Previous Training. Education Sciences, 12(10), 646. https://doi.org/10.3390/educsci12100646
Castaño-Muñoz, J., Costa, P., Hippe, R. y Kampylis, P. (2018). Within-school differences in the views on the use of digital technologies in Europe: evidence from the SELFIE tool. En EDULEARN18 proceedings (pp. 10417-10426). IATED. https://doi.org/10.21125/edulearn.2018.2528
Castaño-Muñoz, J., Pokropek, A. y Weikert García, L. (2022). For to all those who have, will more be given? Evidence from the adoption of the SELFIE tool for the digital capacity of schools in Spain. British Journal of Educational Technology, 53(6), 1937-1955. https://doi.org/10.1111/bjet.13222
Castaño-Muñoz, J. y Weikert García, L. (2021). La capacidad digital de los centros educativos de España. Muestra representativa a través de la herramienta SELFIE. CINE-2011 2. 1º, 2º y 3º ESO. Oficina de Publicaciones de la Unión Europea. https://doi.org/10.2760/325831
Chopra, N. (2019). E-governance Framework to Measure Digital Competence of HEIs in India. European Scientific Journal, 15(11), 181-193. https://doi.org/10.19044/esj.2019.v15n11p181
Comisión Europea. (2018a). Recomendación del Consejo relativa a las competencias clave para el aprendizaje permanente. Oficina de Publicaciones de la Unión Europea.
Comisión Europea. (2018b). Plan de Acción de Educación Digital. Oficina de Publicaciones de la Unión Europea.
Comisión Europea. (2018c). SELFIE, Self-reflection on Effective Learning by Fostering the use of Innovative Educational Technologies. Unión Europea website.
Comisión Europea. (2020). Plan de Acción de Educación Digital (2021-2027). Unión Europea website.
Consejería de Educación y Cultura de la Región de Murcia. (2021). Resolución de 16 de noviembre de 2021 de la Consejería de Educación y Cultura por la que se dictan instrucciones sobre el Plan Prodigi-e para la transformación digital educativa de la Región de Murcia. Boletín Oficial de la Región de Murcia.
Consejería de Educación y Universidades de la Región de Murcia. (2017). Resolución de 21 de marzo de 2017, de la dirección general de innovación educativa y atención a la diversidad para el desarrollo del programa: Centros Digitales. Boletín Oficial de la Región de Murcia.
Costa, P., Castaño-Muñoz, J. y Kampylis, P. (2021). Capturing schools' digital capacity: Psychometric analyses of the SELFIE self-reflection tool. Computers & Education, 162, 104080. https://doi.org/10.1016/j.compedu.2020.104080
Eickelmann, B. y Gerick, J. (2017). Lehren und lernen mit digitalen medien – zielsetzungen, rahmenbedingungen und implikationen für die schulentwicklung. Schulmanagement Handbuch, 164(4), 54–81.
Fernández-Miravete, Á. D. y Prendes-Espinosa, M. P. (2021a). Evaluación de la competencia digital de una organización educativa de enseñanza secundaria a partir del modelo DigCompOrg. Revista Complutense de Educación, 32(4), 651-661. https://doi.org/10.5209/rced.70953
Fernández-Miravete, Á. D. y Prendes-Espinosa, M. P. (2021b). Análisis del proceso de digitalización de un centro de Enseñanza Secundaria desde el modelo DigCompOrg. RELATEC. Revista Latinoamericana de Tecnología Educativa, 20(1), 9-25. https://doi.org/10.17398/1695-288X.20.1.9
Fernández-Miravete, Á. D. y Prendes-Espinosa, M. P. (2022a). Evaluación del proceso de digitalización de un centro de enseñanza secundaria con la herramienta SELFIE. Contextos Educativos. Revista de Educación, 30, 99-116. https://doi.org/10.18172/con.5357
Fernández-Miravete, Á. D. y Prendes-Espinosa, M. P. (2022b). Digitalization of educational organizations: evaluation and improvement based on DigCompOrg model. Societies, 12(6), 193. https://doi.org/10.3390/soc12060193
Flores Quispe, M. A., Bellido García, R. S. y Rejas Borjas, L. G. (2018). Organización educativa que aprende: transformación y gestión del conocimiento. Revista de Educación, 14, 13-23.
Gil López, A. J., Antelm Lanzat, A. M. y Cacheiro González, M. L. (2018). Análisis de la capacidad de innovación escolar desde la perspectiva del profesorado de educación secundaria. La escuela como organización que aprende. Educar, 54(2), 449-468. https://doi.org/10.5565/rev/educar.864
Giunti, C., Naldini, M. y Orlandini, L. (2018). Professional development to support teaching innovation. The experiences of the schools leading the Avanguardie Educative Movement. Form@ re-Open Journal per la Formazione in Rete, 18(2), 103-115. https://doi.org/10.13128/formare-23109
González-Pérez, A. (2017). Dinamización tecnológica de la escuela a través del liderazgo del coordinador TIC. Estudios Pedagógicos (Valdivia), 43(2), 115-125. http://doi.org/10.4067/S0718-07052017000200006
Gros Salvat, B., Sánchez i Valero, J. A., García, I. y Alonso Cano, C. (2020). Cuatro décadas de políticas para integrar las tecnologías digitales en el aula en Cataluña: acciones, logros y fracasos. Digital Education Review, 37, 79-95. https://doi.org/10.1344/der.2020.37.79-95
Hippe, R., Brolpito, A. y Broek, S. (2021). SELFIE for work-based learning. Oficina de Publicaciones de la Unión Europea. https://doi.org/10.2760/336883
Hippe, R., Pokropek, A. y Costa, P. (2022). Digital capacity building in VET using the selfie tool: cross-country validation. Oficina de Publicaciones de la Unión Europea. http://data.europa.eu/doi/10.2801/000855
Kampylis, P., Hodson, D., Petkova, S., Hippe, R., Cachia, R., Sala, A., Weikert Garcia, L., Castaño Muñoz, J. y Punie, Y. (2019). SELFIE forum – teaching and learning in the digital age. Oficina de Publicaciones de la Unión Europea. https://doi.org/doi:10.2760/799301
Kampylis, P., Punie, Y. y Devine, J. (2015). Promoting effective digital-age learning-A European framework for digitally-competent educational organisations. Oficina de Publicaciones de la Unión Europea. https://doi.org/10.2791/54070
Kampylis, P. y Sala, A. (2023). Improving the digital capacity of schools by using the SELFIE tool for collective reflection. European Journal of Education, 58(2), 331-346. https://doi.org/10.1111/ejed.12561
Levin, B. B. y Schrum, L. (2016). Every teacher a leader: Developing the needed dispositions, knowledge, and skills for teacher leadership. Corwin Press.
López-González, W. O. (2013). El estudio de casos: una vertiente para la investigación educativa. Educere, 17(56), 139-144.
Maureira Cabrera, Ó. J. (2018). Prácticas del liderazgo educativo: Una mirada evolutiva e ilustrativa a partir de sus principales marcos, dimensiones e indicadores más representativos. Revista Educación, 42(1), 1-19. https://doi.org/10.15517/revedu.v42il.22115
Molina-Pérez, J. y Pulido-Montes, C. (2021). COVID-19 y digitalización “improvisada” en educación secundaria: Tensiones emocionales e identidad profesional cuestionada. Revista Internacional de Educación para la Justicia Social, 10(1), 181-196. https://doi.org/10.15366/riejs2021.10.1.011
Morales-González, B., Edel-Navarro, R. y Aguirre-Aguilar, G. (2014). Modelo ADDIE (análisis, diseño, desarrollo, implementación y evaluación): Su aplicación en ambientes educativos. En I. Esquive Gámez (Coord.), Los modelos tecno-educativos, revolucionando el aprendizaje del siglo XXI (pp. 33-46). Universidad Veracruzana.
Munar-Garau, J., Oceja, J. y Salinas-Ibáñez, J. (2024). Equivalencias entre los indicadores de la herramienta SELFIE y el marco DigCompEdu a partir de la técnica Delphi. Pixel-Bit. Revista de Medios y Educación, 69, 131-168. https://doi.org/10.12795/pixelbit.101775
Palau, R., Fretes, G., Mogas, J. y Usart, M. (2023). Validación de una herramienta para medir la Competencia Digital Docente del profesorado de educación Secundaria en formación inicial. RELIEVE, 29(2), art. 2. http://doi.org/10.30827/relieve.v29i2.25317
Panesi, S., Bocconi, S. y Ferlino, L. (2020). Promoting students’ well-being and inclusion in schools through digital technologies: Perceptions of students, teachers, and school leaders in Italy expressed through SELFIE piloting activities. Frontiers in Psychology, 11, 1563. https://doi.org/10.3389/fpsyg.2020.01563
Peralta-Roncal, L. E., Gaona Portal, M. del P., Luna Acuña, M. L. y Bazán Linares, M. V. (2023). Las tecnologías de la información y la comunicación (TIC) en educación secundaria: Una revisión sistemática. Revista Andina de Educación, 7(1), 000711. https://doi.org/10.32719/26312816.2023.7.1.1
Wohlfart, O. y Wagner, I. (2022). Ganzheitliche schulentwicklung zur implementierung von educational technologies in zeiten der digitalen transformation–eine case-study zum selbstevaluationstool selfie. Unterrichtswissenschaft, 50, 525-559. https://doi.org/10.1007/s42010-022-00155-w
Yin, R. K. (2018). Case study research and applications. Sage.