El engagement en la educación virtual: experiencias durante la pandemia COVID-19

Linguagem e Tecnologia DOI: 10.35699/1983- 3652.2021.33936 Sección: Dosier Autor correspondiente: Odiel Estrada Molina Editado por: Anna Izabella Miranda Pereira Recibido el: december 11, 2020 Aceptado el: february 28, 2021 Publicado el: june 28, 2021 Esta obra está bajo una licencia «CC BY 4.0». cb El engagement en la educación virtual: experiencias durante la pandemia COVID-19 Engajamento na educação virtual: experiências durante a pandemia de COVID-19 Engagement in virtual education: experiences during the COVID-19 pandemic Odiel Estrada Molina ∗1, Dieter Reynaldo Fuentes Cancell †1y Alién García Hernández ‡1 1Facultad de Ciencias y Tecnologías Computacionales. Universidad de las Ciencias Informáticas, La Habana, Cuba. Resumen Los cursos virtuales son alternativas educativas que contribuyen a la formación permanente de los profesionales. Lograr un adecuado engagement permite elevar la motivación, compromiso, responsabilidad y emociones positivas hacia el logro de los objetivos y metas de aprendizaje. Debido a las actuales condiciones de confinamiento provocado por la pandemia Covid-19 es imprescindible lograr un engagement en los cursos virtuales. Este estudio tiene como objetivo determinar si el rediseño del curso virtual Introducción a la Evaluación de la Usabilidad de Sistemas Informáticos, ofertado en la Universidad de las Ciencias Informáticas de Cuba propicia mayores niveles de engagement en las actuales condiciones de confinamiento. Se diseñó un cuasi-experimento con un grupo de control y uno experimental. Las pruebas estadísticas confirman mayores niveles de engagement en los sujetos del grupo experimental. Se concluye que, las características a potenciar en los cursos virtuales ofertados en el actual tiempo de pandemia para elevar el engagement son: (1) factor engagement aplicado: diseño de recursos educativos digitales y materiales relevantes para la vida profesional y, aplicación de lo aprendido; (2) Factor engagement orientado a objetivos: integración entre el clima psicológico organizacional y la motivación profesional y, actividades colaborativas; y (3) Factor engagement autodisciplinado y el engagement interactivo: contenidos «desafiantes» de aprendizaje, actividades sincrónicas y asincrónica y sesiones interactivas a través de Telegram. Palabras clave: Cuasi-experimento. Cursos virtuales. Covid-19. Engagement. Tecnología educativa. Resumo Os cursos a distância são alternativas educacionais que contribuem para a formação permanente dos profissionais. Alcançar um engajamento adequado permite aumentar a motivação, o comprometimento, a responsabilidade e as emoções positivas em relação ao cumprimento dos objetivos e metas de aprendizagem. Devido às atuais condições de confinamento causadas pela pandemia Covid-19, é essencial conseguir o envolvimento em cursos virtuais. O objetivo deste estudo é determinar se o redesenho do curso virtual ”Introdução à avaliação da usabilidade de sistemas computacionais”, oferecido pela Universidad de las Ciencias Informáticas, favorece níveis mais elevados de engajamento nas atuais condições de confinamento. Um quase-experimento foi projetado com um grupo de controle e um grupo experimental. Os testes estatísticos confirmam níveis mais elevados de engajamento nos sujeitos do grupo experimental. Conclui-se com base nas experiências educacionais obtidas que as características a serem promovidas nos cursos a distância oferecidos no momento atual da pandemia para aumentar o engajamento são: (1) fator de engajamento aplicado: desenho de recursos educacionais digitais e materiais relevantes para a vida profissional e aplicação do que foi aprendido; (2) Fator de engajamento orientado a metas: integração entre o clima psicológico organizacional e a motivação profissional e atividades colaborativas; e (3) Fator de engajamento autodisciplinado e engajamento interativo: conteúdo de aprendizagem ”desafiador”, atividades síncronas, e assíncronas e sessões interativas por meio do Telegram. Palavras-chave: Quase-experimento. Cursos virtuais. Covid-19. Engajamento. Tecnologia educacional. Abstract ∗Email: [email protected] †Email: [email protected] ‡Email: [email protected] 1/18 Virtual courses are educational alternatives that contribute to the permanent training of professionals. Achieving adequate engagement allows raising motivation, commitment, responsibility, and positive emotions towards the achievement of learning objectives and goals. Due to the current confinement conditions caused by the Covid-19 pandemic, it is essential to achieve, as much as possible, an engagement in the virtual courses. The objective of this study is to determine if the redesign of the virtual course ”Introduction to the evaluation of the usability of computer systems”, offered at the Universidad de las Ciencias Informáticas, favors higher levels of engagement in the current confinement conditions. A quasi-experiment was designed with a control group and an experimental group. Statistical tests confirm higher levels of engagement within the subjects of the experimental group. It is concluded based on the educational experiences obtained that the characteristics that should be promoted in the virtual courses offered in the current time of the pandemic are (1) applied engagement factor: design of digital educational resources and relevant materials for professional life and application of what has been learned; (2) Goal-oriented engagement factor: integration between the organizational psychological climate and professional motivation, and collaborative activities; and (3) Self-disciplined engagement factor and interactive engagement: challenging learning content, synchronous and asynchronous activities, and interactive sessions through Telegram. Keywords: Quasi-experiment. Virtual courses. Covid-19. Engagement. Educational Technology. 1 Introducción La pandemia de la Covid-19 obliga que en los distintos países se apliquen diversas medidas sociales, económicas y políticas con el propósito, dentro de lo posible, de salvaguardar la vida humana. Estos cambios inciden en diversos sectores estratégicos, siendo uno de ellos la educación universitaria. Las universidades en los últimos 20 años potencian la educación virtual como alternativa para la sistematización de competencias, la superación profesional en correspondencia a las actuales desafíos y demandas laborales, así como la masificación de la educación (gratis o no). En esta modalidad educativa los recursos educativos digitales, la tutoría y rol participativo, interactivo y colaborativo de los docentes y estudiantes a través de los entornos virtuales cobran una mayor relevancia en el proceso de enseñanza-aprendizaje. En este escenario están presentes disímiles variables que atentan, en cierta medida, con un adecuado rendimiento de los estudiantes, entre ellas, el engagement. Este concepto se relaciona con el compromiso, bienestar, motivación y la persistencia que tiene el alumnado en los estudios (SCHAUFELI y col.,2002). Estos factores toman especial relevancia en la educación virtual, en la cual diversos profesionales tienen una alternativa de superación constante en correspondencia a sus necesidades de aprendizaje. Debido al comentario anterior referente a la pandemia, es notable un aumento de trabajadores que acceden a cursos virtuales en las universidades para aprender o certificar sus conocimientos y poder así, mejorar su status laboral y condiciones socioeconómicas. Sin embargo, sus condiciones económicas y de conectividad inciden en el engagement hacia los cursos virtuales. Diversos estudios se publicaron en el último año referentes a la educación en tiempos de la pandemia Covid-19. Cáceres-Piñaloza (2020) argumenta la importancia de los espacios afectivos; Kem- Mekah (2020), Jordan y col. (2020), Lin y Reigeluth (2020) y Hernández-Ramos, Martínez-Abad y Sánchez-Prieto (2021) transmiten sus experiencias a partir de la interactividad con los recursos educativos digitales; otras investigaciones establecen los desafíos educativos actuales ante la Covid-19 (BAPTISTA LUCIO; ALMAZÁN ZIMERMAN y LOEZA ALTAMIRANO,2020;MIGUEL,2020;FLORES NESSI; MELÉNDEZ MORA y BAPTISTA MONTERO,2020;VELÁSQUEZ,2020;JIMÉNEZ y RUIZ,2021) mientras que diversos autores exponen las principales preocupaciones motivacionales de los matriculados en cursos virtuales (DÍAZ GUILLEN y col.,2018;OJEDA; ORTEGA y BOOM, 2020;VALDIVIESO; BURBANO y BURBANO,2020;GONZÁLEZ,2020). Coherente con estas últimas investigaciones, se aborda la relación entre el rendimiento académico, engagement y el estrés causado por el confinamiento que viven la mayoría de las personas (ÁLVAREZ-HERRERO y HERNÁNDEZ ORTEGA,2020;HERNÁNDEZ,2020;MAHDY,2020;VALDIVIESO; BURBANO y BURBANO, 2020;SANTIAGO y col.,2021). El análisis bibliográfico realizado refleja que pocas investigaciones (inicios del 2020-actualidad Estrada Molina et al | Texto Livre | Belo Horizonte | v.14 | n.2 | e33936 | 2021 2/18 febrero de 2021) abordan las experiencias educativas ante la Covid-19 desde las condiciones tecnológicas, económicas y educativas de países en subdesarrollo. Por tal motivo, en esta investigación de carácter exploratorio se tiene como objetivo primario determinar si el rediseño del curso virtual Introducción a la Evaluación de la Usabilidad de Sistemas Informáticos que oferta la Universidad de las Ciencias Informáticas de Cuba propicia mayores niveles de engagement en las actuales condiciones de confinamiento provocado por la pandemia Covid-19. A su vez, una vez logrado este objetivo, se valora en correspondencia a las características socioeconómicas y tecnológicas de y a los resultados estadísticos obtenidos, qué características tuvo el curso virtual y sus resultados educativos para potenciar el engagement propiciando una guía para investigaciones similares. 1.1 Principales tendencias para lograr el engagement desde el diseño de cursos virtuales Indudablemente los cursos virtuales son una de las alternativas educativas de preferencia por los profesionales, pues brindan soluciones a problemas o necesidades de aprendizaje a corto tiempo que no exijan un diplomado o maestría. Si bien existen diversas posturas teóricas relacionadas con curso virtual, curso virtual a distancia, cursos a distancia, entre otros que, por su semántica y respetando el cuerpo teórico de la Educación a Distancia (EaD), asumiremos el término curso virtual y recursos educativos digitales (GARCÍA ARETIO,2020). En los cursos virtuales se incluyen tradicionalmente los objetivos, contenidos, las formas de evaluación, la metodología, las orientaciones didácticas, las formas de interactividad, las guías y los recursos educativos digitales «abiertos o no» que, en sentido general, orientan hacia el aprendizaje. Los cursos virtuales, en su estructura general dentro de un ambiente virtual de aprendizaje, incluyen dimensiones (COLL y MONEREO,2008), elementos (VALENCIA VALLEJO; HUERTAS BUSTOS y BARACALDO RAMÍREZ,2014), etapas y roles (PÉREZ-BERENGUER y GARCÍA-MOLINA,2016), espacios (MAURI y col.,2016), herramientas de comunicación (VALENCIA VALLEJO; HUERTAS BUSTOS y BARACALDO RAMÍREZ,2014), y principios de instrucción e interactividad (LIN y REIGELUTH, 2020). El proceso de creación de ideas propias en los cursos virtuales es fundamental debido a que motiva a los estudiantes a estimular su pensamiento poniendo en práctica la creatividad, la innovación, la resolución de problemas y la toma de decisiones; procesos que desarrolla el engagement en su aprendizaje (BARRIOS,2014). El concepto de engagement en los cursos virtuales integra factores como el nivel de comportamiento, la disponibilidad de las TIC, el interés, la competencia y la autonomía tecnológica percibida, además de las tecnologías como medio de interacción social. El desarrollo de actividades mediadas por las tecnologías puede ayudar a que los estudiantes interactúen mejor con el entorno escolar y mejoren su rendimiento académico (GOLDHAMMER; GNIEWOSZ y ZYLKA,2017). Básicamente, el engagement en los cursos virtuales se refleja en el comportamiento manifiesto de los estudiantes con el uso de las tecnologías, así como por factores cognitivos y motivacionales que propician las actividades mediadas por las TIC. Una alta motivación para la socialización relacionada con las TIC sugiere que las personas reciban oportunidades de aprendizaje específicas posibilitando el desarrollo de sus habilidades y conocimientos de las tecnologías. Participar en actividades con otros no solo satisface la necesidad para la pertenencia, sino también influye en la experiencia y la motivación de la actividad en sí (SENKBEIL,2018). En resumen, el engagement en los cursos virtuales se refiere a la participación positiva y al disfrute en el uso de recursos tecnológicos (dispositivos móviles, juegos, internet), así como el valor instrumental y el beneficio de las tecnologías para la consecución de objetivos académicos y personales (GOLDHAMMER; GNIEWOSZ y ZYLKA,2017). En la educación virtual medir el engagement (MOHD y col.,2020) es objeto de análisis a nivel internacional estableciéndose por tendencia los cuatro factores siguientes: el compromiso aplicado (HANDELSMAN y col.,2005;SHUMOW; SCHMIDT y ZALESKI,2013); la orientación a objetivos (BAKKER y col.,2018;MOHD y col.,2020;ELTAHIR y col.,2021); y la autodisciplina y la interacción (ALEXANDER; DEAS y LYONS,2018;KERIMBAYEV y col.,2020;SNYDER y col.,2020;SIM; SIM y QUAH,2021;WALKER y KORALESKY,2021;SMITH y BOSCAK,2021). Estrada Molina et al | Texto Livre | Belo Horizonte | v.14 | n.2 | e33936 | 2021 3/18 Dada la complejidad del tema, no es una tarea fácil identificar el nivel de engagement de los estudiantes en un ambiente virtual de formación. Sin embargo, los factores antes expuestos revelan el grado de compromiso, implicación y entusiasmo de los alumnos en los cursos virtuales. 2 Métodos El estudio se basó en una investigación cuasiexperimental (GOPALAN; ROSINGER y AHN,2020). Para ello se empleó un grupo de control y otro, experimental con medición pre y post-test del engagement. Este tipo de investigación (PULIDO GUERRERO y col.,2020) se identifica por la manipulación de variable (s) dependiente (s) y su medición en una o varias variables independientes, aunque no siempre se garantiza la homogeneidad de los grupos (HERNÁNDEZ-SAMPIERI y FERNÁNDEZCOLLADO,2014). Este tipo de investigación es adecuado para lograr el objetivo de determinar si el rediseño del curso virtual Introducción a la Evaluación de la Usabilidad de Sistemas Informáticos que oferta la Universidad de las Ciencias Informáticas de Cuba, propicia mayores niveles de engagement en las actuales condiciones de confinamiento provocado por la pandemia Covid-19 en Cuba. El estudio permitió además contrastar los resultados obtenidos con otras investigaciones similares. El contexto instruccional de esta investigación se relaciona con los resultados obtenidos en el curso virtual de superación posgraduada: Introducción a la Evaluación de la Usabilidad de Sistemas Informáticos, impartido en diciembre de 2020. Se matricularon 93 profesionales procedentes de siete provincias o estados de Cuba. Se ofertó en la Escuela de Posgrado denominada Aniversario 18 de la Universidad de las Ciencias Informáticas de Cuba, empleándose el Moodle como plataforma educativa. Tradicionalmente desde el 2018 los autores de este artículo imparten semestralmente el curso virtual antes mencionado, empleándose recursos educativos digitales en función de propiciar el engagement en los matriculados. Debido a las medidas de confinamiento establecidas en Cuba para enfrentar la pandemia y a la repercusión social, psicológica, económica y educativa que ello impone, los cursos virtuales de esta institución fueron rediseñados en función de promover niveles de engagement en los matriculados teniendo en cuenta la actual situación tecnológica y socioeconómica del país. Por tal motivo, los investigadores nos planteamos si realmente el nuevo rediseño del curso virtual en cuestión promueve o no el engagement en la actual situación por la que transita nuestro país. Para ello, se plantearon las siguientes preguntas de investigación. • P1 ¿Qué características deben tener un curso virtual para lograr el engagement en las actuales condiciones de confinamiento provocado por la pandemia Covid-19? • P2 ¿El rediseño del curso virtual Introducción a la Evaluación de la Usabilidad de Sistemas Informáticos propicia mayores niveles de engagement en las actuales condiciones de confinamiento provocada por la pandemia Covid-19 en Cuba? Los contenidos didácticos del curso virtual son: estándares ISO/IEC 9241-11:2018; ISO/IEC 9146:2004; ISO/IEC 25010; heurísticas de Nielsen, principios de Shneiderman; métodos, técnicas e instrumentos tradicionales para evaluar la usabilidad en sistemas informáticos. Para la obtención de información (recolección de datos) se aplicaron cuestionarios para medir el engagement y se aplicaron pruebas y técnicas estadísticas (Kolmogorov-Smirnov, prueba t de Student, el tamaño del efecto «d de Cohen» y la estimación del tamaño del efecto mediante r). La información se obtuvo de todos los matriculados en el grupo de control y del experimental. El instrumento empleado (MOHD y col.,2020) fue creado y validado con el objetivo de medir el engagement en los cursos virtuales. Las personas que participaron en esta investigación según su rol fueron: participantes (profesionales que culminaron el curso de posgrado) y agentes informantes (personal docente del curso). Siendo la(s) unidad(es) de análisis los estudiantes del curso virtual. Para analizar los datos, estos fueron procesados por los dos profesores del curso y un tercer investigador especialista en estadística cuyo rol fue el análisis y la comprensión de los resultados estadísticos obtenidos a través de las pruebas y técnicas nombradas anteriormente. Se empleó el programa estadístico SPSS v.25. A su vez, se utilizó la coincidencia de patrones para determinar las similitudes y diferencias (MILES; HUBERMAN y SALDAÑA,2014). Estrada Molina et al | Texto Livre | Belo Horizonte | v.14 | n.2 | e33936 | 2021 4/18 Las unidades didácticas del curso son: definición y fundamentos teóricos de la usabilidad en productos informáticos, y métodos, técnicas, instrumentos y modelos para evaluar la usabilidad en sistemas informáticos. En cuanto a la integridad, calidad y veracidad de los datos obtenidos, se empleó la triangulación como estrategia de la investigación (LUO y XIE,2018), en la cual se analizaron datos procedentes de diferentes métodos y técnicas (cuestionarios y calidad de la participación en los foros, chats y wikis y otros recursos educativos digitales creados en el espacio virtual de curso -https://aulacened.uci.cu/-). El curso tiene objetivo primario introducir a profesionales de la computación en la disciplina Interacción Humano-Computador y la Experiencia de Usuario, con énfasis en la Usabilidad (Video promocional institucional: https://www.facebook.com/watch/?v=748036359345504). Para responder a las preguntas de investigación se estableció un procedimiento (Figura 1). El curso Figura 2se impartió en diciembre de 2020 y estuvo comprendido por dos unidades Tabla 1. Su diseño implicó la realización de diversas actividades y empleo de recursos educativos digitales. En el caso del grupo experimental las variaciones se enmarcaron en el orden de la interactividad (estudianteestudiante, estudiante (s)-profesor (es) y estudiante-contenido), la realización de nuevas actividades colaborativas y el acceso a los recursos tecnológicos Figura 3. Tabla 1. Introducción a la evaluación de la usabilidad: Programación semanal. Periodo Unidad Contenido de aprendizaje Semana 1 Unidad 1. Fundamentos teóricos: • Definiciones de usabilidad; estándares ISO; Ingeniería de la usabilidad. Interacción Humano-Computador, Experiencia de Usuario y Usabilidad. • Características, atributos y sub características genéricas de la usabilidad en productos informáticos. • Características, atributos y subcaracterísticas específicas de la usabilidad en productos informáticos (comercio electrónico, tecnología educativa y sistemas de gestión de información, entre otros). Semana 2 Unidad 2. Métodos, técnicas e instrumentos para evaluar la usabilidad Semana 3 Laboratorios especializados e intercambios con especialistas: aplicación de métodos, técnicas e instrumentos para evaluar la usabilidad. Semana 4 Transformación laboral (escenario laboral de cada estudiante de posgrado): Aplicación de métodos, técnicas e instrumentos para evaluar la usabilidad. Elaboración de propuestas de mejoras (informe técnico) para mejorar la usabilidad en un producto informático. Fuente: Elaboración propia. En el cuasi-experimento participaron 93 estudiantes (47 en el grupo experimental y 46 en el grupo de control). Esta cantidad representa el 100% de los matriculados en el curso Introducción a la Evaluación de la Usabilidad de Sistemas Informáticos en su edición de diciembre de 2020. Se dividen en 40 mujeres (43.01%) y 53 hombres (56.99%). La media de edad de los alumnos es de 27 años con una desviación estándar de 3.78. Los grupos (experimental y control) son equivalentes, debido a que se seleccionaron sus miembros bajo los supuestos de la aleatoriedad, la primera mitad para el grupo experimental y los restantes para el de control. Para esta división se tuvo en cuenta el listado ordenado por orden alfabético del primer apellido. La diferencia entre ambos grupos radica en que el de control recibió el curso tal y como ha estado diseñado en ediciones anteriores (manera tradicional) y el grupo experimental recibió el curso según el rediseño realizado. Estrada Molina et al | Texto Livre | Belo Horizonte | v.14 | n.2 | e33936 | 2021 5/18 Figura 1. Procedimiento general de la investigación y características de la muestra. Fuente: Elaboración propia. Estrada Molina et al | Texto Livre | Belo Horizonte | v.14 | n.2 | e33936 | 2021 6/18 Figura 2. Imagen del curso. Fuente: Elaboración propia. Figura 3. Diseño general para promover el engagement en el curso virtual. Fuente: Elaboración propia. Estrada Molina et al | Texto Livre | Belo Horizonte | v.14 | n.2 | e33936 | 2021 7/18 3 Resultados 3.1 Rediseño del curso virtual En el rediseño del curso virtual (Tabla 2) se elaboraron nuevos procedimientos colaborativos Figura 4e Figura 5los cuales son explicados en la sección de discusión a partir de los factores que determinan el engagement. Tabla 2. Comparaciones entre el diseño del curso del grupo de control y del experimental. Temas Recursos educativos digitales y tipo de actividades Curso virtual impartido tradicionalmente «Grupo de Control» Curso virtual rediseñado «Grupo Experimental» Tema I Foros, Chat, Wiki, recursos multimedia, objetos de aprendizaje, mapas conceptuales y tareas Procedimiento colaborativo tradicional (BAKKER y col.,2018; MOHD y col.,2020; ELTAHIR y col.,2021; SIM; SIM y QUAH, 2021;WALKER y KORALESKY,2021; SMITH y BOSCAK, 2021) – Nuevo procedimiento colaborativo (Figuras 3 y4) – Empleo del Telegram Tema II Procedimiento didáctico-metodológico Curso virtual impartido tradicionalmente «Grupo de Control» Curso virtual rediseñado «Grupo Experimental» Guías didácticas, metodologías, tutorías, asesoría, contenido didáctico y formas de evaluación en función a las tendencias actuales de la industria del software. – Se incluye un nuevo procedimiento basado en la interacción con los directivos y jefes de los profesionales matriculados en el curso y que se encuentran en confinamiento en sus casas. – Guías didácticas, guías metodologías, tutorías, asesoría, contenido didáctico y formas de evaluación en función a las tendencias actuales de la industria del software. Fuente: Elaboración propia. 3.2 Resultados del cuasi-experimento Estos resultados están asociados a la pregunta de investigación. ¿El rediseño del curso virtual Introducción a la Evaluación de la Usabilidad de Sistemas Informáticos propicia mayores niveles de engagement en las actuales condiciones de confinamiento provocado por la pandemia Covid-19 en Cuba? Para ello se planteó la siguiente hipótesis: • H0: No se observan cambios entre la puntuación media obtenida en la evaluación pre y posttest con el cuestionario para medir engagement en los cursos virtuales en el grupo que realiza el experimento, a un nivel de significación del 0,05. A continuación, se muestran en la Tabla 3los resultados obtenidos al analizar la puntuación media de los factores del cuestionario. Se observa en los cuatro factores la puntuación inicial y final de los dos grupos. Cada puntuación de los factores sigue una distribución normal. Esto se debe a que los valores de significatividad de la prueba de normalidad Kolmogorov-Smirnov son todos mayores a 0.05 (en este caso .142 < p > .264). En todos los casos el grupo experimental aumenta en al menos un punto la media de cada factor, sin embargo no sucede así en el grupo de control. Se realizaron las pruebas correspondientes para estudiar si la diferencia que presenta el grupo experimental se puede considerar estadísticamente significativa. Se ha aplicado la prueba de comparación de medias para muestras relacionadas. Estrada Molina et al | Texto Livre | Belo Horizonte | v.14 | n.2 | e33936 | 2021 8/18 Figura 4. Estructura general del contenido didáctico en los dos cursos virtuales. Fuente: Elaboración propia. Figura 5. Relación entre los wikis y foros en actividades colaborativas. Fuente: Elaboración propia. Estrada Molina et al | Texto Livre | Belo Horizonte | v.14 | n.2 | e33936 | 2021 9/18 GOPALAN, Maithreyi; ROSINGER, Kelly y AHN, Jee Bin. Use of Quasi-Experimental Research Designs in Education Research: Growth, Promise, and Challenges. Review of Research in Education, v. 44, n. 1, p. 218-243, mar. 2020. DOI: 10.3102/0091732X20903302. Disponible en: <http://journals.sagepub.com/doi/10.3102/0091732X20903302>. Acceso en: 12 ene. 2021. HANDELSMAN, Mitchell M. y col. A Measure of College Student Course Engagement. The Journal of Educational Research, v. 98, n. 3, p. 184-191, 2005. Disponible en: <https://www.jstor.org/stable/27548076>. Acceso en: 9 dic. 2020. HERNÁNDEZ, Genibert. Gestión de las emociones en tiempos de pandemia y su impacto en el rendimiento académico. Revista Científica UCV HACER, v. 9, n. 4, p. 55-64, oct. 2020. DOI: 10.18050/ucv-hacer.v9i4.2634. Disponible en: <http://revistas.ucv.edu.pe/index.php/UCV-HACER/article/view/2634>. Acceso en: 9 dic. 2020. HERNÁNDEZ-RAMOS, Juan Pablo; MARTÍNEZ-ABAD, Fernando y SÁNCHEZ-PRIETO, José Carlos. empleo de videotutoriales en la era post COVID19: valoración e influencia en la identidad docente del futuro profesional. Revista de Educación a Distancia (RED), v. 21, n. 65, 2021. DOI: 10.6018/red.449321. Disponible en: <https://revistas.um.es/red/article/view/449321>. HERNÁNDEZ-SAMPIERI, R. y FERNÁNDEZ-COLLADO, C. Metodología de la investigación. México: McGraw-Hill e Interamericana Editores, 2014. JIMÉNEZ, Y. y RUIZ, M. A. Reflections on the Challenges that Higher Education Faces in Times of COVID-19. Economía y Desarrollo, v. 165, n. 1, 2021. Disponible en: <https://cutt.ly/HkRReUR>. JORDAN, Katy y col. Education during the COVID-19: crisis Opportunities and constraints of using EdTech in low-income countries. Revista de Educación a Distancia (RED), v. 21, n. 65, 2020. DOI: 10.6018/red.453621. Disponible en: <https://revistas.um.es/red/article/view/453621>. Acceso en: 9 dic. 2020. KEM-MEKAH, Oscar. Online Teaching During the Covid-19 crisis in Cameoon’s University Education: Achievements and Challenges. Ehquidad Revista Internacional de Políticas de Bienestar y Trabajo Social, n. 14, p. 57-74, jul. 2020. DOI: 10.15257/ehquidad.2020.0012. Disponible en: <https://revistas.proeditio.com/ehquidad/article/view/3793>. Acceso en: 9 dic. 2020. KERIMBAYEV, Nurassyl y col. Virtual educational environment: interactive communication using LMS Moodle. Education and Information Technologies, v. 25, n. 3, p. 1965-1982, mayo 2020. DOI: 10.1007/s10639-019-10067-5. Disponible en: <http://link.springer.com/10.1007/s10639-019-10067-5>. LI, Der-Chiang y TSAI, Ching-Yeh. Antecedents of Employees’ Goal Orientation and the Effects of Goal Orientation on E-Learning Outcomes: The Roles of Intra-Organizational Environment. Sustainability, v. 12, n. 11, pág. 4759, ene. 2020. DOI: 10.3390/su12114759. Disponible en: <https://www.mdpi.com/2071-1050/12/11/4759>. LIN, Chun-Yi y REIGELUTH, Charles M. Guidance for wiki-supported collaborative learning and community knowledge building for an entire class: Enhancing learning environments during the COVID19 pandemic. Revista de Educación a Distancia (RED), v. 21, n. 65, 2020. DOI: 10.6018/red.447401. Disponible en: <https://revistas.um.es/red/article/view/447401>. LUO, Tian y XIE, Quan. Using Twitter as a pedagogical tool in two classrooms: a comparative case study between an education and a communication class. Journal of Computing in Higher Education, v. 31, n. 1, p. 81-104, 2018. DOI: 10.1007/s12528-018-9192-2. Disponible en: <http://link.springer.com/10.1007/s12528-018-9192-2>. Acceso en: 9 dic. 2020. MAHDY, M. The Impact of COVID-19 Pandemic on the Academic Performance of Veterinary Medical Students. Front Vet Sci, v. 7, 2020. Disponible en: <https://www.ncbi.nlm.nih.gov/pmc/articles/PMC7572855/pdf/fvets-07-594261.pdf>. MAPHOSA, V.; JITA, T. y DUBE, B. Students’ perception and use of Moodle as the E-Learning system implemented at a rural University in Zimbabwe. In: ASSOCIATION FOR THE Advancement of Computing in Education (AACE). PROCEEDINGS of EdMedia + Innovate Learning. Online, The Netherlands: [s.n.], 2020. p. 175-182. MAURI, Teresa y col. La calidad de los contenidos educativos reutilizables: diseño, usabilidad y prácticas de uso. Revista de Educación a Distancia (RED), v. 50, p. 1-9, 2016. Disponible en: <https://revistas.um.es/red/article/view/25091>. Acceso en: 10 oct. 2020. Estrada Molina et al | Texto Livre | Belo Horizonte | v.14 | n.2 | e33936 | 2021 16/18 MIGUEL, José Antonio. La educación superior en tiempos de pandemia: una visión desde dentro del proceso formativo. Revista Latinoamericana de Estudios Educativos, v. 50, ESPECIAL, p. 13-40, sep. 2020. DOI: 10.48102/rlee.2020.50.ESPECIAL.95. Disponible en: <https://rlee.ibero.mx/index.php/rlee/article/view/95>. Acceso en: 21 dic. 2020. MILES, Matthew B.; HUBERMAN, A. M. y SALDAÑA, Johnny. Qualitative data analysis: a methods sourcebook. Third edition. Thousand Oaks, Califorinia: SAGE Publications, Inc, 2014. MOHD, M y col. Modifying the Student Course Engagement Questionnaire for Use with Online Courses. The journal of educators online, v. 17, n. 1, 2020. Disponible en: <https://cutt.ly/AkRR5Rw>. Acceso en: 16 ene. 2021. MURILLO, F. Javier y col. The Covid-19 and the Educational Gaps. Revista latinoamericana de educación inclusiva, v. 14, n. 1, p. 11-13, jun. 2020. DOI: 10.4067/S0718-73782020000100011. Disponible en: <http://www.scielo.cl/scielo.php?script=sci_abstract&pid=S0718- 73782020000100011&lng=en&nrm=iso&tlng=en>. Acceso en: 21 mayo 2021. OJEDA, Adelaida; ORTEGA, Danny D. y BOOM, Efrain A. Análisis de la percepción de estudiantes presenciales acerca de clases virtuales como respuesta a la crisis del Covid-19. Revista ESPACIOS, v. 41, n. 42, p. 81-92, nov. 2020. Disponible en: <https://www.revistaespacios.com/a20v41n42/20414207.html>. Acceso en: 19 ene. 2021. PAREDES, Y. y CHIPIA, J. Construcción de una jornada virtual sobre covid-19 a través de telegram. Revista del Grupo de Investigación en Comunidad y Salud, v. 5, n. 2, 2020. Disponible en: <http://erevistas.saber.ula.ve/index.php/gicos/article/view/16616>. PÉREZ-BERENGUER, Daniel y GARCÍA-MOLINA, Jesús. Un enfoque para la creación de contenido online interactivo. Revista de Educación a Distancia (RED), v. 51, p. 1-24, nov. 2016. Disponible en: <https://revistas.um.es/red/article/view/275151>. Acceso en: 9 dic. 2020. PULIDO GUERRERO, Edgar Guillermo y col. Mediación de conflictos y violencia escolar: Resultados de intervención a través de un estudio cuasi-experimental. REOP - Revista Española de Orientación y Psicopedagogía, v. 31, n. 3, p. 45-63, dic. 2020. DOI: 10.5944/reop.vol.31.num.3.2020.29261. Disponible en: <http://revistas.uned.es/index.php/reop/article/view/29261>. Acceso en: 12 ene. 2021. SANTIAGO, I. y col. Emergency remote teaching and students’ academic performance in higher education during the COVID-19 pandemic: A case study. Computers in Human Behavior, 2021. DOI: 10.1016/j.chb.2021.106713. Disponible en: <https://linkinghub.elsevier.com/retrieve/pii/S0747563221000352>. Acceso en: 19 ene. 2021. SCHAUFELI, Wilmar B. y col. Burnout and Engagement in University Students: A Cross-National Study. Journal of Cross-Cultural Psychology, v. 33, n. 5, p. 464-481, sep. 2002. DOI: 10.1177/0022022102033005003. Disponible en: <http://journals.sagepub.com/doi/10.1177/0022022102033005003>. Acceso en: 9 dic. 2020. SENKBEIL, Martin. Development and validation of the ICT motivation scale for young adolescents. Results of the international school assessment study ICILS 2013 in Germany. Learning and Individual Differences, v. 67, p. 167-176, ago. 2018. ISSN 10416080. DOI: 10.1016/j.lindif.2018.08.007. Disponible en: <https://linkinghub.elsevier.com/retrieve/pii/S1041608018301377>. Acceso en: 9 dic. 2020. SHUMOW, Lee; SCHMIDT, Jennifer A. y ZALESKI, Diana J. Multiple Perspectives on Student Learning, Engagement, and Motivation in High School Biology Labs. The High School Journal, v. 96, n. 3, p. 232-252, 2013. Disponible en: <https://www.jstor.org/stable/23351976>. Acceso en: 9 dic. 2020. SIM, Sandra Phek-Lin; SIM, Hannah Phek-Khiok y QUAH, Cheng-Sim. Online Learning: A Post Covid-19 Alternative Pedagogy For University Students. Asian Journal of University Education, v. 6, n. 4, p. 137-151, ene. 2021. DOI: 10.24191/ajue.v16i4.11963. Disponible en: <http://myjms.mohe.gov.my/index.php/AJUE/article/view/11963>. Acceso en: 21 ene. 2021. SMITH, Elana y BOSCAK, Alexis. A virtual emergency: learning lessons from remote medical student education during the COVID-19 pandemic. Emergency Radiology, v. 28, n. 3, p. 445-452, 2021. DOI: 10.1007/s10140-020-01874-2. Disponible en: <https://link.springer.com/10.1007/s10140-020-01874-2>. SNYDER, Audrey y col. The perspective of doctoral nursing students engaged in mentored international research. Journal of Nursing Education and Practice, v. 11, n. 1, p. 19-25, 2020. DOI: 10.5430/jnep.v11n1p19. Disponible en: <http://www.sciedupress.com/journal/index.php/jnep/article/view/18128>. Acceso en: 21 ene. 2021. Estrada Molina et al | Texto Livre | Belo Horizonte | v.14 | n.2 | e33936 | 2021 17/18 STACK, Steven. Learning Outcomes in an online vs traditional course. Georgia Educational Researcher, v. 9, n. 1, ene. 2015. DOI: 10.20429/ijsotl.2015.090105. Disponible en: <http://digitalcommons.georgiasouthern.edu/ij-sotl/vol9/iss1/5>. Acceso en: 9 dic. 2020. VALDIVIESO, M.; BURBANO, V. y BURBANO, A. Percepción de estudiantes universitarios colombianos sobre el efecto del confinamiento por el coronavirus, y su rendimiento académico. Revista ESPACIOS, v. 41, n. 42, p. 269-281, nov. 2020. Disponible en: <https://www.revistaespacios.com/a20v41n42/20414223.html>. Acceso en: 9 dic. 2021. VALENCIA VALLEJO, Nilson G.; HUERTAS BUSTOS, Adriana P. y BARACALDO RAMÍREZ, Pedro O. Los ambientes virtuales de aprendizaje: una revisión de publicaciones entre 2003 y 2013, desde la perspectiva de la pedagogía basada en la evidencia. Revista Colombiana de Educación, v. 66, p. 73-103, ene. 2014. Disponible en: <http://www.scielo.org.co/scielo.php?script=sci_abstract&pid=S0120- 39162014000100004&lng=en&nrm=iso&tlng=es>. Acceso en: 9 dic. 2021. VELÁSQUEZ, Rubí. La Educación Virtual en tiempos de Covid-19. Revista Científica Internacional, v. 3, n. 1, p. 19-25, jul. 2020. DOI: 10.46734/revcientifica.v2i1.8. Disponible en: <https://revista-cientifica-internacional.org/index.php/revista/article/view/8>. Acceso en: 21 dic. 2020. WALKER, Kristen A. y KORALESKY, Katherine E. Student and instructor perceptions of engagement after the rapid online transition of teaching due to COVID‐19. Natural Sciences Education, v. 50, n. 1, ene. 2021. DOI: 10.1002/nse2.20038. Disponible en: <https://onlinelibrary.wiley.com/doi/10.1002/nse2.20038>. Acceso en: 13 ene. 2021. Estrada Molina et al | Texto Livre | Belo Horizonte | v.14 | n.2 | e33936 | 2021 18/18