Full text
European Journal of Education and Psychology 2021, Vol. 14, Nº 2 (Págs. 1-29) Eur. j. educ. psychol. e-ISSN 1989-2209 https://revistas.uautonoma.cl/index.php/ejep doi: 10.32457/ejep.v14i2.1739 SOCIEDAD CIENTÍFICA ESPAÑOLA PARA LA INVESTIGACIÓN Y FORMACIÓN EN CIENCIAS DE LA SALUD Plataforma online de evaluación de compromiso escolar, versión 3.0: Avance hacia un sistema de protección de las trayectorias educativas Online Platform for the Evaluation of School Engagement, Version 3.0: progress towards a system for the protection of educational trajectories Ximena de Toro1* ** ; Belén Sotomayor2 ; Mahia Saracostti2 3 4*** ; Andrea Rossi4 y Laura Lara3 5 1Pontifica Universidad Católica de Chile, Chile; 2Universidad de La Frontera, Chile; 3Universidad Autónoma de Chile, Chile; 4Universidad de Valparaíso, Chile; 5Universidad de Sevilla, España Resumen Este artículo presenta el Sistema Integrado de Evaluación, Seguimiento y Estrategias de Promoción de Compromiso Estudiantil y Factores Contextuales desarrollado en Chile para su uso potencial en escuelas Iberoamericanas. El sistema web ha tenido un desarrollo incremental basado en diversos proyectos de investigación I+D y busca aportar a uno de los retos de América Latina y el Caribe señalado por organismos internacionales, como es avanzar hacia la construcción de sistemas de protección de las trayectorias escolares. Para su realización se implementó una metodología de desarrollo ágil de software que facilita el trabajo colaborativo llamada SCRUM. Entre los principales resultados se encuentra una plataforma con seis pasos que guían su implementación con recursos de apoyo gráficos y audiovisuales, cuyo potencial de uso es de alto interés para las escuelas en términos de diagnóstico, monitoreo e intervención. Dado que el concepto de compromiso escolar ha adquirido mayor relevancia producto de las consecuencias que tuvo la pandemia del COVID 19, todo el sistema fue ajustado para un contexto de clases presenciales o remotas. El desafío pendiente es la consolidación de esta plataforma en la política educativa nacional para facilitar su uso y masificación. Palabras clave: compromiso escolar, sistemas de protección de trayectorias escolares, escuelas, evaluación, monitoreo. * Autora para correspondencia: Ximena de Toro. Correo: [email protected] ** Estudiante Doctorado Becade Doctorado Nacional ANID, 2019, con folio21190814. *** Directora de la Cátedra UNESCO sobre bienestar de la Niñez y la Juventud, Educación y Sociedad.
DE TORO. Plataforma online de evaluación de compromiso escolar, versión 3.0: Avance hacia un sistema… 2 European Journal of Education and Psychology 2021, Vol. 14, Nº 2 (Págs. 1-29) Abstract This article presents the results of the development and incremental validation of the Integrated System of Evaluation, Monitoring and Strategies for the Promotion of School Engagement and Contextual Factors developed in Chile for its potential use in Ibero-America. The web-based system has had an incremental development based on various R&D research projects and aims to contribute to one of the challenges of Latin America and the Caribbean indicated by international organizations, which is to advance towards the construction of protection systems for school paths. For its realization, an agile software development methodology called SCRUM was carried out that facilitates collaborative work between teams. The main results are a platform of high interest to schools with six steps that guides its implementation with audiovisual support resources. Given that the concept of school engagement has acquired greater relevance because of the consequences of the COVID 19 pandemic, the entire system was adjusted for a context of either face-to-face or remote classes. The current challenge is the consolidation of this platform in the national educational policy to facilitate its use and massification. Key words: school engagement, school trajectory protection systems, schools, evaluation, monitoring. INTRODUCCIÓN El compromiso escolar (CE) es un concepto primordial para promover trayectorias educativas positivas y la retención escolar. Específicamente, el CE se entiende como la activa participación del estudiantado en el proceso educativo desde el hogar y/o la escuela. Quienes se encuentran comprometidos/as consideran que el aprendizaje es relevante, estando motivados/as y empeñados/as en su aprendizaje y futuro (Saracostti, Lara y Miranda- Zapata, 2019a; 2021a). Dicho concepto ha adquirido aún más relevancia en tiempos de pandemia y post pandemia, en cuanto las clases remotas se instalaron como modalidad alternativa frente a la incertidumbre del comportamiento del COVID-19, perdiendo fuerza la asistencia como indicador de los procesos educativos (Zhao y Waterson, 2021). Se trata de un constructo multidimensional que integra una dimensión afectiva, una conductual y otra cognitiva. La primera hace referencia al nivel de respuesta emocional del niño, niña o adolescente (NNA) hacia el establecimiento educativo y su proceso de aprendizaje, caracterizado por un sentimiento de involucramiento con el colegio y una consideración de éste como un lugar del que vale la pena formar parte. La segunda dimensión incluye las interacciones y respuestas del/la estudiante, dentro de la sala de clases, de la escuela y en ambientes extracurriculares. Por último, la dimensión cognitiva es la inversión consciente de energía para construir aprendizajes complejos que van más
3European Journal of Education and Psychology 2021, Vol. 14, Nº 2 (Págs. 1-29) DE TORO. Plataforma online de evaluación de compromiso escolar, versión 3.0: Avance hacia un sistema… allá de los requerimientos mínimos (Archambault et al., 2009; Christenson et al., 2008; Fredricks, Blumenfeld y Paris, 2004; Fredricks, Filsecker y Lawson, 2016; Fredricks, Rescly y Christenson, 2019; Lara et al., 2018; Miranda-Zapata et al., 2018; Shernoff, 2013). Por otro lado, el compromiso escolar es una variable altamente influenciada por factores contextuales/relacionales (FC) y en la medida que se tenga conocimiento de éstos, es posible intervenir en pro del CE (Miranda-Zapata et al., 2021). La literatura destaca tres factores principalmente: el apoyo familiar, el apoyo de pares y el apoyo del profesorado (Ansong et al., 2017; Fernández-Zabala et al., 2016; Lara y Saracostti, 2019; Miranda-Zapata et al., 2018, 2021; Ramos-Díaz et al., 2016; Saracostti et al., 2019b). El primer factor alude a que los y las estudiantes perciben apoyo familiar en el proceso de aprendizaje, en caso de problemas, con las tareas, en términos motivacionales, junto con conversaciones sobre lo que sucede en la escuela ya sea telemática, presencial o semipresencial. El segundo ha sido definido como la percepción que tiene el estudiantado acerca de las relaciones interpersonales entre compañero/as, esto es, la preocupación, la confianza y el apoyo que se da entre pares. Por último, el apoyo del profesorado se refiere a que los/as estudiantes perciben recibir apoyo y motivación por los y las docentes para aprender o en caso de algún inconveniente (Navarro et al., 2021; Saracostti et al., 2019a). Hacia un sistema de evaluación y promoción del compromiso escolar La literatura, junto con organismos internacionales y nacionales (Comisión Europea, 2011; Hofkens y Rozek, 2019; Fredricks et al., 2019; Lyche, 2010; Ministerio de Educación, 2020; de Toro, 2015) concuerdan que contar con sistemas capaces de evaluar, monitorear y promover el compromiso escolar y los factores contextuales de todos/as los estudiantes contribuyen a la prevención de la deserción escolar, así como a la promoción de diversas trayectorias educativas con potencial de ser positivas, de manera mucho más oportuna que aquellas iniciativas que se centran exclusivamente en los clásicos factores de riesgo como la inasistencia o el rezago escolar. Lo anterior revela una clara tendencia hacia propuestas más sistémicas que involucran diferentes niveles (superando aquellas focalizadas en un solo componente de compromiso escolar (ej. cognitivo o conductual). A ello se añade que tanto las escuelas como entidades locales pueden verse beneficiadas con un sistema integrado y articulado de promoción de compromiso escolar y factores contextuales, pues las primeras podría identificar necesidades comunes entre estudiantes y cursos que requieran un apoyo adicional, mientras que los gobiernos locales pueden focalizar los recursos en aquellas escuelas o áreas que necesiten reforzar su compromiso escolar, junto con evaluar la efectividad de las intervenciones disponibles (Bruce et al., 2011; de Toro, 2015; Jerald, 2006; Uekawa et al., 2010).
DE TORO. Plataforma online de evaluación de compromiso escolar, versión 3.0: Avance hacia un sistema… 4 European Journal of Education and Psychology 2021, Vol. 14, Nº 2 (Págs. 1-29) Si bien en Iberoamérica la preocupación por el compromiso escolar junto con la necesidad de contar con sistemas de diagnóstico, monitoreo y evaluación se ha instalado progresivamente, el avance hacia estrategias de intervención en esta área es aún muy incipiente. (Saracostti et al., 2019a; Bravo et al., 2021; Miranda et al., 2021). De allí que con la finalidad de contribuir al acompañamiento que hacen las escuelas a las trayectorias educativas, entregar apoyos oportunos y promover la retención escolar, el equipo de investigación que lidera este artículo avanzó en el desarrollo de instrumentos de medición del compromiso escolar y los factores contextuales (Lara et al., 2018; Navarro et al., 2021). Posteriormente, a partir de distintos proyectos I+D asociados, se ha desarrollado y validado una plataforma de evaluación online para Chile, con potencialidad de ser usada en Iberoamérica (Saracostti et al., 2021b), existiendo antecedentes de su utilización de forma piloto por otros países iberoamericanos en los que adaptaron y validaron los cuestionarios (Lara et al., 2021a; Lara et al., 2021b). Esta plataforma ha sido robustecida de manera incremental, convirtiéndose en una herramienta de gestión autónoma para los establecimientos educativos de Chile. En su primera versión se crearon instrumentos de medición de compromiso escolar y factores contextuales para estudiantes de 7° básico a 1° medio (12 a 14 años aproximadamente) y se inició el desarrollo web para alojar los cuestionarios, los reportes de resultados y recursos educativos (Saracostti et al., 2019a). En su siguiente versión, la plataforma incluyó a nuevos niveles educativos correspondientes a 2° y 3° medio (15 a 16 años aproximadamente) y se consolidó el desarrollo de sus tres módulos originales. Desde el “módulo de encuestas” estudiantes de los cursos entre 7º básico a 3° medio accedían a los instrumentos de medición del compromiso escolar y factores contextuales diseñados y validados por el equipo de investigación. Desde el “módulo de resultados” se fomentaba la toma de decisiones con base en datos al interior de la escuela, mediante el uso de reportería dinámica y descargable de los resultados de la aplicación de los instrumentos. En dicho módulo, el profesorado, equipos psicosociales o directivos de cada escuela podían acceder a los resultados que arrojaba la plataforma a nivel de estudiante, curso y escuela. En tercer lugar, desde el “módulo de recursos educativos” se accedía a recursos para la autoformación en compromiso escolar y factores contextuales, entregando apoyo para la interpretación de los resultados y orientando acciones para potenciar y/o remediar los resultados de los/as estudiantes. Asimismo, se incluyó un manual de programas de promoción del compromiso escolar y factores contextuales basados en la evidencia (Saracossti et al., 2016). En una fase posterior, se incluyó la medición de compromiso escolar y factores contextuales en estudiantes de 5° y 6 ° básico (10 a 11 años aproximadamente) permitiendo el seguimiento del compromiso escolar y factores contextuales en estudiantes de educación básica y secundaria (Sotomayor, Lara y Saracostti, 2021). Para facilitar el uso autónomo de la plataforma, se incluyeron “soportes automatizados tales como: registro de participantes, creación y asignación de
5European Journal of Education and Psychology 2021, Vol. 14, Nº 2 (Págs. 1-29) DE TORO. Plataforma online de evaluación de compromiso escolar, versión 3.0: Avance hacia un sistema… códigos de acceso, registro de nuevos colegios y sostenedores participantes; y creación de perfiles de usuarios” (Saracostti et al., 2021b, p. 139). Finalmente, con el propósito de fortalecer el seguimiento de las trayectorias educativas y apoyar la gestión de las escuelas se avanzó hacia la construcción de una versión actualizada de la plataforma con la lógica de un sistema mediante un proyecto de investigación cuyo objetivo ha sido “implementar un sistema integrado de evaluación, seguimiento y promoción de compromiso escolar y factores contextuales para la prevención de la deserción y para la retención de estudiantes en tránsito educativo desde 5° básico a 4° medio (segundo ciclo de primaria y secundaria), facilitando la transferencia y escalamiento del dispositivo a nivel nacional” (Saracostti et al., 2019c). Este artículo tiene como finalidad mostrar los resultados asociados al producto científico-tecnológico de la investigación señalada que tomó como referencia el modelo de sistema de alerta temprana desarrollado por National High School Center at American Institutes for Research (AIR, 2020); el cual contempla resultados prometedores en la reducción de ausencias crónicas y cursos reprobados en los grupos experimentales luego de un año de la implementación (Faria et al., 2017). MÉTODO Para avanzar desde el desarrollo de una plataforma de evaluación online a un sistema de protección de las trayectorias educativas, se utilizó la misma metodología de desarrollo de la plataforma anterior, específicamente las guías propuestas por la metodología de desarrollo de software basada en SCRUM (Schwab, Hundhausen y Starr, 2015). Dicha metodología comprende tres actores claves: el cliente o contraparte (parte del equipo investigador), la empresa desarrolladora (con un jefe de proyecto y un ingeniero informático) y un equipo de validación compuesta por profesionales del equipo de investigación, así como la retroalimentación aportada por los equipos profesionales de los nueve establecimientos escolares que participan del pilotaje de la implementación del sistema. Dicha metodología considera la división del proyecto en fases incrementales, siendo los prototipos funcionales revisados periódicamente por la contraparte y un equipo externo responsable de su aplicación con colegios del sistema escolar, de tal modo que se pudo ir verificando durante todo el proceso las mejoras continuas que se fueron implementando en la plataforma: a. Definición de requerimientos: levantamiento preliminar de los requerimientos para el paso de una plataforma con módulos, como había sido ejecutado en sus versiones previas, a un Sistema Integrado de Evaluación, Seguimiento y Estrategias de Promoción de Compromiso Estudiantil y Factores Contextuales (SIESE), junto con una estimación del tiempo necesario para desarrollar cada componente funcional. Los requerimientos consistieron en un sistema de seis pasos que guían su ejecución y un conjunto de elementos transversales de apoyo a la implementación de cada paso.
DE TORO. Plataforma online de evaluación de compromiso escolar, versión 3.0: Avance hacia un sistema… 6 European Journal of Education and Psychology 2021, Vol. 14, Nº 2 (Págs. 1-29) b. Diseño funcional y gráfico: en esta etapa se trabajó en dos líneas. Por un lado, en el diseño gráfico de la estructura y de los distintos componentes del sistema para ser utilizado de manera intuitiva en computador y en dispositivos móviles. Por otro lado, se elaboró el contenido educativo para guiar el uso de la plataforma en cada uno de sus pasos, así como el contenido de las herramientas transversales nuevas en comparación con las versiones previas de la plataforma. c. Desarrollo incremental: programación de los componentes del SIESE, bajo un modelo de desarrollo incremental de prototipos que se fueron liberando de manera periódica para su revisión y prueba por parte de los distintos actores involucrados. Adicionalmente se incorporaron mejoras a las herramientas ya existentes en las versiones previas de la plataforma. Por ejemplo, la adaptación y validación de los instrumentos de compromiso escolar y factores contextuales de manera tal que fueran pertinentes de utilizar en un contexto de clases presenciales y/o virtuales producto de la pandemia del COVID 19 y en los cursos restantes para cubrir todo el segundo ciclo de primaria y secundaria. d. Pruebas y correcciones técnicas: para asegurar la calidad de los componentes del software desarrollados se contempló un proceso continuo de revisión y mejora de aspectos técnicos funcionales y de usabilidad de los componentes, que incluyó a los investigadores que estaban haciendo el trabajo de campo. e. Aplicación: esta fase contempló la aplicación a nivel piloto del SIESE en nueve escuelas de dos regiones de la macrozona central de Chile para evaluar la utilidad y uso de la plataforma. Participaron del estudio 13 cursos como grupos experimentales (288 estudiantes). De forma paralela el equipo de investigación realizó un acompañamiento a las escuelas, completando unas fichas de registro para levantar facilitadores y obstaculizadores encontrados, además de incorporar una valoración sobre el paso implementado. Posteriormente realizaron entrevistas personalizadas a profesionales que implementaron el SIESE dentro de las escuelas experimentales. Dicha información fue sistematizada por el equipo para levantar deficiencias y realizar los últimos ajustes. Cabe añadir que el estudio recibió la aprobación del Comité de Ética de la Universidad Autónoma de Chile (Nº CEC 10-20). RESULTADOS A partir de la metodología implementada se logró pasar de una plataforma con tres módulos funcionales (encuestas, reportes y recursos de apoyo) a un sistema integrado de seis pasos a desarrollar secuencialmente y de manera coordinada respecto al calendario del año escolar. A ello se añaden seis herramientas transversales, que involucran tanto la evaluación y el seguimiento del compromiso escolar y factores contextuales de NNA, así como un modelo de trabajo basado en la planificación y aplicación de intervenciones tempranas
7European Journal of Education and Psychology 2021, Vol. 14, Nº 2 (Págs. 1-29) DE TORO. Plataforma online de evaluación de compromiso escolar, versión 3.0: Avance hacia un sistema… basadas en la evidencia considerando los resultados arrojados por los reportes del sistema. De esta manera el SIESE se constituye como un sistema que apoya la gestión de las escuelas sobre la base de un trabajo asociativo y coordinado en las instancias de toma de decisiones, buscando beneficiar a NNA desde los 10 años hasta el término de su ciclo escolar. El SIESE puede ser implementado tanto en modalidad de educación presencial como a distancia o virtual, dado que todos los recursos asociados fueron adaptados a una modalidad remota. Seis pasos del SIESE El SIESE está compuesto por seis pasos como se muestra en la Figura 1: Figura 1. Página de inicio del Sistema Integrado de Evaluación, Seguimiento y Estrategias de Promoción de Compromiso Estudiantil y Factores Contextuales. Fuente: https://compromisoescolar.com/ El paso 1, denominado “Conformación de la Mesa de compromiso escolar” (https:// compromisoescolar.com/paso-1), involucra la conformación de un espacio representativo y participativo dentro del establecimiento, que guiará la aplicación del SIESE. Dicho espacio se sugiere que esté compuesto por profesores/as, estudiantes y apoderados/as. También considera la selección del rol de coordinador/a de la Mesa de compromiso escolar, encargado/a de liderar la implementación del SIESE de los cursos a cargo. El paso 2, denominado “Medición del compromiso escolar” (https://compromisoescolar. com/paso-2), contiene la aplicación online, masiva y rápida, del instrumento de medición del compromiso escolar y factores contextuales (Lara et al., 2018; Navarro et al., 2021; Sotomayor et al., 2021). Se trata de un auto reporte a ser contestado en línea. El tiempo
DE TORO. Plataforma online de evaluación de compromiso escolar, versión 3.0: Avance hacia un sistema… 8 European Journal of Education and Psychology 2021, Vol. 14, Nº 2 (Págs. 1-29) promedio estimado para que las y los estudiantes completen la encuesta es de unos 30 a 40 minutos. Dichos instrumentos han sido validados y han demostrado tener un valor predictivo sobre aquellas variables que impactan las trayectorias educativas (Miranda- Zapata et al., 2018). El paso 3, denominado “Revisión y análisis de la información” (https://compromisoescolar. com/paso-3), involucra la descarga de reportes de los resultados de la medición realizada por parte de todos/as los/as usuarios/as (exceptuando a los/as estudiantes), para ser analizados en la reunión de la mesa calendarizada para tal objetivo. Existen cuatro tipos de reportes: por estudiante, por curso, por establecimiento escolar y por sostenedor. Cada uno involucra resultados cualitativos y cuantitativos organizados en un gráfico de dispersión de cuatro perfiles (variables compromiso escolar y factores contextuales), que reportaría por dimensiones y niveles e identificación de alertas y fortalezas. Vale destacar que los informes pueden ser anual o de seguimiento longitudinal y se puede apreciar directamente en línea o en su versión descargable. El paso 4, denominado “Selección e implementación de las estrategias de promoción del compromiso escolar” (https://compromisoescolar.com/paso-4), provee de un buscador de estrategias de promoción del compromiso escolar y factores contextuales (ver figura 2) para generar un plan de acción en el establecimiento. La selección de las estrategias se hizo a partir de una revisión exhaustiva de evidencia tanto internacional como nacional (Leyton et al., 2020), para luego ser revisadas por 20 profesores(as) y profesionales de la educación que participaron en 20 entrevistas semi-estructuradas individuales para su adaptación al contexto nacional. Como resultado se obtuvieron 23 fichas de estrategias que pueden ser revisadas en línea o descargadas para su análisis con los actores de la Mesa de compromiso escolar (Saracostti et al., 2021)). Las estrategias incluyen algunas para ser implementadas en forma presencial como en educación a distancia considerando futuras contingencias producto de esta pandemia u otra; y con diferentes niveles de focalización, algunas de tipo universal, otras de tipo focalizada y estrategias personalizadas. Así se pretende abordar las distintas necesidades emergentes en el contexto educativo. La plataforma también ofrece un compendio explicativo con todas las estrategias disponibles (https://compromisoescolar. com/estrategias).
9European Journal of Education and Psychology 2021, Vol. 14, Nº 2 (Págs. 1-29) DE TORO. Plataforma online de evaluación de compromiso escolar, versión 3.0: Avance hacia un sistema… Figura 2: Buscador de estrategias de promoción del compromiso escolar y factores contextuales. Fuente: https://compromisoescolar.com/ El paso 5, denominado “Seguimiento de estudiantes y de las estrategias de promoción de compromiso escolar” (https://compromisoescolar.com/paso-5), contempla el proceso de intervención socioeducativa y su seguimiento, orientada a la promoción del compromiso escolar y factores contextuales. Este proceso contempla además el ajuste de las estrategias implementadas a partir de su evaluación en conjunto con la Mesa de compromiso escolar. Finalmente, el paso 6, denominado “Evaluación y ajuste de la implementación del SIESE” (https://compromisoescolar.com/paso-6), propone realizar una evaluación conjunta de los facilitadores y obstaculizadores de la implementación del SIESE durante el año, junto con los ajustes de las estrategias aplicadas a considerar para el período siguiente. La Tabla 1 describe la información que es posible encontrar en cada paso.
DE TORO. Plataforma online de evaluación de compromiso escolar, versión 3.0: Avance hacia un sistema… 16 European Journal of Education and Psychology 2021, Vol. 14, Nº 2 (Págs. 1-29) Buscador de estrategias: El buscador de estrategias de promoción del CE y FC está abierto a cualquier usuario/a del SIESE y permite seleccionar con criterios -asociados a los subdimensiones del CE y los FC -la estrategia más adecuada para cada curso y estudiante, en base a la reportería web y descargable que facilita el Sistema (Ver figura 6 y 7). Figura 6: Buscador de estrategias de promoción del compromiso escolar y factores contextuales. Fuente: https://compromisoescolar.com/estrategias
17European Journal of Education and Psychology 2021, Vol. 14, Nº 2 (Págs. 1-29) DE TORO. Plataforma online de evaluación de compromiso escolar, versión 3.0: Avance hacia un sistema… Figura 7: Ejemplo de estrategia de promoción del compromiso escolar y factores contextuales en versión descargable. Fuente: https://compromisoescolar.com/estrategias Fichas SIESE: Se trata de fichas técnicas de apoyo a la gestión de las escuelas y de la Mesa de Compromiso Escolar para ser completadas por los/as coordinadores con una clave previamente habilitada. Las fichas son por cada curso y permiten ver información de manera longitudinal, es decir, se puede acceder a las fichas completadas de hasta cuatro años anteriores para ese mismo grupo de estudiantes (cursos anteriores). a) Ficha del plan de acción: Esta ficha es para ser completada luego de haber analizado la información arrojada por la medición del compromiso escolar y factores contextuales de cada curso. El coordinador/a debe completar esta ficha luego de haber identificado, en conjunto con la Mesa de compromiso escolar, las estrategias de intervención más
DE TORO. Plataforma online de evaluación de compromiso escolar, versión 3.0: Avance hacia un sistema… 18 European Journal of Education and Psychology 2021, Vol. 14, Nº 2 (Págs. 1-29) pertinentes al curso y la escuela. Además, en esta ficha se puede acceder al reporte de resultados por curso del año respectivo y al reporte longitudinal que considera los resultados de medición de todos los años anteriores (ver figura 8). Figura 8: Ficha SIESE de plan de acción. Fuente: https://compromisoescolar.com/ b) Fichas de seguimiento y monitoreo: Esta ficha es para ser completada por el coordinador/a luego de cada reunión de la Mesa de compromiso escolar y de manera posterior a la ficha del plan de acción. Es utilizada para evaluar la necesidad de hacer algún ajuste con relación a las estrategias de promoción y registrar qué cambios se observan en el aula, incluyendo cambios en rendimiento, asistencia o comportamiento (ver figura 9).
19European Journal of Education and Psychology 2021, Vol. 14, Nº 2 (Págs. 1-29) DE TORO. Plataforma online de evaluación de compromiso escolar, versión 3.0: Avance hacia un sistema… Figura 9: Ficha SIESE de seguimiento y monitoreo. Fuente: https://compromisoescolar.com/
DE TORO. Plataforma online de evaluación de compromiso escolar, versión 3.0: Avance hacia un sistema… 20 European Journal of Education and Psychology 2021, Vol. 14, Nº 2 (Págs. 1-29) c) Ficha de cierre: Esta ficha es para ser completada por el coordinador/a al final del año escolar luego de haber hecho en conjunto con los integrantes de la Mesa de compromiso escolar un análisis de los aprendizajes, las dificultades y los obstaculizadores del proceso de implementación del SIESE (ver figura 10). Figura 10: Ficha SIESE de Cierre. Fuente: https://compromisoescolar.com/
21European Journal of Education and Psychology 2021, Vol. 14, Nº 2 (Págs. 1-29) DE TORO. Plataforma online de evaluación de compromiso escolar, versión 3.0: Avance hacia un sistema… d) Ficha individual: Esta ficha es para ser completada por el coordinador/a por cada estudiante que requiere un apoyo adicional de acuerdo con los resultados arrojados por la plataforma. La información individualizada que arroja por estudiante se espera que sea revisada en otras instancias especializadas que la escuela estime pertinente, distintas a la Mesa de compromiso escolar. Así se evitan estigmatizaciones involuntarias hacia las y los estudiantes. En esta ficha también se puede acceder a los reportes individuales del año en curso y los reportes longitudinales (ver figura 11). Figura 11: Ficha SIESE individual. Fuente: https://compromisoescolar.com/
DE TORO. Plataforma online de evaluación de compromiso escolar, versión 3.0: Avance hacia un sistema… 22 European Journal of Education and Psychology 2021, Vol. 14, Nº 2 (Págs. 1-29) DISCUSIÓN/ CONCLUSIONES Dentro de las principales ventajas y beneficios del SIESE se han destacado, en primer lugar, la aplicación online de manera masiva, rápida y gratuita de los instrumentos de medición, junto con la posibilidad de registrar y monitorear el desarrollo de un plan estratégico, informado y consensuado por la comunidad educativa. Esto dado que el SIESE facilita la evaluación permanente y oportuna, y orienta el análisis para la ejecución de intervenciones pertinentes a cada contexto escolar. Así, junto con otorgar la posibilidad de un diagnóstico en un momento dado, también posibilita el seguimiento de estudiantes, cursos y establecimientos escolares. Por otra parte, la información automatizada que provee el SIESE mediante la emisión de reportes de información individual y agregada, favorece el proceso de conocimiento y autoconocimiento del estudiantado. Ello posibilita y orienta la selección de estrategias universales y personalizadas según el contexto y necesidades de cada escuela y/o curso. Su implementación se basa en el involucramiento de todos los actores de las comunidades educativas, mediante un proceso participativo de autogestión, lo que permite desarrollar y promover capacidades. Otro aspecto que destacar es el carácter complementario del SIESE con otras iniciativas de la política educativa y con otras instancias en desarrollo en las escuelas, al facilitar la sistematización integrada de datos y evitando así la duplicación de trabajo. En términos de usabilidad, la retroalimentación entregada por los equipos de terreno y los potenciales usuarios/as del SIESE permitió consolidar la plataforma de manera tal de poder cumplir con funcionalidades y recomendaciones de Nielsen (Diaz, Harari, & Amadeo, 2013) tales como: lenguaje amigable y familiar para el usuario/a; la prevención de errores con mensajes de advertencia previo a una acción determinada; mensajes aclaratorios o ayuda para no caer en errores (ej.: añadiendo respuestas modelo en las fichas SIESE o evitando que el instrumento de medición se mande sin haber completado todos los ítems solicitados); ayuda frente a los errores (ej.: insertando un recuperador de clave); consistencia visual en términos de diseño; y el uso de auxiliares o caminos alternativos para acceder a los elementos del SIESE desde cualquier interfaz sin tener que recordar donde estaba la información. Adicionalmente, tanto la experiencia piloto del SIESE como la literatura científica (de Toro, 2015) sugieren asegurar tres ámbitos de acción para que sistemas de gestión educativa, como el SIESE, resulten beneficiosos para las escuelas y sus estudiantes: a) el compromiso y apoyo de autoridades locales; b) el proveer de información y/o indicadores longitudinales y; c) la optimización de los recursos existentes. El apoyo por parte de las autoridades locales y líderes intermedios educativos es una condición de base para la instalación de este tipo de sistemas en las comunidades escolares de manera sostenible en el tiempo. En este sentido, se releva la importancia que los tomadores de decisión refuercen este interés mediante acciones concretas en materia de política pública
23European Journal of Education and Psychology 2021, Vol. 14, Nº 2 (Págs. 1-29) DE TORO. Plataforma online de evaluación de compromiso escolar, versión 3.0: Avance hacia un sistema… que incentiven la articulación inter e intrainstitucional. Tal apoyo, que se ha dado en el transcurso del proyecto, es clave para que el SIESE sea parte del modelo de gestión de las escuelas y que, por ejemplo, los/as coordinadores/as cuenten con tiempo dentro de su jornada laboral para la gestión del SIESE. Esto va en línea con Anderson (2017), quien destaca el resguardar el nivel territorial intermedio para asegurar la implementación efectiva de herramientas de apoyo, pues así se vela tanto por la coherencia integral a nivel de sistema, pero sin perder de vista las particularidades de cada establecimiento educativo. El segundo ámbito de acción, y siguiendo los aprendizajes de la experiencia piloto y las conclusiones planteadas por Parra y Matus (2018) sobre el uso de datos para la mejora escolar, es recomendable contar con sistemas de registro digitales que sistematicen información y entreguen indicadores a lo largo del tiempo, de manera tal de poder identificar rápida y oportunamente las fortalezas y alertas de estudiantes en un momento dado; y por otra, hacer un seguimiento en distintos períodos de acuerdo a las etapas de transición educativa, de acuerdo a los requerimientos internos de las escuelas. Dichos sistemas digitales y de fácil uso como el SIESE son pertinentes en atención a la alta carga laboral de las escuelas, destacándose también que SIESE entrega información oportuna a diferencias de otros instrumentos de medición a nivel nacional cuyos resultados no son simultáneos. El uso de información oportuna para la toma de decisiones es considerado como una estrategia clave para fortalecer las trayectorias educativas y mejorar la gestión escolar. Destaca el SIESE por entregar información basada no solo en las necesidades de los estudiantes, sino también en sus fortalezas. Sin embargo, habría una brecha en lo que respecta al uso de la información disponible en las escuelas (Santana, Reininger y Saracostti, 2019) siendo un desafío la apropiación de herramientas de planificación aplicadas a diversas áreas de cambio en la escuela. En lo que respecta a este ámbito de acción, un desafío pendiente es la inclusión de los primeros años de escolaridad del SIESE con tal de abarcar toda la trayectoria escolar. Lo anterior es relevante pues estudios recientes (Garrett-Peters et al., 2019) sostienen que los orígenes del abandono escolar pueden ser identificados a edades tempranas (8-9 años), reafirmando la idea de que el abandono escolar es un proceso de desvinculación progresiva que involucra factores individuales y contextuales (Rumberger, 2011). De la misma manera, según investigaciones de Archambault (2012) existen signos precoces de falta de compromiso escolar a partir del inicio de primaria, lo que sugiere atención prioritaria por su impacto futuro en dificultades escolares. La tercera condición expuesta en de Toro (2015) tiene relación con la maximización de las intervenciones disponibles para la promoción de la retención escolar, pues la identificación de los y las estudiantes que requieren más apoyo pierde sentido si ello no va acompañado a una red de programas de intervención por nivel de complejidad y cuya efectividad debería estar también validada. Si bien el buscador de estrategias aporta a
DE TORO. Plataforma online de evaluación de compromiso escolar, versión 3.0: Avance hacia un sistema… 24 European Journal of Education and Psychology 2021, Vol. 14, Nº 2 (Págs. 1-29) satisfacer dicho componente, un desafío pendiente es el avanzar hacia la evaluación de la implementación de dichas estrategias y la consolidación de estrategias por nivel educativo. Al respecto cabe añadir que actualmente este equipo de investigación está trabajando en la evaluación del SIESE a través de un diseño cuasi experimental y la medición de cambios en compromiso escolar, factores de contexto, notas y/o asistencia en cursos de estudiantes en tránsito educativo entre segundo ciclo de educación básica y media que surgen a partir de la implementación del SIESE. Finalmente, el desafío para la política pública está en la consolidación de una estructura pública a escala nacional y territorial que favorezca la protección de trayectorias educativas positivas, diversas e inclusivas a partir de la premisa del derecho a la educación y la importancia del compromiso escolar. Lo anterior implica un trabajo sólido en términos de transferencia, y si bien la plataforma es lo bastante autónoma y los recursos de capacitación están en línea, es necesario un trabajo directo con los gestores educacionales para sensibilizar a los usuarios/as sobre su valor, la importancia de incorporar las tecnologías en la gestión y su adherencia en el tiempo para que sea posible un seguimiento longitudinal. Esto es de especial interés pues en el caso de Chile se da una subutilización de las tecnologías de la información para facilitar los procesos de gestión y liderazgo dentro de las escuelas que “implica abordar no sólo aspectos técnicos o de capacidades ya que las resistencias reflejan más bien creencias y actitudes respecto de la utilidad versus los costos de intensificar su uso” (Hepp et al., 2017). Al respecto, un paso fundamental fue la transferencia bajo la figura de un convenio de licenciamiento del SIESE al Ministerio de Educación de Chile (Decreto exento nº 01117 del 09 de septiembre de 2021) para ser masificado en su uso a nivel nacional, con la intención de materializarlo como política pública en materia de retención escolar y protección universal de las trayectorias educativas. De este modo se esperan que más estudiantes, escuelas y organismos locales se vean beneficiados con los aportes del SIESE. Financiamiento Este artículo fue desarrollado con financiamiento del proyecto FONDEF IT N° 19I0012 y ANID / FONDECYT N° 1210172. REFERENCIAS American Institute for Research [AIR] (2020). Early Warning Intervention and Monitoring System Implementation Guide. Recuperado de: https://bit.ly/3s5BXEA Anderson, S. (2017). El nivel intermedio en educación y el mejoramiento escolar. Líderes Educativos. Informe Técnico Nº1. Recuperado de: https://bit.ly/3GQJ7AN
25European Journal of Education and Psychology 2021, Vol. 14, Nº 2 (Págs. 1-29) DE TORO. Plataforma online de evaluación de compromiso escolar, versión 3.0: Avance hacia un sistema… Ansong, D., Okumu, M., Bowen, G. L., Walker, A. M., & Eisensmith, S. R. (2017). The role of parent, classmate, and teacher support in student engagement: Evidence from Ghana. International Journal of Educational Development, 54, 51–58. http://doi. org/10.1016/j.ijedudev.2017.03.010 Archambault, I., Janosz, M., Fallu, J., & Pagani, L. (2009). Student engagement and its relationship with early high school dropout. Journal of Adolescence, 32(3), 651-670. http://doi.org/10.1016/j.adolescence.2008.06.007 Bravo-Sanzana, M., Saracostti, M., Lara, L., Diaz-Jiménez, R. M., Navarro-Loli, J.S., Acevedo, F., & Aparicio, J. (2021). Compromiso escolar: Trayectoria y política educativa en Iberoamérica. Revista Iberoamericana de Diagnóstico y Evaluación – e Avaliação Psicológica, 59(2), 81-94. https://doi.org/10.21865/RIDEP59.2.07 Bruce, M., Bridgeland, J., Hornig, J., & Balfanz, R. (2011). On Track for Success. The Use of Early Warning Indicator and Intervention Systems to Build a Grad Nation. Washington, DC: Civic Enterprises, Everyone Graduates Center. https://bit.ly/3sa3FjE Christenson, S. L., Reschly, A. L., Appleton, J. J., Berman, S., Spangers, D., & Varro, P. (2008). Best practices in fostering student engagement. En A. Thomas y J. Grimes (Eds.), Best practices in school psychology V (pp. 1099–1120). Washington, DC: National Association of School Psychologists. Comisión Europea. (2011). Tackling early school leaving: A key contribution to the Europe 2020 Agenda. Brussels: Communication from the Commission to the European Parliament, the Council, the European Economic and Social Committee and the Committee of the Regions. https://bit.ly/321M42D De Toro, X. (2015). Sistema de Alerta Temprana para prevenir la deserción escolar: oportunidades, tensiones y desafíos para la Escuela Marcial Martínez de Ferrari de El Bosque a la luz de experiencias internacionales. En Saracostti, M & Villalobos, C. (eds). Familia, Escuela y Comunidad III: Implementando el modelo de intervención biopsicosocial. Santiago: Editorial Universitaria. Díaz, J., Harari, I., & Amadeo, P. (2013). Guía de recomendaciones para diseño de software centrado en el usuario. D – Editorial de la Universidad Nacional de La Plata. Faria, A. M., Sorensen, N., Heppen, J., Bowdon, J., Taylor, S., Eisner, R., & Foster, S. (2017). Getting students on track for graduation: Impacts of the Early Warning Intervention and Monitoring System after one year (REL 2017–272). Washington, DC: U.S. Department of Education, Institute of Education Sciences, National Center for Education Evaluation and Regional Assistance, Regional Educational Laboratory Midwest. https://bit.ly/3H2FTKH