Evaluación de material videográfico de apoyo al aula de primaria

- 43 - Pixel-Bit. Revista de Medios y Educación EVALUACIÓN DE MATERIAL VIDEOGRÁFICO DE APOYO AL AULA DE PRIMARIA Manuel Cebrián de la Serna [email protected] Noelia Solano Garrido Universidad de Málaga (España) Este artículo es parte del subproyecto de investigación dentro de un proyecto más ambicioso financiado por el MEC tras convocatoria de I+D con fondos Feder . En este proyecto han participado de forma multidisciplinar biólogos y pedagogos con funciones distintas y coordinados. Aquí relatamos parte de la evaluación desarrollada en el subproyecto pedagógico que tiene por objetivo la evaluación de materiales y productos generados en el proyecto. Palabras clave:Educación Ambiental, Evaluación de vídeos didácticos. This article is part of the subproject of investigation within a more ambitious project financed by MEC and Feder. In this project they have participated in form to multidiscipline to biologists and pedagogos with different and coordinated functions. Here we related part of the evaluation developed in the pedagogical subproject that has by objective the evaluation of materials and products generated in the project. Key words: Environmental education, Evaluation of didactic videoes. Nº 33 Julio 2008 pp. 43 - 58 Introducción El proyecto de investigación desarrollado ha tenido como finalidad la conservación de aves amenazadas en peligro de extinción a través de la cría en cautividad y reintroducción en su hábitat natural. Para ello, ha sido fundamental conocer el grado de conservación de la especie así como su hábitat. En este sentido es preciso poner en relieve la interacción del ser humano con el entorno y el modo en que una determinada cultura influye directamente sobre la salud del Medio. La sensibilización y concienciación hacia el Medioambiente se constituye en uno de los objetivos principales del proyecto citado, a través de la difusión del conocimiento científico generado a los diferentes sectores de la población (estudiantes desde la etapa de educación primaria hasta universitarios y público en general). La tarea principal realizada por el equipo de pedagogía ha consistido en diversas funciones: -Ofrecer el soporte técnico para la observación sistemática (p.e. cámaras de video introducidas en los nidos), recogida y tratamiento de datos. Trabajo que no abordaremos en este artículo. 1-Revisión de los diseños curriculares desde las distintas etapas y desde donde extraer los conceptos y contenidos para trabajar en clase y adaptando a este currículo - 44 - Cebrián, M y Solano, N. los hallazgos encontrados en la investigación biológica. 2-Elaboración de guiones para la producción de los materiales didácticos, web y vídeos. 3-Dirigir la producción y post-producción técnica procurando que esta sea fiel a los objetivos y guiones didácticos. 4-Diseño, producción y evaluación de los materiales producidos en los contextos finales. El diseño general puede verse en la siguiente gráfica, si bien, aquí solo abordaremos el apartado: Evaluación de la maqueta. Las nuevas tecnologías se convierten en poderosa aliada para este fin y a través de la difusión del mensaje en soporte vídeo se pretende promover actitudes de respeto y comportamientos proambientales. Sin duda, las actitudes precedidas como no, de los pensamientos moldeados por los valores, se convierten en la verdadera clave que permite proteger y mejorar nuestro entorno. El conocimiento científico alcanza un papel relevante en este cometido, ya que ofrece datos reales y objetivos que fundamentan la necesidad del cambio y orientan hacia el mismo con prácticas que permiten la sostenibilidad de nuestro planeta. Koïchiro Matsuura, director general de la UNESCO (2000) reconoció el gran papel de la educación en el tema Medioambiental: «La Educación es una prioridad absoluta, porque es condición previa para el desarrollo sostenible....» 1. Diseño y elaboración de material didáctico en soporte vídeo Uno de los objetivos del proyecto citado es elaborar un mensaje a través de un lenguaje claro y cotidiano que difunda los resultados de la investigación desarrollada a la población, a través de los diferentes medios tecnológicos (vídeos e internet1). El compromiso de los investigadores del departamento de Métodos de Investigación e Innovación Educativa de la facultad de Ciencias de la Educación de la Universidad de Málaga se centra en este aspecto y han elaborado materiales didácticos en soporte multimedia para difundir los resultados de la investigación desarrollada. De este modo, se pretende favorecer un nexo entre la escuela y la investigación científica llevada a cabo, difundiendo información sobre la misma y contribuyendo a los objetivos de la Educación Medioambiental. Entre los materiales elaborados vamos a dedicar este artículo a exponer el proceso de evaluación del vídeo didáctico destinado a alumnos de Educación Primaria. «Definimos el vídeo didáctico por su principal característica y crucial circunstancia: que esté diseñado, producido, experimentado y evaluado para ser insertado en un proceso concreto de enseñanza - aprendizaje de forma creativa y dinámica». (Cebrián y Ríos, 2000:168) La selección de este tipo de material se fundamenta en las funciones que la propia naturaleza del material en soporte video ofrece: - Estimular el interés del alumnado sobre un tema - función motivadora- El vídeo puede favorecer la curiosidad de los alumnos sobre el tema en cuestión, promoviendo el planteamiento personal de interrogantes y la participación en actividades posteriores. - 45 - Pixel-Bit. Revista de Medios y Educación - Enlazar con conocimientos previos del alumnado -función organizadora del conocimiento- En niveles educativos donde el tema se haya visto en cursos anteriores podemos hacer uso del vídeo para recordar los conocimientos adquiridos anteriormente y preparar así, para profundizar en dichos conocimientos de una forma significativa. - Ilustrar las explicaciones del profesor - función ilustrativa - Eliminando el sonido, disponemos de una sucesión de imágenes que pueden servir para ilustrar las explicaciones del profesor, quien podrá detener dichas imágenes cuando lo estime oportuno. - 46 - Cebrián, M y Solano, N. - Informar sobre un tema de interés - función informativa - Expone una información útil sobre el tema abordado. - Evaluación del conocimiento de los alumnos - función evaluadora - Eliminada la voz, podemos establecer una serie de cuestiones sobre las imágenes del vídeo y que los alumnos respondan de forma individual o grupal en los cuadernos de clase. El vídeo evaluado es un documental (según la clasificación expuesta por Marqués Graells 2001 y Bartolomé 2000) de 14 minutos de duración, cuya temática «Aves en Peligro de Extinción» se dirige a estudiantes de los niveles 4º, 5º y 6º de E.P.. Teniendo en cuenta su temática general y los contenidos en él tratados, se destina al área de Conocimiento del Medio Natural, Social y Cultural y a las transversales: Educación Ambiental y Educación en Valores. Ofrece información sobre los siguientes temas: 1. Las aves: sus características generales y específicas. 2.La responsabilidad del ser humano hacia el Medioambiente: acciones perjudiciales. 3. El trabajo de los científicos para conservar especies de aves en peligro de extinción a través de la cría en cautividad y reintroducción en su hábitat. 4. La importancia de conservación de la biodiversidad para la protección del Medio. 2. La evaluación de vídeos didácticos La investigación evaluativa de los vídeos pretende complementar y aportar datos de valor al proceso de producción, por cuanto que, aspira a ofrecer información significativa para mejorar la calidad de los objetivos pretendidos, llegando a un material de mayor calidad educativa. Salinas (1992) define la evaluación de medios, como «los ensayos experimentales de productos didácticos en fase de producción, o la consulta a expertos sobre dichos materiales». Ambos procedimientos - experimentación y consulta a expertos - no deben ser considerados excluyentes, más bien se complementan y aportan una visión ampliada, global y rica en matices. A continuación, se presenta el modelo de evaluación aplicado para la valoración del videograma producido para la Educación Primaria. Es un proceso de evaluación orientado a la toma de decisiones, en cuanto que persigue la mejora del vídeo. 2.1.Diseño de la evaluación El diseño propuesto para la evaluación del vídeo podemos definirlo como preexperimental e intrasujeto. Es pre-experimental porque carece de requisitos exigibles para ser considerado experimental, como por ejemplo la intervención del experimentador para la asignación de sujetos a grupos, alto control de las variables extrañas, control sobre la variable independiente, etc. Por lo que se presenta un diseño pretest-postest. En este tipo de diseño se comparan dos grupos de medidas de la variable dependiente. Un grupo antes de aplicar la variable independiente y el otro una vez finalizado el tratamiento (Colás y Buendía, 1992: 118). Es un diseño intrasujeto porque cada uno de los alumnos participantes es control de sí - 47 - Pixel-Bit. Revista de Medios y Educación mismo. Concretamente se llevará a cabo un diseño AB, según lo denominan Baer y colaboradores (1968) al referirse a los tipos de diseño intrasujeto. (Citado en Colás y Buendía, 1992: 118) Al igual que en el diseño pretest-postest, en el diseño intrasujeto se aprecia dos fases claramente diferenciadas: 1) Valores de la variable dependiente antes del visionado 2) Cambios habidos tras el visionado 2.2.Objetivos de la evaluación videográfica A través de la evaluación del vídeo, en la fase de producción, se persigue mejorar la calidad del material creado, de forma que pueda ser considerado bajo criterios de eficacia, eficiencia y funcionalidad según los fines y objetivos a los que atiende. Sobre todo, debe resultar un material útil en el proceso de enseñanza-aprendizaje, favorecedor de una metodología dinámica y constructiva en el aula. ¿Qué objetivos nos proponemos con la evaluación del material en soporte vídeo? Objetivo 1. Validar los instrumentos de evaluación creados. Objetivo 2. Verificar experimentalmente la calidad de los videos y guías didácticas. El primer objetivo responde a la necesidad de confirmar la valía de los cuestionarios diseñados, o en su caso, modificar aquellos aspectos que se estimen oportunos a la luz de los datos arrojados en el proceso de la evaluación. Es decir, se pretende conocer la eficacia de dichos instrumentos. Para ello prestamos atención a las observaciones realizadas durante el trabajo de campo, mientras el alumnado responden a las preguntas planteadas en los cuestionarios: dudas surgidas, comentarios realizados, etc. Este objetivo se puede realizar de forma experimental en una fase previa y sobre una muestra reducida, de forma que se depuren los posibles errores de los instrumentos. Con respecto al segundo objetivo planteado, se pretende comprobar si el material videográfico goza de la eficacia deseada, según sus propias características -técnicas, pedagógicas y de utilidad-, así como el modelo de intervención sugerido en la guía didáctica adjunta. Prestaremos atención a si favorece: * Motivación hacia el tema tratado por parte del alumnado * Aprendizaje de nuevos conocimientos * Satisfacción de sus usuarios Asimismo prestaremos atención a las características intrínsecas del material. Tal y como señala Cabero Almenara en «Evaluación de Medios Audiovisuales y Materiales de Enseñanza» se realizará una Evaluación del medio en sí, con el fin de realizar una valoración global del material videográfico, incluyendo sus características técnicas, estéticas, expresivas y didácticas. 2.3.Definición de variables La proyección del material videográfico supondrá nuestra variable independiente como recurso en el proceso de enseñanzaaprendizaje. En relación a las variables dependientes, debemos establecer una serie de criterios de calidad de los vídeos didácticos, que faciliten una reflexión profunda sobre el material y - 48 - Cebrián, M y Solano, N. sirva, de este modo a la recogida de datos. En términos operativos, vamos a considerar como variables dependientes: A) Adquisición de nuevos conocimientos: conceptuales, procedimentales y actitudinales. - Respuestas del alumnado antes y después del vídeo sobre los contenidos abordados. B) Motivación hacia el aprendizaje e interés hacia el tema - Actitud e interés observado. - Temas surgidos. - Participación en la actividad propuesta tras el visionado (debate). C) Satisfacción Expresión escrita sobre lo que más y menos ha gustado del vídeo: - Aspectos positivos atribuidos al material. - Aspectos negativos atribuidos al material. D) Características Intrínsecas atribuidas al material: -Aspectos didácticos - Motivación. - Comprensión de sus contenidos. - Organización de sus contenidos. - Interés de sus contenidos. - Nivel de profundidad de los contenidos. - Vocabulario adecuado. - Utilidad de las preguntas realizadas. - Adecuación de las preguntas realizadas al nivel del alumno y tema. - Utilidad de las actividades sugeridas. -Aspectos técnicos - Calidad de las imágenes. - Calidad del audio. - Sincronización audio/imágenes. -Su utilidad en el proceso de Enseñanza - Aprendizaje Es importante considerar aquellas variables extrañas que pueden influir en los resultados obtenidos. Entre ellas, podemos pensar en el nivel sociocultural, nivel cognitivo, experiencias previas con material videográfico, calidad de los equipos de televisión y vídeo, etc. Para controlar las variables extrañas que pudieran incidir en el estudio, recurriremos a la técnica descrita por Colás Bravo y Buendía (1992:88) denominada Constancia. Esta técnica de control consiste en mantener constantes las variables extrañas. Como se ha indicado no nos resulta posible mantener constantes todas las variables extrañas, pero se prestará especial cuidado a la intervención de la observadora que deberá ser nula, así como a la información dada por el profesor a sus alumnos antes del visionado del vídeo, siendo muy escueta, y nunca sobre contenidos tratados por el vídeo. 2.4. Muestra de estudio La muestra ha sido seleccionada bajo un método de muestreo polietápico, según la clasificación establecida por Bisquerra (1989: 84), el cual responde a la combinación de varios métodos. Así, la muestra ha sido seleccionada bajo las siguientes condiciones: por conglomerados grupo-clase de los niveles educativos a los que se dirige el vídeo (4º, 5º, 6º de E.P.), y casual (no probabilístico) en el sentido de que resulte fácil acceder a dicha muestra2. Asimismo, se ha tratado que cumpliendo las condiciones antes mencionadas, represente centros educativos - 49 - Pixel-Bit. Revista de Medios y Educación Momento 1 Cuestionario pretest Momento 2 Proyección Momento 3 Cuestionario postest Momento 4 Debate Profesorado Reparto de cuestionarios Pretest Proyección del vídeo Reparto de Cuestionarios Postest -Realización de una actividad participativa: debate sobre los contenidos del vídeo. -Valoración del Vídeo a través de Escala de Valoración, en sus aspectos: didácticos, técnicos, utilidad y la guía didáctica adjunta. -Asimismo, mediante entrevista informal semiestructurada se cuestiona sobre errores encontrados y sugerencias de mejora. Alumnado Conocimientos previos. Respuesta a Cuestionario Pretest. Visionado del vídeo Adquisición de nuevo conocimiento Respuesta a cuestionario postest Participación en el debate. Actitud mantenida Interés demostrado Participació n en actividades propuestas Valoración del video Observadora Observación de todo el proceso, recogiendo los datos en el Diario de campo Entrevista informal (si procede) - 50 - Cebrián, M y Solano, N. de diferentes status socioculturales y económicos de un área geográfica localizada en la provincia malagueña. En total, para el vídeo dirigido a Educación Primaria la muestra se compone de 492 alumnos/as de EP, con edades comprendidas entre los 9-12 años. Centros participantes en la evaluación: C.E.I.P. San Juan (Alhaurín de la Torre) C.E.I.P. San Sebastián (Alhaurín de la Torre) C.E.I.P. Zambrana (Alhaurín de la Torre) C.E.I.P. Tartessos (Málaga) 2.5. Metodología Los objetivos expuestos han sido desarrollados a través de una metodología cualitativa. El método responde a la experimentación del material en su contexto natural -experimentación de campo-, siendo aplicado por los propios profesores/as del alumnado definido en la muestra. Advertimos tres fases en la evaluación del video: 1º Fase: Diseño de instrumentos y toma de contacto con los centros participantes. Diseño de instrumentos de evaluación, contacto con los centros participantes, acuerdos en el protocolo de aplicación del material. Es preciso destacar que resulta importante realizar de forma previa una validación de los cuestionarios elaborados a través de su experimentación en una muestra reducida, indagándose sobre: - Comprensión de las cuestiones planteadas, a través de formulación de cuestiones por los encuestados en el momento de dar las respuestas. - Eficacia de los indicadores planteados en la evaluación videográfica. 2º Fase: Experimentación del video en el aula. Podemos distinguir cuatro momentos en la experimentación del vídeo en las aulas, que resumimos en el siguiente cuadro, atendiendo a sus destinatarios: 3ª Fase: triangulación y valoración de datos. Para Kemmis (1983) la triangulación consiste en un control cruzado entre diferentes fuentes de datos: personas, instrumentos, documentos o la combinación de todos ellos. (Citado en Bisquerra, 1989: 264). En este sentido, se analizan los datos recogidos a través de una triangulación y se exponen las conclusiones y propuestas de mejora. Es preciso señalar aquí que el proceso de evaluación desarrollado se completó con otra fase en la que se realizó una consulta a expertos en cuanto a valoraciones sobre la calidad de los guiones y de la maqueta producida, pero que no se recogerá aquí. - 51 - Pixel-Bit. Revista de Medios y Educación 2.6. Técnicas e Instrumentos de recogida de datos Técnicas e Instrumentos Características Diario de campo Permite recoger por escrito los hechos acontecidos en la experimentación de los vídeos, como la planificación del día, anécdotas, posibles imprevistos, impresiones, ideas… La finalidad general es disponer de una información descriptiva y reflexiva de la realidad donde se desarrolla la experimentación del material. Observación La compleja realidad del fenómeno educativo exige una continua observación de las variables que intervienen. La observación se propone como técnica permanente de recogida de datos y para que resulte sistemática se registrarán los datos en diversos instrumentos como el diario de campo y escala de valoración. Encuesta La elección de esta técnica viene justificada por la necesidad de obtener datos en un espacio temporal muy concreto y a un considerable número de personas. En relación al alumnado, se ha elaborado dos cuestionarios para ser aplicados en dos momentos del proceso evaluativo: pretest/postest (previsionado y postvisionado). Los cuestionarios pretest y postest son de respuestas cerradas de elección tanto dicotómicas (Si-No/Verdadero-Falso) como politómicas. En el postest también se ha incluido dos cuestiones de carácter abierto para que puedan expresarse los alumnos libremente. Escala de valoración (dirigida al profesorado) La escala de valoración puede ser muy útil cuando, en nuestro caso, requerimos del profesor su opinión sobre determinados aspectos del vídeo. En este instrumento concretamos una serie de indicadores que responden a la información que nos resulta relevante - aspectos didácticos, técnicos, utilidad del vídeo, guía didáctica, etc.-. La escala presenta una serie de enunciados que deben ser contestados seleccionando una de las opciones planteadas. Entrevista Informal (dirigida profesorado) A través de un diseño informal, no planificado, pueden obtenerse datos muy valiosos y verdaderamente significativos sobre el material a evaluar. Esta modalidad de entrevista no podemos preverla de antemano, surge casualmente entre evaluador-profesor. - 58 - Cebrián, M y Solano, N. MARQUÈS GRAELLS, P. ( 2001) Evaluación de Vídeos Didácticos http://dewey.uab.es/pmarques/ videoav2.htm#aspectos RÍOS ARIZA, J.M. y CEBRIÁN DE LA SERNA, M. (2000): Nuevas Tecnologías de la Comunicación y de la Información aplicadas a la Educación. Ediciones Aljibe, Málaga. ROLDÁN CASTRO, I. y CÁRDENAS SÁNCHEZ, T.(1994) Teoría y Práctica en la producción de un vídeo educativo, en Rev. Comunicar, num 3, pp. 43-49 SALINAS IBAÑEZ (1992): Diseño, producción y evaluación de vídeos didácticos. Palma : Universitat de les Illes Balears, Servei de Publicacions i Intercanvi Científic, D.L YECAS LAGUNA, G. (1999): La difusión ambiental a través de audiovisuales, en revista Razón y Palabra, num. 16. Fecha de entrada 14/01/2008 Fecha de evaluación 10/03/2008 Fecha de aceptación 20/03/2008 Notas 1 http://www.ieev.uma.es/tecedu/aves/ index.html 2 Esta última denominación también es conocida por Muestreo de conveniencia o muestreo accidental, según expresan Cohen y Manion (1990: 138) 3 Estas preguntas son: ¿Para qué tienen diferentes colores (las aves)? ¿Qué podemos hacer para evitar la desaparición de aves amenazadas? ¿Cómo ayudar a mejorar el Medio dónde vivimos y jugamos?