Comunicación mediada por ordenador: preparación de materiales de aprendizaje crítico en torno a los conceptos de identidad y fiabilidad en Internet
Abstract
Se presenta un resumen de la intervención realizada en un curso de Nuevas Tecnologías aplicadas al estudio lingüístico de la lengua inglesa en el grado de Estudios Ingleses de la Universidad de Sevilla. La propuesta tiene como objetivo incentivar mediante un ciclo de mejora docente (CMD) de 7 horas el desarrollo del espíritu crítico mediante el método investigativo y el trabajo en equipo en un contexto de clase silenciosa por parte del docente. La propuesta se enmarca en el modelo de Aprendizaje Basado en Proyectos (PBL, Project-Based Learning).
Full text
Esta obra se distribuye con la licencia Creative Commons Reconocimiento-NoComercial-SinObraDerivada 4.0 Internacional (CC BY-NC-ND 4.0.) Comunicación Mediada por Ordenador: Preparación de materiales de aprendizaje crítico en torno a los conceptos de identidad y fiabilidad en Internet Teresa Lopez-Soto Departamento de Filología Inglesa (Lengua Inglesa) Universidad de Sevilla ter[email protected] ORCID: https://orcid.org/0000-0001-5583-6321 D.O.I.: http://dx.doi.org/10.12795/JDU.2018.i01.68 Pp.: 1210-1229 Resumen Se presenta un resumen de la intervención realizada en un curso de Nuevas Tecnologías aplicadas al estudio lingüístico de la lengua inglesa en el grado de Estudios Ingleses de la Universidad de Sevilla. La propuesta tiene como objetivo incentivar mediante un ciclo de mejora docente (CMD) de 7 horas el desarrollo del espíritu crítico mediante el método investigativo y el trabajo en equipo en un contexto de clase silenciosa por parte del docente. La propuesta se enmarca en el modelo de Aprendizaje Basado en Proyectos (PBL, Project-Based Learning).
Comunicación Mediada por Ordenador: Preparación de materiales de aprendizaje crítico en torno a los conceptos de identidad y fiabilidad en Internet Teresa Lopez-Soto 1211 Jornadas de Formación e Innovación Docente del Profesorado | Nº 1 (2018) Esta obra se distribuye con la licencia Creative Commons Reconocimiento-NoComercial-SinObraDerivada 4.0 Internacional (CC BY-NC-ND 4.0.) Palabras clave: Nuevas Tecnologías aplicadas al estudio de la Lengua Inglesa; Grado en Estudios Ingleses; docencia universitaria; experimentación docente universitaria; pensamiento crítico. Breve descripción del contexto de la intervención Este ciclo de mejora se ha aplicado a un grupo de estudiantes de la asignatura “Nuevas Tecnologías Aplicadas a la Lengua Inglesa” de 3º curso del Grado en Estudios Ingleses que ofrece la Universidad de Sevilla. La asignatura se organiza desde el Departamento de Filología Inglesa (Lengua Inglesa) de la Facultad de Filología. El Plan de Estudios se aprobó en Resolución de 20 de diciembre de 2010 de la Universidad de Sevilla (BOE núm.17 de 20 de enero) y en el mismo se recogen 60 créditos optativos. La asignatura incluye restricciones de matriculación pues ha sido, desde su implantación, tradicionalmente muy popular entre los estudiantes. El motivo principal es que en ella encuentran la formación necesaria para abordar el reto que les supone construir un Trabajo Fin de Estudios (Trabajo Fin de Grado, TFG) con las suficientes garantías. En el curso académico 2018-19 se ha restringido el número de posibles matriculados a 35. Este ciclo de mejora se ha aplicado al Grupo 1 de la asignatura, que cuenta con un total de 39 estudiantes (4 de ellos han sido admitidos a petición propia y mediante autorización de la coordinadora). La docencia de la asignatura se imparte en un aula inteligente, que cuenta con 50 puestos informáticos, sistema integrado de control docente por ordenador, puesto informático específico para el docente, pizarra digital, pizarra blanca y cuenta con una calidad óptima de luminosidad y sistema de calefacción y aire acondicionado. Todos los estudiantes cuentan con un puesto informático perfectamente integrado, con micrófono y auriculares conectados, en línea con el puesto docente centralizado y con acceso a todos los recursos informáticos necesarios para seguir la
Comunicación Mediada por Ordenador: Preparación de materiales de aprendizaje crítico en torno a los conceptos de identidad y fiabilidad en Internet Teresa Lopez-Soto 1212 Jornadas de Formación e Innovación Docente del Profesorado | Nº 1 (2018) Esta obra se distribuye con la licencia Creative Commons Reconocimiento-NoComercial-SinObraDerivada 4.0 Internacional (CC BY-NC-ND 4.0.) docencia. Los puestos informáticos de los alumnos se integran en filas. Diseño previo del ciclo de mejora docente Este CMD se denomina “Comunicación mediada por ordenador: preparación de materiales de aprendizaje crítico en torno a los conceptos de identidad y fiabilidad en Internet”. Antes de pasar a describir la metodología posible diseñada para este CMD es preciso indicar los objetivos que se buscaban con el mismo. La asignatura se estructura en una serie de tareas de aprendizaje eminentemente individual con las que el estudiante puede incrementar la complejidad del estudio de la lengua. Se trata, fundamentalmente, de asignaturas de acceso a información, de manejo, creación y procesamiento de bases de datos lingüísticas, de programas de cribado de la información y otras herramientas de naturaleza estadística o del campo de la lingüística aplicada (traducción asistida por ordenador, bases de datos terminológicas, entre otras). Como parte del proceso, e importante para la evaluación diseñada, el estudiante debe redactar un artículo de revisión crítica y otro de naturaleza empírica a partir de la observación de datos. Puesto que gran parte de la docencia se ha enfocado tradicionalmente al aprendizaje de herramientas informáticas, la calidad de los análisis y razonamientos críticos que debían hacer los estudiantes como culminación del proceso de aprendizaje en los dos artículos científicos a redactar se veía seriamente afectada. En resumen, el estudiante adquiría destrezas complejas pero no desarrollaba las habilidades necesarias que las mismas requieren: toma de decisiones, análisis crítico. Este CMD pretende dar respuesta a esa limitación mediante la incorporación de una nueva metodología de naturaleza constructivista, que se inspira además en el aprendizaje por problemas y en el planteamiento de
Comunicación Mediada por Ordenador: Preparación de materiales de aprendizaje crítico en torno a los conceptos de identidad y fiabilidad en Internet Teresa Lopez-Soto 1213 Jornadas de Formación e Innovación Docente del Profesorado | Nº 1 (2018) Esta obra se distribuye con la licencia Creative Commons Reconocimiento-NoComercial-SinObraDerivada 4.0 Internacional (CC BY-NC-ND 4.0.) preguntas enigma, preguntas motivadoras para provocar la reacción del estudiante en la consecución de las actividades programadas. Además, el modelo metodológico posible sigue la dinámica del aprendizaje colaborativo incentivando el trabajo en equipo y alejándose del trabajo individual que venía haciéndose en el aula. Mapa de Contenidos El mapa de contenidos de la CMD se puede observar en la Figura 1. La gráfica utiliza recuadros punteados para ampliar zonas de contenidos que giran en torno a unas actividades concretas. Otro elemento gráfico que se usa son las flechas/líneas. Cuando son de doble dirección indican que se da la misma importancia a un contenido que a otro. Cuando son líneas rectas, indican correlación entre las partes. Las flechas unidireccionales se utilizan únicamente para referenciar contenidos jerarquizados, es decir, cuando un contenido concreto se desgrana en otro de nivel inferior.
Comunicación Mediada por Ordenador: Preparación de materiales de aprendizaje crítico en torno a los conceptos de identidad y fiabilidad en Internet Teresa Lopez-Soto 1214 Jornadas de Formación e Innovación Docente del Profesorado | Nº 1 (2018) Esta obra se distribuye con la licencia Creative Commons Reconocimiento-NoComercial-SinObraDerivada 4.0 Internacional (CC BY-NC-ND 4.0.) Figura 1. Mapa de contenidos conceptuales, procedimentales y actitudinales del CMD
Comunicación Mediada por Ordenador: Preparación de materiales de aprendizaje crítico en torno a los conceptos de identidad y fiabilidad en Internet Teresa Lopez-Soto 1215 Jornadas de Formación e Innovación Docente del Profesorado | Nº 1 (2018) Esta obra se distribuye con la licencia Creative Commons Reconocimiento-NoComercial-SinObraDerivada 4.0 Internacional (CC BY-NC-ND 4.0.) La distribución por colores y formas es la siguiente: • Azul para contenidos conceptuales, morado para contenidos procedimentales, amarillo para contenidos actitudinales. • Forma elíptica para contenidos conceptuales, romboide para contenidos procedimentales, forma de bandera para contenidos actitudinales. • Estrellas para preguntas enigma y recuadros en verde para actividades programadas. El esquema gráfico debe entenderse como que los contenidos correlacionados en la parte superior se desarrollan primero y se siguen por otros de nivel inferior que se desarrollan a continuación. Los contenidos actitudinales estarán presentes a lo largo de todo el CMD. A continuación se detallan los aspectos importantes de dicho mapa de contenido: 1. Contenidos conceptuales. Los contenidos conceptuales más importantes son los de “identidad” y “fiabilidad”. Por “identidad” entendemos aspectos que tienen que ver con nuestra imagen online: anonimidad, características personales que damos a conocer (self-disclosure) y toda una serie de aspectos que tienen que ver con la identidad personal, la social, la colectiva, entre otras. Por “fiabilidad” en la red entendemos aquellos aspectos de confianza y pedigree en las fuentes que consultamos que nos ayudan a caracterizar los contenidos entre ciertos, probables o inseguros. 2. Contenidos procedimentales. Se trabajan los siguientes: herramientas de acceso a información bibliográfica, herramientas de manejo de referencias bibliográficas, estilo de redacción APA y técnicas de redacción de artículos científicos.
Comunicación Mediada por Ordenador: Preparación de materiales de aprendizaje crítico en torno a los conceptos de identidad y fiabilidad en Internet Teresa Lopez-Soto 1216 Jornadas de Formación e Innovación Docente del Profesorado | Nº 1 (2018) Esta obra se distribuye con la licencia Creative Commons Reconocimiento-NoComercial-SinObraDerivada 4.0 Internacional (CC BY-NC-ND 4.0.) 3. Contenidos actitudinales. Este CMD se centra en ayudar al estudiante a utilizar de manera crítica las herramientas, y no a utilizarlas como un fin en sí mismas. Este espíritu crítico debe, además, desarrollarse en dos aspectos importantes y que les serán de utilidad en su práctica profesional futura: el manejo correcto de su imagen personal en redes sociales y la toma de decisiones que les permitan elegir los mejores recursos online para fines profesionales o académicos. Modelo Metodológico Posible Este modelo metodológico posible parte de la hipótesis que el espíritu crítico puede desarrollarse solo cuando existe un auténtico intercambio de ideas. Siguiendo a King y Kitchener (1994), existen hasta 7 etapas para desarrollar el juicio reflexivo, y entre ellas está la recepción de nuevos conceptos y la reelaboración de los antiguos. Por otra parte, el aprendizaje basado en problemas (Hung et al, 2008) establece que cuando el estudiante debe resolver por sí mismo un reto que se le plantea, es cuando realmente desarrolla los contenidos implicados en el proceso de enseñanza-aprendizaje. Esto enlaza además con la teoría de Finkel (2008), partidario de la clase silenciosa, que es aquella en la que el docente prácticamente no participa en la creación de contenido, sino que observa y ayuda al estudiante a crearlo. Finkel además desarrolló un modelo denominado de “talleres conceptuales”, altamente sofisticado los cuales se definen como lugares de encuentro en el aula donde todo el proceso de aprendizaje se sustenta en el razonamiento. El estudiante recibe una pregunta enigma escrita en un papel que deberá solucionar, razonar o definir en grupos de 4 personas. La exposición de la pregunta se hace por escrito para despersonalizar la figura del docente durante todo el proceso. Además, al estar escrito, permanece durante todo el tiempo en el que se
Comunicación Mediada por Ordenador: Preparación de materiales de aprendizaje crítico en torno a los conceptos de identidad y fiabilidad en Internet Teresa Lopez-Soto 1217 Jornadas de Formación e Innovación Docente del Profesorado | Nº 1 (2018) Esta obra se distribuye con la licencia Creative Commons Reconocimiento-NoComercial-SinObraDerivada 4.0 Internacional (CC BY-NC-ND 4.0.) está realizando la actividad. Este modelo se conecta también con el concepto de “aprendizaje crítico natural”. Bain (2006) estableció que el “aprendizaje crítico natural” es crítico por naturaleza, y se basa en la reformulación constante de lo aprendido, a partir de ejemplos y mediante la aplicación del método prueba-error. En primer lugar, el docente, según este autor, desafía a los estudiantes a resolver los problemas, animándolos a buscar evidencias que sustenten sus propios razonamientos. Esta confrontación del concepto con la realidad facilitaría el aprendizaje a largo plazo. Este tipo de enfoque basado en la resolución de problemas, es bastante similar al modelo conocido como Aprendizaje Basado en Proyectos (Project-Based Learning, PBL de sus siglas en inglés). Existen experiencias recogidas en asignaturas similares, donde los estudiantes también se organizan en equipos para conseguir dinamizar cursos del área de las TIC. Ardaiz-Villanueva et al (2011) describen una experiencia similar al contexto que aquí se presenta en donde concluyen que los equipos que tuvieron que enfrentarse a la resolución de proyectos y que estaban formado por estudiantes con similares niveles de afinidad y creatividad, consiguieron mejores resultados. Por último, es importante resaltar que todo el modelo aquí expuesto no es solo construccionista, sino también incentiva el aprendizaje colaborativo y cooperativo. Si aceptamos que el aprendizaje cooperativo es aquel en el que el docente todavía tiene parte de responsabilidad en la elaboración de los contenidos en el aula, al trabajar conjuntamente pero activamente con el estudiante, este modelo metodológico posible hace hincapié en el aprendizaje colaborativo puesto que se pretende, siguiendo a Finkel (2008), que la docente no participe en absoluto en la propuesta de actividades. En cualquier caso, el modelo metodológico posible debe entenderse como uno en el que se tienen en cuenta los siguientes aspectos:
Comunicación Mediada por Ordenador: Preparación de materiales de aprendizaje crítico en torno a los conceptos de identidad y fiabilidad en Internet Teresa Lopez-Soto 1218 Jornadas de Formación e Innovación Docente del Profesorado | Nº 1 (2018) Esta obra se distribuye con la licencia Creative Commons Reconocimiento-NoComercial-SinObraDerivada 4.0 Internacional (CC BY-NC-ND 4.0.) a) Se trabaja en equipo. b) Se plantea una pregunta motivadora, a modo de problema a resolver. c) Se distingue entre experto y usuario. d) Implica investigar para encontrar las respuestas a partir de consultas a expertos y usuarios. Secuencia de Actividades Programadas Todas las actividades están diseñadas para ser realizadas en grupos de 5 personas. Los grupos se formarán de manera espontánea en el aula, sin indicaciones de la docente. Las instrucciones de funcionamiento de los equipos incluyen dos aspectos importantes. En primer lugar, todos los equipos deben repartir roles entre todos sus miembros. Serán los estudiantes quienes decidan qué roles serán estos y cómo se reparten. En segundo lugar, deberán acordar una serie de reglas de funcionamiento interno dentro del equipo en relación a los objetivos que se marquen en las diferentes actividades. Tanto la división por roles como las reglas de funcionamiento interno se enviarán por la plataforma virtual a la docente. Las actividades siguen, todas ellas, a una o dos preguntas inspiradoras (preguntas enigma siguiendo la terminología de Finkel (2008)). Se puede considerar que las mismas inician un proyecto o reto que cada equipo debe conseguir por separado. El método indicado por la docente para la terminación del proyecto será el de investigar y crear. La fase de investigación que deberá llevar a cabo cada equipo consistirá en la consulta a fuentes expertas y usuarias. Los conceptos “experto” y “usuario” en este contexto se explican al comienzo de las actividades. Se entiende por “experto” una fuente ya validada; por ejemplo: fuentes académicas con reconocida fiabilidad o especialistas en la materia. Se considerarán “usuarios” cualquier otra persona que hace uso o participa de dicho fenómeno
Comunicación Mediada por Ordenador: Preparación de materiales de aprendizaje crítico en torno a los conceptos de identidad y fiabilidad en Internet Teresa Lopez-Soto 1225 Jornadas de Formación e Innovación Docente del Profesorado | Nº 1 (2018) Esta obra se distribuye con la licencia Creative Commons Reconocimiento-NoComercial-SinObraDerivada 4.0 Internacional (CC BY-NC-ND 4.0.) Tabla 2. Rúbrica del cuestionario inicial-final A B C D E 1Define el concepto y los aspectos de fiabilidad, identidad y ejemplos Define el concepto y los aspectos de fiabilidad, identidad Define el concepto Hace una valoración coloquial a la pregunta No contesta/ Contesta erróneamente 2Define de manera crítica a la pregunta Define de manera objetiva con ejemplos Define de manera objetiva Hace una valoración personal de la pregunta No contesta/ Contesta erróneamente 3Afirma positivamente y detalla las connotaciones del fenómeno Afirma positivamente y describe de manera genérica el fenómeno Afirma positivamente sin describir el fenómeno Afirma de manera negativa con justificación Afirma de manera negativa sin justificación /No contesta 4Afirma positivamente y detalla las connotaciones del fenómeno Afirma positivamente y describe de manera genérica el fenómeno Afirma positivamente sin describir el fenómeno Afirma de manera negativa con justificación No contesta/ Contesta erróneamente 5Afirma positivamente y detalla las connotaciones del fenómeno Afirma positivamente y describe de manera genérica el fenómeno Afirma positivamente sin describir el fenómeno Afirma de manera negativa con justificación No contesta/ Contesta erróneamente 6Incorpora notables aportaciones críticas mencionando un modelo teórico Incorpora notables aportaciones críticas sin mencionar ningún modelo Describe el modelo sin aportaciones críticas Hace una mera valoración coloquial No contesta/ Contesta erróneamente 7Incorpora notables aportaciones críticas mencionando un modelo teórico Incorpora notables aportaciones críticas sin mencionar ningún modelo Describe el modelo sin aportaciones críticas Hace una mera valoración coloquial No contesta/ Contesta erróneamente 8Define el concepto con ejemplos Define el concepto sin ejemplos Solo aporta ejemplos Hace una valoración personal No contesta/ Contesta erróneamente
Comunicación Mediada por Ordenador: Preparación de materiales de aprendizaje crítico en torno a los conceptos de identidad y fiabilidad en Internet Teresa Lopez-Soto 1226 Jornadas de Formación e Innovación Docente del Profesorado | Nº 1 (2018) Esta obra se distribuye con la licencia Creative Commons Reconocimiento-NoComercial-SinObraDerivada 4.0 Internacional (CC BY-NC-ND 4.0.) 9Describe el concepto con todas sus connotaciones Define el concepto de manera genérica Solo hace referencia al concepto de copyright Solo hace referencia al diseño de página web No contesta/ Contesta erróneamente 10 Describe todos los apartados con explicaciones detalladas Describe todos los apartados de manera genérica Describe los apartados más importantes Describe pocos apartados y no los más relevantes No contesta/ Contesta erróneamente De las figuras siguientes se deduce que no hubo gran diferencia entre los resultados obtenidos del cuestionario inicial y del final. Al tratarse de un ciclo de docencia breve, parte de los contenidos habían sido obviamente ya presentados en clase. No obstante, cabe resaltar el comportamiento de los estudiantes en relación a las preguntas 5 y 7 del cuestionario: 5.Is “information retrieval” online similar in its parameters to communication online? How similar? How different? 7.Are you aware of your own presence (profile picture, personal data and posts) when you use social networks? How? Figura 2. Resultados del cuestionario inicial
Comunicación Mediada por Ordenador: Preparación de materiales de aprendizaje crítico en torno a los conceptos de identidad y fiabilidad en Internet Teresa Lopez-Soto 1227 Jornadas de Formación e Innovación Docente del Profesorado | Nº 1 (2018) Esta obra se distribuye con la licencia Creative Commons Reconocimiento-NoComercial-SinObraDerivada 4.0 Internacional (CC BY-NC-ND 4.0.) Figura 3. Resultados del cuestionario final Las dos preguntas se refieren a conceptos más críticos dentro del cuestionario. Las mismas, hacen referencia a relaciones que no se han estudiado en el curso, en primer lugar, si existe una similitud entre recuperación de información y comunicación en cuanto a los parámetros que las definen. Existe de hecho un parecido, en tanto la recuperación de información se mide en relación a la fiabilidad de los recursos a los que se acceden, mientras que la comunicación interpersonal se valora en parámetros que van desde el anonimato subiendo en escala según se aumenta el denominado disclosure (lo que mostramos de nosotros mismos en la red). Este paralelismo no se había estudiado en absoluto en el aula. El CMD permitió recoger en el cuestionario final una serie de contestaciones de los estudiantes que habían encontrado dicha correlación. Este aspecto, teniendo en cuenta que el CMD se diseña para mejorar el espíritu crítico del aula, debe considerarse como altamente positivo. Un caso también interesante es la pregunta 7, que cuestiona al estudiante si controla bien su identidad en las redes. Una posible interpretación a la bajada en las respuestas (más dubitativos en el cuestionario final) sería precisamente todo el debate interno que este CMD ha producido en el aula. Sin embargo, no podemos
Comunicación Mediada por Ordenador: Preparación de materiales de aprendizaje crítico en torno a los conceptos de identidad y fiabilidad en Internet Teresa Lopez-Soto 1228 Jornadas de Formación e Innovación Docente del Profesorado | Nº 1 (2018) Esta obra se distribuye con la licencia Creative Commons Reconocimiento-NoComercial-SinObraDerivada 4.0 Internacional (CC BY-NC-ND 4.0.) descartar una confusión en los conceptos que haya llevado a una mayor parte del grupo a contestar con menor evidencia. Evaluación del diseño puesto en práctica Esta intervención en el aula me ha permitido evaluar aspectos de mi método que creía que eran adecuados para obtener los mejores resultados en el proceso de aprendizaje, pero que, evidentemente, han quedado evidenciados. En primer lugar, la elaboración de un mapa claro de contenidos es imprescindible. A menudo obviamos la triplicidad que el proceso de aprendizaje lleva. Tal es así, que este CMD gira en torno al desarrollo de un contenido actitudinal. Ha sido posible en parte por la naturaleza de la asignatura, que incluye contenidos que se relacionan directamente con el desarrollo personal, como es la imagen que tenemos de nosotros mismos. Es por este motivo que considero este CMD como un avance muy importante en mi docencia, con independencia de que los resultados del pre-post cuestionario no evidencien claramente un avance, lo es si se marcan preguntas claves (5 y 7 como se ha dicho). Observo que ciertamente ha habido, en primer lugar, una aceptación de la metodología diseñada, con estudiantes más involucrados mientras avanzaba el CMD. En segundo lugar la participación activa de los estudiantes en los debates y su genuino interés en la reflexión crítica, son los aspectos que más valoro de toda esta experiencia. Para el resto del curso, la asignatura se seguirá estructurando, muy definida, en torno a los 3 tipos de contenido. Los mismos, ya están publicados en el aula virtual y en el proyecto docente. Otros aspectos del CMD, en concreto el cuestionario inicial y final, me han resultado menos útiles. Y no lo digo tanto por los resultados obtenidos en el contraste, sino por la implementación. Resulta complicado diseñar el cuestionario, aunque se pueda hacer
Comunicación Mediada por Ordenador: Preparación de materiales de aprendizaje crítico en torno a los conceptos de identidad y fiabilidad en Internet Teresa Lopez-Soto 1229 Jornadas de Formación e Innovación Docente del Profesorado | Nº 1 (2018) Esta obra se distribuye con la licencia Creative Commons Reconocimiento-NoComercial-SinObraDerivada 4.0 Internacional (CC BY-NC-ND 4.0.) sobre la marcha, pues durante el proceso surgen nuevos conocimientos que no esperaba, y que quedan fueran del proceso de evaluación al ser el cuestionario final una repetición del primero. Además, esta técnica implica una inversión importante de tiempo, que resta mi capacidad a otras cuestiones del aula que considero muy importantes. Referencias bibliográficas Ardaiz-Villanueva, O., Nicuesa-Chacón, X., Brene-Artazcoz, O., de Acedo Lizarraga, M. L. S., & de Acedo Baquedano, M. T. S. (2011). Evaluation of computer tools for idea generation and team formation in project-based learning.Computers & Education,56(3), 700-711. Bain, K. (2006).Lo que hacen los mejores profesores de universidad. Universitat de València. Finkel, D. (2008). Dar clase con la boca cerrada.Revista electrónica sobre la enseñanza de la Economía Pública Págs,49, 60. Hung, W., Jonassen, D. H., & Liu, R. (2008). Problem-based learning.Handbook of research on educational communications and technology,3, 485-506. King, P. M., & Kitchener, K. S. (1994). Developing Reflective Judgment: Understanding and Promoting Intellectual Growth and Critical Thinking in Adolescents and Adults. Jossey-Bass Higher and Adult Education Series and Jossey-Bass Social and Behavioral Science Series. Jossey-Bass, 350 Sansome Street, San Francisco, CA 94104-1310.