Evaluación formativa del TFG del Grado en Psicología: diseño de rúbricas para la modalidad Proyecto de Emprendimiento

DE , Y Oviedo 8 al 11 de Noviembre 2017 OBJETIVOS DESARROLLO DEL TEMA DISCUSIÓN Y CONCLUSIONES Se realizó una rubrica analítica (Blanco, 2008), según la metodología de Mertler (2001). Para ello se vincularon las competencias del título de Grado de Psicología a los resultados de aprendizaje de cada una de las fases del TFG, se definieron las tareas que se llevarían a cabo en cada una de las fases, se identificaron los aspectos evaluables y se seleccionó una escala de calificación de cuatro niveles de ejecución según López-Montiel, Martín-Ruiz, González-Valenzuela,, Almaraz-Carretero, Esteve-Zarazaga, y Ramírez-Maestre (2017). Andrade, H. (2005). Teaching with rubrics. College Teaching, 53(1), 27-30. Blanco, A. (2008). Las rubricas: un instrumento útil para la evaluación de competencias. En: Prieto, L., Blanco, A. y Morales, P. (coord.), La enseñanza universitaria centrada en el aprendizaje, Barcelona: Editorial Octaedro, 171-188. Fernández, A. (2010). La evaluación orientada al aprendizaje en un modelo de formación por competencias en la educación universitaria. Revista de Docencia Universitaria, 8 (11), 11-34. López-Montiel, D., Martín-Ruiz, I., González-Valenzuela, M. J., Almaraz-Carretero, J., Esteve-Zarazaga, R., y Ramírez-Maestre, C. (2017). Evaluación formativa del TFG del Grado en Psicología: diseño de rúbricas para diferentes modalidades, fases y acciones. Comunicación presentada en el CIPSE-2017, organizado por la Universidad de Oviedo. Mertler, C. A. (2001). Designing scoring rubrics for your classroom.Practical Assessment, Research & Evaluation, 7 (25),1-9 REFERENCIAS INDICADORES (vinculados a Resultados Aprendizaje) No alcanzado/Necesita mejorar (1) En desarrollo (2) Bien/Adecuado (3) Excelente /Ejemplar (4) FASE 1: Justificación y establecimiento de objetivos Justificación del problema elegido No justifica la elección del problema en base a criterios científicos. Justifica de manera confusa la elección del problema en base a criterios poco científicos. Justifica parcialmente la elección del problema en base a criterios científicos. Justifica claramente la elección del problema elegido en base a criterios científicos. Realización búsqueda documental inicial Las búsquedas de información realizadas no provienen de fuentes científicas, no son ricas, no exhaustivas y no adecuadas a la naturaleza del problema elegido. Las búsquedas de información realizadas provienen parcialmente de fuentes científicas, son limitadas y se adecuan parcialmente a la naturaleza del problema elegido Las búsquedas de información realizadas provienen en su mayor parte de fuentes científicas, se adecuan a la naturaleza del problema elegido, pero no están suficientemente actualizadas. Las búsquedas de información realizadas provienen de fuentes científicas, son ricas, exhaustivas y adecuadas a la naturaleza del problema elegido. Definición de los objetivos del trabajo Formula los objetivos a seguir de manera poco concreta, desordenada y sin argumentar las decisiones tomadas para llegar a su formulación y orientar todo el trabajo. Formula los objetivos de manera muy general, faltando argumentos que lo justifiquen. Formula bien los objetivos, pero hay que mejorar su claridad y concreción, argumentando coherentemente las decisiones tomadas para llegar a su formulación, y no define objetivos específicos. Formula los objetivos a seguir de manera clara, precisa y concreta, argumentando coherentemente las decisiones tomadas para llegar a su formulación y orientando todo el trabajo y define objetivos específicos. Planificación del trabajo La planificación de actividades no es coherente con los objetivos, no están secuenciadas temporalmente. La planificación de actividades no es coherente con los objetivos, pero están secuenciadas temporalmente. La planificación de actividades es coherente con los objetivos, están secuenciadas temporalmente, pero no especifica la carga de trabajo y los recursos para cada una de ellas La planificación es coherente con los objetivos del trabajo y secuencia temporalmente todas las actividades, especificando la carga de trabajo y los recursos para cada una de ellas. FASE 2: Desarrollo de los objetivos No alcanzado/Necesita mejorar (1) En desarrollo (2) Bien/Adecuado (3) Excelente /Ejemplar (4) Identificación, organización y temporalización de la estructura del trabajo La estructura del trabajo no contiene ninguno de los elementos necesarios para su desarrollo y no están organizados ni temporalizados La estructura del trabajo contiene los elementos necesarios para su desarrollo pero no están organizados ni temporalizados. La estructura del trabajo contiene casi todos los elementos necesarios para su desarrollo pero no están bien organizados y temporalizados. La estructura del trabajo contiene todos los elementos necesarios para su desarrollo y están bien organizados y temporalizados. Desarrollo de la propuesta técnica No describe la propuesta técnica, no incluye la formación y acompañamiento del emprendedor, ni los criterios de calidad, ni las acciones por áreas de intervención, ni el público objetivo, ni el seguimiento. Describe la propuesta técnica, pero no incluye la formación y acompañamiento del emprendedor, ni los criterios de calidad, ni las acciones por áreas de intervención, ni el público objetivo, ni el seguimiento. Describe la propuesta técnica, incluye la formación y acompañamiento del emprendedor, los criterios de calidad, pero no incluye las acciones por áreas de intervención, ni el público objetivo, ni el seguimiento. Describe la propuesta técnica, incluye la formación y acompañamiento del emprendedor, los criterios de calidad, las acciones por áreas de intervención, el público objetivo, y el seguimiento. Construcción del marco teórico y relación con los objetivos planteados En el marco teórico del trabajo, las fuentes documentales no son pertinentes, no se identifican los antecedentes sobre la naturaleza del problema y no se integran adecuadamente los objetivos formulados. En el marco teórico del trabajo se incluyen algunas fuentes documentales pertinentes, se identifican algunos antecedentes sobre la naturaleza del problema, pero no se integran adecuadamente los objetivos formulados En el marco teórico del trabajo, las fuentes documentales son casi todas pertinentes, identificando la mayor parte de los antecedentes sobre la naturaleza del problema e integrando los objetivos generales pero no los específicos. En el marco teórico del trabajo se incluyen las fuentes documentales pertinentes, identificando los antecedentes sobre la naturaleza del problema e integrando adecuadamente los objetivos generales y específicos. Recogida de los datos del problema La recogida de datos no se realiza utilizando instrumentos y técnicas de evaluación de manera adecuada y ajustada a la naturaleza del problema. La recogida de datos se realiza utilizando instrumentos y técnicas de evaluación adecuada y ajustada a la naturaleza del problema solo en algunos casos. La recogida de datos se realiza casi siempre utilizando instrumentos y técnicas de evaluación de manera adecuada y ajustada a la naturaleza del problema. La recogida de datos se realiza en todos los casos utilizando instrumentos y técnicas de evaluación de manera adecuada y ajustada a la naturaleza del problema. Análisis e interpretación de los datos del problema La información no se analiza e interpreta de manera sistemática y rigurosa. La información se analiza e interpreta en algunos casos de manera sistemática y rigurosa. La información se analiza e interpreta de manera sistemática y rigurosa, generando parcialmente un conjunto de conclusiones fundamentadas en los planteamientos teóricos. La información se analiza e interpreta de manera sistemática y rigurosa, generando un conjunto de conclusiones fundamentadas en los planteamientos teóricos. Integración de los datos del problema La información interpretada no se integra de manera rigurosa y sistemática en un informe. La información interpretada se integra en algunos casos de manera rigurosa y sistemática en un informe. La información interpretada se integra de manera rigurosa y sistemática en un informe, generando parcialmente conclusiones fundamentadas en los planteamientos teóricos. La información interpretada se integra de manera rigurosa y sistemática en un informe, generando conclusiones fundamentadas en los planteamientos teóricos. Formulación del proyecto El proyecto no está claramente detallado y justificado con los cambios que se desean lograr según el informe, y no hay seguimiento. El proyecto está en algunos casos claramente detallado pero no justificado con los cambios que se desean lograr según el informe y no hay seguimiento. El proyecto está claramente detallado y en algún caso justificado con los cambios que se desean lograr según el informe y no hay seguimiento. El proyecto está claramente detallado y justificado con los cambios que se desean lograr según el informe y se ha realizado un seguimiento. Expresión escrita La expresión escrita no es correcta y no predomina el lenguaje profesional y científico. La expresión escrita es correcta, pero no domina el lenguaje profesional y científico. La expresión escrita es correcta, con dominio parcial del lenguaje profesional y científico. La expresión escrita es correcta, con dominio del lenguaje profesional y científico. Habilidades comunicativas La relación con las personas involucradas en el desarrollo del proyecto no es adecuada y profesional. La relación con las personas involucradas en el desarrollo del proyecto es a veces adecuada y profesional. La relación con las personas involucradas en el desarrollo del proyecto es casi siempre adecuada y profesional. La relación con las personas involucradas en el desarrollo del proyecto es adecuada y profesional. FASE 4: Defensa oral No alcanzado/Necesita mejorar (1) En desarrollo (2) Bien/Adecuado (3) Excelente /Ejemplar (4) Exposición El vocabulario es incorrecto (coloquial e impreciso), lee las notas, la argumentación desordenada, sin hilo conductor y no se ajusta al tiempo disponible. El vocabulario a veces impreciso, consulta frecuentemente sus notas, el hilo conductor es difícil de seguir y se ajusta al tiempo disponible para la exposición. El vocabulario es técnico, domina el tema consultando sólo eventualmente sus notas, sigue un hilo conductor coherente pero con lagunas en la argumentación y se ajusta al tiempo disponible para la exposición. El vocabulario técnico y preciso, capta el interés del tribunal, domina el tema consultando sólo eventualmente sus notas, sigue un hilo conductor coherente y se ajusta al tiempo disponible para la exposición Presentación No coordina correctamente con la expresión oral, los contenidos son adecuados y ajustados a la memoria y a la normativa establecida, incluye texto en exceso y el tamaño de letra y los colores utilizados no permiten ver claramente la presentación. Se coordina correctamente con la expresión oral, los contenidos son adecuados y ajustados a la memoria y a la normativa establecida, incluye texto en exceso y alguna figura y el tamaño de letra y los colores utilizados no permiten ver claramente la presentación. Se coordina correctamente con la expresión oral, los contenidos son adecuados y ajustados a la memoria y a la normativa establecida, incluye figuras y texto para apoyo y el tamaño de letra y los colores utilizados permiten ver claramente la presentación. Se coordina correctamente con la expresión oral, los contenidos son adecuados y ajustados a la memoria y a la normativa establecida, presenta figuras y esquemas que resumen gran cantidad de información y el tamaño de letra y los colores utilizados permiten ver claramente la presentación. Defensa No responde con corrección y seguridad a las preguntas del tribunal, su conducta no sigue las normas de comportamiento adecuadas a una exposición pública. Responde de forma incorrecta a las preguntas del tribunal, su conducta sigue las normas de comportamiento adecuadas a una exposición pública. Responde con inseguridad a las preguntas del tribunal, limitándose a responder a la cuestión planteada sin ilustrar la respuesta con conceptos teóricos, su conducta sigue las normas de comportamiento adecuadas a una exposición pública. Responde con corrección y seguridad a las preguntas del tribunal, su conducta sigue las normas de comportamiento adecuadas a una exposición pública, ilustra sus respuestas con conceptos relacionados y recogidos en la memoria conceptos teóricos. FASE 3: Memoria escrita y preparación de la defensa No alcanzado/Necesita mejorar (1) En desarrollo (2) Bien/Adecuado (3) Excelente /Ejemplar (4) Formato del trabajo Faltan apartados del problema, no está estructurado de modo coherente y la amplitud entre los apartados esta desequilibrada, la extensión del trabajo difiere en un 25% o más de lo establecido, la maquetación inexistente, impresión deficiente, sin cubierta o sucia y el título es extenso y no recoge las ideas principales del problema. Tiene todos los apartados del problema, pero falta estructuración y amplitud desequilibrada, la extensión del trabajo no difiere en más de 50% de lo establecido, la maquetación e impresión deficiente y el título es extenso y recoge las ideas principales del texto. Tiene todos los apartados del problema, está estructurado, pero con una amplitud desequilibrada, la extensión del trabajo no difiere en más de 75 % de lo establecido, el trabajo se presenta encuadernado y paginado, y el titulo sintetiza las ideas principales del problema Tiene todos los apartados que aparecen en el reglamento, con una amplitud equilibrada y estructurados de forma coherente, la extensión del trabajo se adecua a las normas, el trabajo se presenta encuadernado y paginado, y el título se adecua al problema, es claro y preciso. Expresión escrita Se aprecian muchos errores gramaticales y ortográficos (más de tres), la expresión escrita es muy pobre y no existen tablas ni figuras que ayuden a sintetizar la información del problema. Se aprecian pocos errores gramaticales y ortográficos (hasta 3), la expresión escrita es correcta pero sencilla y las tablas y figuras son redundantes o con errores. No se aprecian errores gramaticales y ortográficos, la expresión escrita es correcta y adecuada y los esquemas, tablas o figuras no ayudan a clarificar el discurso escrito. La expresión escrita es excelente, sin errores gramaticales ni ortográficos, la redacción es correcta y coherente y los esquemas, tablas o figuras clarifican el discurso escrito. Introducción y revisión bibliográfica Las fuentes utilizadas no están relacionadas con el problema y los objetivos, el marco teórico no está actualizado ni es adecuado al problema y los objetivos no son adecuados, no son claros ni están redactados adecuadamente. Las fuentes utilizadas están relacionadas con el problema y los objetivos pero no son relevantes ni están actualizadas, el marco teórico es poco adecuado y escasamente actualizado y los objetivos son adecuados, pero falta claridad y están redactados de modo confuso. Las fuentes utilizadas están relacionadas, y son relevantes para el problema y los objetivos pero no están actualizadas, el marco teórico es adecuado aunque está poco actualizado y los objetivos son adecuados y claros, pero redactado de modo confuso. Las fuentes utilizadas están relacionadas, actualizadas y son relevantes para el problema y los objetivos, el marco teórico está actualizado y es adecuado al problema y los objetivos adecuados, claros y redactados adecuadamente. Recogida de la información y evaluación del problema Las técnicas y el procedimiento de evaluación del problema no son coherentes y los resultados no aparecen o no están claramente especificados. Las técnicas de evaluación son apropiadas, pero el procedimiento no es adecuado y los resultados aparecen de modo confuso. Las técnicas y el procedimiento son en apropiados en casi todas las ocasiones y los resultados aparecen de modo correcto. Las técnicas y el procedimiento son apropiados con la hipótesis del problema en todas las ocasiones y los resultados están recogidos de modo claro y conciso. Formulación del proyecto El proyecto no describe los objetivos y no contiene todos los elementos necesarios para llevarlo a cabo. El proyecto describe los objetivos de manera difusa, no guardan relación directa con la evaluación y no contiene todos los elementos necesarios para llevarlo a cabo. El proyecto describe los objetivos de manera clara, guardan relación con la evaluación del caso y no contiene todos los elementos claramente bien definidos para llevarlo a cabo. El proyecto describe los objetivos de manera clara, guardan relación con la evaluación del caso y contiene todos los elementos claramente bien definidos para llevarlo a cabo. Conclusiones Las conclusiones no se describen de modo claro ni se derivan de los resultados del proyecto y no se indican las limitaciones del trabajo –si las hay‐y/o se incluyen líneas futuras de trabajo. Las conclusiones se describen de modo claro pero se derivan parcialmente de los resultados del problema y no se indican las limitaciones del trabajo –si las hay‐ y/o se incluyen líneas futuras de trabajo. Las conclusiones se describen de modo claro, se derivan directamente de los resultados del proyecto, y no se indican las limitaciones del trabajo –si las hay‐ni/o se incluyen líneas futuras de trabajo. Las conclusiones se describen de modo claro y se derivan de los resultados del proyecto y se indican las limitaciones del trabajo –si las hay‐y/o se incluyen líneas futuras de trabajo. Bibliografía Las citas del texto y el listado final de referencias no coinciden, no están actualizadas y no cumplen el formato APA. Algunas citas del texto y del listado final de referencias no coinciden y no están actualizadas y cumplen formato APA. Algunas citas del texto y del listado final de referencias no coinciden y están actualizadas y cumplen formato APA. Las citas del texto y el listado final de referencias coinciden y están actualizadas y cumplen el formato APA. Defensa del trabajo ante el tutor No justifica la relevancia del trabajo y el planteamiento carece de coherencia y estructura. Justifica la relevancia del trabajo y el planteamiento carece de coherencia y estructura. Justifica la relevancia del trabajo y el planteamiento es coherente y estructurado. Justifica brillantemente la relevancia del trabajo y el planteamiento es muy coherente y bien estructurado. El objetivo de este trabajo es la elaboración de rúbricas específicas para la modalidad de TFG Proyecto de Emprendimiento del Grado en Psicología de la Universidad de Málaga que guiaran tanto a profesores como a alumnos en el desempeño de sus tareas y competencias de manera satisfactoria, definiendo unos criterios claros. La importancia para alumnos y tutores del uso de instrumentos para orientar el desarrollo y la evaluación de las competencias vinculadas al TFG del Grado en Psicología queda reflejada en el aprendizaje, la evaluación formativa y la producción final realizada (Fernández, 2010). Las rúbricas para la evaluación del TFG en la modalidad Proyecto de Emprendimiento, nos permiten la descripción de las características específicas de esta modalidad de TFG en los diferentes niveles de rendimiento, y ayuda a mejorar los procesos de aprendizaje-enseñanza (Andrade, 2005).Se realizará la validación externa y el pilotaje de esta herramienta mediantelaelaboracióndelos instrumentos de evaluación, la valoración del proceso de implantación y los resultados alcanzados con su uso EVALUACIÓN FORMATIVA DEL TFG DEL GRADO EN PSICOLOGÍA: DISEÑO DE RÚBRICAS PARA LA MODALIDAD PROYECTO DE EMPRENDIMIENTO López-Montiel, D., Wallace-Ruiz, A., González-Valenzuela, M. J., Martín-Ruiz, I. Almaraz-Carretero, J., Esteve-Zarazaga, R., y Ramírez-Maestre, C. Facultad de Psicología -Universidad de Málaga