Learning, evaluation of education and certificativa
RESULTADOS Y EVALUACIÓN Estudio estadístico
Se hace un estudio descriptivo de las variables cuantitativas definiendo la media y la desviación típica. Para vari- ables cualitativas (encuestas) calculamos el porcentaje.
Para el estudio inferencial se realizan pruebas no paramétricas para variables independientes en las variables cuantitativas, y para las variables cualitativas se realiza unas pruebas estadísticas de chi-cuadrado.
Respecto a la evaluación de los casos clínicos
El número total de trabajos sobre casos clínicos evaluados en este proyecto ha sido 727.
En la tabla 2 se muestra el número de alumnos matriculados por curso y el número de casos clínicos evaluados en cada uno de los 6 grupos del estudio.
Tabla 2
(*) El grupo 6 está formado por los casos clínicos enviados por los alumnos tras su revisión y corrección con la profesora encargada, y corresponden a los mismos alumnos del grupo 5. Solamente 4 alumnos del Grado no han realizado la actividad.
Existe un predominio de mujeres sobre los hombres entre los estudiantes de nuestra Facultad de Medicina, difer- encia que se va manteniendo a lo largo de los cursos.
La actividad ha sido obligatoria para todos los alumnos del grupo 5 y 6, de la materia DMQV en este curso 2011- 2012. Para el resto de los grupos (1 y 2) del estudio recordamos que dicha actividad era voluntaria.
Respecto a la asignatura de PC, grupos 3 y 4, la actividad era obligatoria, pero únicamente la proponíamos a los alumnos adjudicados en sus rotaciones al Hospital Clínico Universitario “Lozano Blesa” de Zaragoza, por lo que el número de casos clínicos es menos numeroso.
Recordamos que los grupos 1 y 2 corresponden a alumnos matriculados en la asignatura DMQV de Licenciatura que realizaban voluntariamente el trabajo sobre resolución de casos clínicos que proponíamos. La participación fue de aproximadamente la mitad de los alumnos.
En la tabla 3 se muestran las variables que hemos comparado en nuestro trabajo, como han sido: la experiencia previa en otras asignaturas del trabajo con casos clínicos; el colocar en el ADD los criterios de evaluación de la activ- idad que iban a realizar mediante una rúbrica; y en el grupo correspondiente a los alumnos de la materia DMQV del Grado, también se tuvo en cuenta el resultado de sus trabajos definitivos (grupo 6) tras la corrección en un seminario presencial de los previos, de modo que tuvieron la oportunidad de realizar los cambios que considerasen oportunos antes de ser evaluados definitivamente.
VARIABLES
Al comparar las notas de los 6 grupos encontramos diferencias significativas entre ellos (p=0,001) Por esa razón se valoran los grupos dos a dos para determinar dónde están esas diferencias significativas.
Respecto a las encuestas satisfacción
Todos estos años hemos pasado encuestas abiertas de satisfacción, anónimas, a los alumnos con el objeto de con- ocer sus opiniones en cuanto a la actividad del trabajo de resolución de casos clínicos y otros aspectos del desarrollo de la asignatura.
En el presente estudio hemos comparado encuestas procedentes de alumnos de la asignatura DMQV, la antigua Licenciatura, con las mismas encuestas que han cumplimentado alumnos del nuevo Grado de Medicina dentro de la misma materia.
Contamos con 111 encuestas de alumnos de la Licenciatura (Grupo y 111 encuestas de alumnos de este primer curso del Grado (Grupo G) Las preguntas planteadas a los alumnos de ambos grupos fueron:
• ¿Tienes conocimientos previos de la materia?
• Además de los dermatólogos, ¿qué otros especialistas deberían tener conocimientos de la materia DMQV? • ¿Conoces el manejo del ADD?¿Has trabajado con anterioridad casos clínicos a través del ADD?
• ¿Te ha resultado útil para tu aprendizaje de la DMQV esta actividad de resolución de casos clínicos? • ¿Modificarías tarea?
En cuanto a la pregunta de si tenían conocimientos previos dermatológicos el porcentaje de alumnos de la Li- cenciatura afirman tener más conocimientos que los del Grado. Las variables grupo y conocimientos previos están relacionadas, siendo el grupo L el que manifiesta tener más conocimientos previos mientras que los alumnos del Grado, grupo G, no los tienen. P= 0 ,046 Tenemos que considerar que los alumnos de nuestra materia han pasado del 5º curso a 3º con el nuevo Grado.
DISCUSIÓN
El número total de trabajos sobre casos clínicos evaluados en este proyecto ha sido 727, y las diferencias en el número de alumnos por grupo valorado en cuanto a la procedencia según el curso son achacables a que en la asigna- tura DMQV el trabajo de resolución de casos clínicos ha sido voluntario, participando algo menos de la mitad de los alumnos matriculados en ambos cursos.
En cuanto las diferencias entre la distribución de sexo de los alumnos del Grado de Medicina, vemos cómo es contundente el predominio de mujeres sobre el de hombres que se viene detectando en las dos últimas décadas a nivel global.
Considerando imprescindible para incrementar la competencia profesional el aprendizaje utilizando la metod- ología del trabajo con casos clínicos, llevamos años desarrollando esta actividad y evaluando sus resultados para intentar desarrollar nuevas estrategias que permitan incrementar su efectividad.
Para poder comparar los resultados de la evaluación de unos años a otros, utilizamos una misma matriz de valoración ponderada que presentamos anteriormente. Aunque existe la convicción unánime de que la autoevalu- ación constituye una estrategia del proceso de aprendizaje, no conseguimos que nuestros alumnos accedieran a realizarla en la mayoría de las ocasiones, alegando sentirse incapaces, y decidimos suprimir su valoración en este trabajo. Lo achacamos a que la mayoría de los cursos del estudio proceden del antiguo plan de la Licenciatura y los alumnos no contaban experiencia en este sentido.
A todos los grupos del estudio se les pasó la misma encuesta abierta, anónima, de satisfacción con el objetivo de no influir en sus respuestas. Esta parte del trabajo nos ha resultado compleja de trabajar por diversos motivos como son, la pésima letra de bastantes alumnos que están más habituados a las respuestas tipo test que a desarrollar y porque, aunque la mayoría de las respuestas se podían agrupar al transmitir ideas comunes, reconocemos que es mucho más rápido y cómodo de analizar otras de tipo cerrado. De todos modos nos quedamos satisfechos con la per- cepción de la mayoría de nuestros alumnos sobre la utilidad de estas estrategias formativas ya que la mayoría refirió su utilidad e incluso manifestaron conformidad con el diseño.
En cuando a la evaluación certificativa que realizamos, los resultados nos convencieron de que estamos siguiendo una línea metodológica adecuada, ya que encontramos diferencias significativas según las variables introducidas.
No encontramos diferencias significativas entre los grupos 1 y 2, alumnos de 5º curso de la Licenciatura, de la asignatura de DMQV de cursos sucesivos, que recordamos participaban voluntariamente en la actividad, aunque a los del grupo 2 se les colocó en el ADD y se les detalló en un seminario presencial la valoración de sus trabajos, lo que
achacamos a que era el primer contacto de los alumnos con estas técnicas de valoración. Sin embargo, en el seminar- io presencial en el que se debatían sus trabajos manteniéndola proyectada en el aula, muchos manifestaron que les había servido como guión de su trabajo y que durante el debate habían comprendido mejor su utilidad para el traba- jo del razonamiento médico, incluso los alumnos que sólo participaron en la actividad durante el debate en el aula.
Entre los grupo 3 y 4, alumnos de 6º curso de la asignatura PC de la Licenciatura y de cursos sucesivos, tampoco encontramos diferencias significativas en sus resultados.
Los resultados de la evaluación certificativa si mostraron diferencias significativas entre los alumnos de la asigna- tura DMQV y PC con mejores puntuaciones en los alumnos de la primera que los de esta última. Estos alumnos habían superado la asignatura el curso anterior y ya estaban al final de sus estudios. Estos resultados confirman la necesidad de cambios en los planes de estudio antiguos, ya que lo deseable sería que la competencia alcanzada en una materia, no se diluyera de un curso para otro. De todos modos, los alumnos de los estudios de Medicina han estado condicio- nados, al menos hasta la actualidad, por el hecho de tener que superar el examen MIR para acceder a una especialidad en el que unas materias tienen mayor peso que otras y en el momento de realizar la actividad, ya se estaban prepa- rando para esa prueba por lo que no están tan motivados.
Habiendo sido una observación constante que la participación era distinta en los subgrupos de cada curso. Como puede apreciarse en los grupos 1 y 2, vemos que hay menor participación de los alumnos que están convocados en los primeros y últimos subgrupos. Seguramente debido a que los primeros están comenzando la materia e incluso, en algunas ocasiones, apenas han tenido contacto con la teoría. En el caso de los grupos finales, sin duda se debe a que suelen coincidir sus periodos con algún examen parcial o ya se acercan los finales.
Respecto a los alumnos del nuevo Grado implantado en nuestra materia en este curso 2011-2012, la participación en el trabajo de casos clínicos ha sido casi total debido a que se decidió que la actividad debía ser obligatoria y su evaluación formar parte de la nota final de la asignatura. En este caso las notas medias han sido muy superiores a las obtenidas en los cursos previos y las diferencias muy significativas.
Hemos comentado con anterioridad la satisfacción manifestada por los alumnos tras el debate de sus casos clínic- os en un seminario presencial, por ello decidimos permitir que los alumnos enviaran sus trabajos definitivos realizan- do las modificaciones que considerasen oportunas, siendo la evaluación de estos últimos las que contarían en la nota final. Encontramos una mejora en las notas obtenidas que también resultó estadísticamente significativa.
En las encuestas de satisfacción de este último grupo, 5, la totalidad de los alumnos mostraron su conformidad con la actividad, lo que unido a los resultados certificativos obtenidos, nos llevan a pensar que estamos en una buena línea de mejora de la metodología docente de nuestros alumnos.
Finalmente hemos comparado los resultados de las notas obtenidas en cuanto al sexo de los alumnos, encontran- do, a nivel global, diferencias significativas con mejores resultados de la evaluación en el sexo femenino, lo que puede achacarse a diferencias del carácter y maduración entre ambos sexos.
En cuanto a otras cuestiones planteadas en las encuestas a los alumnos como si tenían conocimientos previos de la materia, encontramos que las variables Licenciatura y Grado están relacionadas, siendo el grupo L en que manifi- esta tener más conocimientos previos sobre la Dermatología, lo que es lógico porque los alumnos han cursado más asignaturas.
Observamos también un cambio de percepción de los estudiantes del Grado respecto a la Licenciatura en nues- tros estudios. Estos últimos parecen valorar más la importancia del conocimiento médico a nivel global, ya que están relacionadas las variables estudiadas y son los que en mayor porcentaje consideran que todos los médicos deben tener conocimientos dermatológicos, independientemente de la especialidad a la que se dediquen.
La mayoría de los alumnos de ambos planes de estudios manifestaron conocer el manejo del ADD, alcanzando el 100% de los casos los del Grado. Sin embargo nos llama la atención de que un 7,3% de los alumnos de este nuevo plan, reconocieron que era la primera vez que trabajaban casos clínicos en sus estudios, aunque ya habían cursado algunas asignaturas clínicas. Lo achacamos a los distintos periodos de asignación de prácticas/seminarios. Eso nos confirma la importancia de la coordinación entre las asignaturas.
Finalmente señalamos que los alumnos de la asignatura DMQV acuden habitualmente a las clases teóricas como han comentado en sus encuestas, coincidiendo con lo observado por los profesores.
SOSTENIBILIDAD Y CONCLUSIONES
Todas estas tareas exigen una gran dedicación y número de horas al profesorado y la sostenibilidad en el tiempo dependerá de que haya adecuación entre el número de alumnos y profesores motivados para mantener estas estrate- gias docentes innovadoras pero fundamentales en la formación del profesional médico.
coincide con la percepción de nuestros alumnos.
De entre todas las estrategias metodológicas aplicadas, la evaluación certificativa constituye el mayor estímulo para el aprendizaje, por lo que es necesario evaluar esta actividad sobre el trabajo con casos clínicos formando parte de la nota final del alumno.
Creemos que es importante mejorar la programación de actividades que se proponen a los alumnos, para intentar minimizar las diferencias entre grupos y no sobrecargarlos, principalmente entre materias agrupadas en bloques.
Consideramos la función de la rúbrica en esta evaluación en su función formativa. No es tanto cumplir requisitos formales sino tratar de definir un modelo de trabajo profesional necesario para los médicos que estamos formando.
Referencias bibliográficas
Gracia Cazorro Mª Teresa, Hortells Aznar José L, Amiguet García Juan A, Sáenz Galilea Mª Ángeles, Grasa Jordán Mª Pilar, López Pingarró Mª Pilar Laura, Carapeto Francisco José. Casos clínicos para diagnóstico visual. Nuestra primera experiencia con el ADD en la Universidad de Zaragoza. En: Experiencias de innovación e investigación educativa en el nuevo contexto universitario. 1ª ed. Zaragoza: Prensas Universitarias de Zaragoza; 2011. p. 71.
Amiguet García Juan A, Hortells Aznar José L, Gracia Cazorro Mª Teresa, Melús Palazón Elena, Magallón Botaya Rosa. Utilidad del portafolio en el practicum de medicina. En: Prácticas y modelos innovadores para la mejora y calidad de la docencia. 1ª ed. Zaragoza: Prensas Universitarias de Zaragoza; 2011. p. 97.
Hortells Aznar José L, Amiguet García Juan A, Melús Palazón Elena, Magallón Botaya Rosa, Monreal Antonio, Gracia Cazorro Mª Teresa. Valoración del Prácticum de Medicina. En: Prácticas y modelos innova- dores para la mejora y calidad de la docencia. 1ª ed. Zaragoza: Prensas Universitarias de Zaragoza; 2011. p. 107.