"debriefing" Y EVALUACIÓN
DE LA SIMULACIÓN
“Debriefing" y
Evaluación de la
"debriefing"…
Objetivos
• Finalizada la presentación, los participantes:
– Definirán el concepto de "debriefing" o reflexión
estructurada apoyada en el contexto de la simulación en la educación en salud.
– Distinguirán las mejores prácticas del "debriefing" en escenarios clínicos simulados.
– Discutirán los aspectos del desarrollo e implantación de Evaluación Clínica Objetiva y Estructurada
Fases de la simulación
Establecer introducción Manejo del simulador Teoría DiscusiónUna actividad que sigue a una experiencia de simulación, en la que se realiza un análisis o reflexión guiada por el facilitador. Fomenta la
autoevaluación, el aprendizaje reflexivo y significativo.
Importancia del "debriefing"
• Reflexión sobre la experiencia vivida
• Discusión sobre los objetivos de aprendizaje
Importancia del "debriefing"
• Aprendizaje de los errores
• Aumentar el apoyo y el espíritu de trabajo en
equipo
• Creación de nuevas metas de aprendizaje
pensamiento
Sentimientos
Tiempo para reflexión
Las mejores prácticas para "debriefing" Un lugar seguro para hablar sobre sus pensamientos y sentimientos Sin críticas o burlas de sus compañeros o profesores Ambiente Área donde puedan ver y compartir los recientes eventos Judy Johnson-Russell, 2007
• Deberá ser un momento de descubrimiento, de aprendizaje compartido, más que uno de
evaluación.
• Garantizar la seguridad y el estímulo durante el
proceso.
Consideraciones para el "debriefing"
• Lugar (ubicación)
• Tiempo
• Rol del facilitador
• Rol del estudiante
Ubicación
• Lugar privado y tranquilo
• Salón o área con mesa que permita que los
Ubicación
• Televisor o pantalla con video
• Libros de texto, guías, PDR, documentación
relacionada al escenario, pizarra y el expediente del paciente.
Tiempo
• Debe ocurrir lo más pronto posible
• El tiempo dependerá de:
– objetivos
– nivel y cantidad de estudiantes
– complejidad del escenario
Rol del facilitador durante el "debriefing"
Facilitador Realizar preguntas Estimular el pensamiento Comprensión y análisis profundoRol del estudiante durante el
"debriefing"
• Informar sobre los procedimientos o
comportamientos que observan durante el escenario y cuáles se omiten.
Rol del estudiante durante el
"debriefing"
• Retroalimentación entre pares
Tipos de "debriefing"
• "debriefing" verbal
-Es el más común y más efectivo
Tipos de "debriefing"
• "debriefing" escrito
-En ocasiones se puede dar al finalizar el "debriefing" verbal.
-Ofrece tiempo adicional para procesar pensamientos y expresarlos en forma escrita.
-Permite la integración de la tecnología a través del uso de blogs, wikis, entre otros.
Tipos de "debriefing"
• “Journals” (diarios)
-Es un tipo de "debriefing" escrito
-Tiende a promover la autoevaluación y profundizar en el aprendizaje
-Proporciona un intercambio privado o personal con el facilitador
Técnicas efectivas
• Interacciones grupales.
• Reflexión individual y maximizar el aprendizaje.
• Preguntas abiertas que ayuden al estudiante a
Ejemplos de preguntas abiertas
– ¿Cómo te sentiste durante el escenario?
– ¿Qué crees que le causó los vómitos al Sr. Wilson?
– Cuando insertaste el tubo nasogástrico; ¿qué esperabas que ocurriera?
Las preguntas abiertas, pueden utilizarse para ayudar a los estudiantes a evaluar su experiencia en general y su relación con el mundo real.
Uso de videos
• Es una excelente herramienta para un buen
"debriefing"
– Provee dirección a la discusión
– Ayuda a los participantes a recordar buenos y malos aspectos del escenario
Uso de videos
• Recomendaciones:
– El facilitador no debe hablar o argumentar mientras se observa el video
– Utilizar preguntas como por ejemplo: ¿Qué observaron sobre el trabajo en equipo?
– Utilizar instrucción y facilitación conforme se requiera
Recomendaciones para el "debriefing"
• Asignar tiempo suficiente para la reunión
• Formular preguntas abiertas
• Evitar críticas directas
• Promover la participación de todos
• Desarrollar planes de acción, una vez se
"debriefing" Y EVALUACIÓN
DE LA SIMULACIÓN
EVALUACIÓN DE LA
SIMULACIÓN
Evaluación de la Simulación
• Evaluación de un programa de entrenamiento
basado en la simulación.
• Evaluación del aprendizaje a través de la
Clarificación de conceptos
• Evaluación – programa
• Assessment – individuo
• Evaluación Formativa – mejoramiento
• Evaluación Sumativa – para comprobar
Evaluación de un Programa de
entrenamiento basado en la Simulación
• Propósito:
– Mejoramiento del programa
– Determinar pasos a seguir y tomar decisiones
– Para determinar efectividad
– Para documentar sucesos
Modelo para evaluar la efectividad de un
programa de adiestramiento basado en la
Simulación
Evaluación de Resultados (impacto) Evaluación de comportamiento (conocimiento aplicado) Evaluación de Aprendizaje (conocimiento adquirido) Modelo de KirkpatrickModelo de Kirkpatrick
• Nivel 1: Reacción – Se evalúa la reacción de los participantes en el programa de formación – Busca el grado de satisfacción de los estudiantes. Impacto Conocimiento aplicado Conocimiento AdquiridoModelo de Kirkpatrick
• Nivel 2: Aprendizaje – Se centra de pleno en la evaluación de las competencias adquiridas Impacto Conocimiento aplicado Conocimiento AdquiridoModelo de Kirkpatrick
• Nivel 3: Conducta – Se evalúa la transferencia de los aprendizajes al lugar de trabajo Impacto Conocimiento aplicado Conocimiento Adquirido SatisfacciónModelo de Kirkpatrick
• Nivel 4: Resultados – Lo que se pretende evaluar en este nivel es el impacto en la población o sociedad. Impacto Conocimiento aplicado Conocimiento AdquiridoRelación entre modelos de evaluación
de Kirkpatrick y Miller
Hacer Demostrar Saber cómo SaberEvaluación del aprendizaje a través
de la simulación
• El “assessment” es el proceso de obtener, organizar y presentar información variada sobre qué aprende el alumno y cómo lo aprende, mediante el uso de diferentes técnicas y en diferentes momentos durante el proceso de enseñanza-aprendizaje.
“Assessment” o Avalúo
• El “assessment” dirige el aprendizaje
• Permite a la institución educativa medir el
progreso individual de los estudiantes.
• Es fundamental para la conceptualización de los
¿Por qué es importante el
“Assessment”?
• Garantiza la competitividad de los estudiantes como futuros proveedores de salud.
• Permite a los participantes prepararse para
tomar exámenes de reválida, certificaciones profesionales y credenciales.
¿Por qué es importante el
Assessment?
E
VALUACIÓN
C
LÍNICA
O
BJETIVA
Evaluación de destrezas ECOE
• La Evaluación Clínica Objetiva Estructurada
(ECOE) es un método que utilizamos para evaluar competencias para un curso en
particular.
Diseño
• La ECOE está diseñada en un formato que
incorpora diversos instrumentos evaluativos y se desarrolla a través de estaciones que simulan situaciones clínicas.
Diseño de ECOE
• El poder de este formato
radica en la combinación de métodos de
evaluación, de manera que es capaz de explorar suficientemente tres de los cuatro niveles de la pirámide de Miller: saber, saber cómo y demostrar cómo.
Hacer Demostrar Saber cómo
Los elementos fundamentales para
el diseño de ECOE son:
• El Comité de Prueba
• La tabla de especificaciones, representación
resumen de la prueba.
• Los casos, que darán lugar a las estaciones y a las
1. Examina los componentes individuales de una competencia y una amplia muestra de las
mismas.
2. Evalúa el proceso y los resultados.
3. Utiliza “checklists” o listas de control / escalas validadas para los examinadores
4. Utiliza preguntas relacionadas con los objetivos
5. Utiliza la simulación de casos y pacientes estandarizados
• Propósito de la prueba • Contenidos de dominio
• Nivel de habilidad evaluada • Formato de la prueba
• Número de estaciones
• Competencias a ser evaluadas • Instrumentos de evaluación
• Ejemplo:
Garantizar que los estudiantes del programa Técnico de Emergencias Médicas Paramédico tengan las
habilidades y competencias clínicas necesarias para obtener su grado académico.
• Ejemplo:
Pacientes con alteraciones del sistema cardiorespiratorio.
• Ejemplo:
Destrezas específicas
– Examen físico cardiorespiratorio
– Entubación
– Resucitación cardiopulmonar
• Ejemplo:
– Realizar las destrezas clínicas (15 minutos)
– Documentación (10 minutos)
– Pensamiento Crítico (10 minutos)
• 3 a 12 estaciones
• Basado en el propósito y contenido de la prueba
• Basado en los recursos disponibles
Panificación de la prueba Especificaciones
Propósito de la prueba Contenido del dominio
Nivel de destrezas a ser evaluadas Formato
Número de estaciones Competencias
Planilla de Especificaciones
• Es el documento básico de la ECOE. Representa el diseño general de la prueba, y está constituida por una tabla donde se relacionan los casos con los objetivos, competencias y destrezas a evaluar en cada ejercicio.
• En la tabla de especificaciones se establece la cantidad de estaciones que se evaluarán en cada ejercicio, así como el tiempo asignado para realizar cada estación.
Instrumentos de evaluación
• Los participantes de ECOE se evalúan a través de instrumentos de evaluación diseñados para cada estación.
Criterios de evaluación
• Se recomienda que los criterios estén basados en
las competencias y estándares para los profesionales de la salud.
– IOM (Institute of Medicine)
– QSEN (Quality and Safety Education for Nursing)
– Juntas Examinadoras
ECOE Programa de Emergencias
Médicas 2012
Referencias
• Dieckman, P. (2009). Simulation is more than Technology – The Simulation Setting. Recuperado el 11 de septiembre de 2012 desde
http://www.laerdaltraining.com/sun/enable/PDF/dieckman_article.pdf
• Jeffries, P. (2007). Simulation in Nursing Education from Conceptualization to Evaluation. National League of Nursing. USA.
• Gordon Center for Research in Medical Education University of Miami Miller School of Medicine (2012). ISIM Improving Simulation Instructional Methods.
• Universidad de Cádiz, Departamento de Enfermería y Fisioterapia (2012). Manual de Casos Clínicos Simulados.