La evaluación clínica objetiva estructurada (ECOE): aspectos principales y papel de la radiología

Resumen

La evaluación clínica objetiva estructurada (ECOE) es un formato de examen que permite evaluar habilidades clínicas del alumnado de forma fiable, objetiva, uniforme y estandarizada. Se desarrolla en diferentes estaciones clínicas que simulan escenarios y situaciones clínicas reales. Actualmente, se está utilizando como prueba final en el grado en Medicina en numerosas universidades, incluidas las españolas. Esta actualización presenta su organización, diseño y fundamentos, y propone que la radiología debe estar presente en las ECOE multidisciplinares, en la medida en que lo está en la práctica clínica. Además, es interesante y oportuno introducir la ECOE en la formación radiológica, en pregrado y posgrado. Las plataformas online posibilitan realizar ECOE virtuales bidimensionales coste-efectivas en términos de personal, recursos y espacio físico, aunque con ciertas limitaciones. La tecnología de mundos virtuales permite reproducir estaciones ECOE en escenarios tridimensionales; experiencias recientes en radiología han mostrado gran aceptación, interés y motivación en los alumnos.

Abstract

The objective structured clinical examination (OSCE) is a format of examination that enables students to be evaluated in a uniform, standardized, reliable, and objective way. It is carried out in different clinical stations that simulate real clinical situations and scenarios. Numerous universities in Spain and other countries employ this approach for the final examination for medical school students. This update describes the organization, design, and fundamentals for the OSCE, proposing that radiology should form part of multidisciplinary OSCEs to the extent that it forms part of clinical practice. Moreover, it is interesting and opportune to introduce the OSCE in undergraduate and postgraduate training in radiology. Online platforms enable bidimensional OSCEs that are cost-effective in terms of staff, resources, and physical space, although this approach has certain limitations. Virtual world technologies make it possible to reproduce OSCE stations in three-dimensional scenarios; recent experiences in radiology have shown that this approach interests and motivates students and is widely accepted by them.

Introducción

La evaluación clínica objetiva estructurada (ECOE) es un formato de examen desarrollado en diferentes estaciones clínicas (que son el espacio físico donde se desarrolla la prueba y se evalúa al alumno, reproduciendo así escenarios y situaciones clínicas reales)¹. Permite evaluar habilidades clínicas de los alumnos de forma fiable, objetiva, uniforme y estandarizada, utilizando como método de corrección listas de verificación. Además, se ha señalado que la ECOE favorece una mayor autonomía, aprendizaje y percepción positiva en los estudiantes, lo que proporciona una mayor calidad de la atención sanitaria futura².

La primera ECOE fue realizada por Harden en 1972 en la Universidad de Dundee como una alternativa a los métodos de evaluación clínica tradicionales, consistentes en examinar al estudiante con algunos pacientes disponibles en el periodo de examen³. Las evaluaciones tradicionales tenían limitaciones de reproducibilidad, pues el resultado de cada alumno podía verse influido por la actuación del paciente o sesgos del examinador al utilizar una puntuación no estandarizada. El modelo ECOE surgió con el objetivo de estandarizar el examen clínico y disminuir las variables y los sesgos que pudieran influir en la evaluación. El objetivo de la ECOE es utilizar un entorno clínico simulado, donde el estudiante debe mostrar cómo resuelve las situaciones y las preguntas que encuentra, para evaluar las habilidades teóricas y prácticas, así como el liderazgo, la conciencia situacional, la gestión de recursos y el trabajo en equipo. En las últimas décadas, la ECOE ha tenido un crecimiento exponencial en su uso en todo el mundo, tanto en pregrado como posgrado⁴. Por lo general, una prueba ECOE se compone de 10 a 20 estaciones individuales que evalúan una amplia gama de competencias clínicas o prácticas, como muestra la tabla 1⁵. Desde su desarrollo original, las ECOE se han convertido en uno de los principales métodos para evaluar la competencia clínica en la formación médica de pregrado⁶. Dada la importancia de la radiología en la medicina clínica actual, sería interesante conocer la frecuencia con la que se utilizan las imágenes radiológicas en las ECOE y la variabilidad existente en las diferentes universidades⁷.

Tabla 1.

Habilidades clínicas que suelen medirse en una prueba ECOE

Habilidades de comunicación y profesionalismo

Habilidades para realizar la historia clínica

Habilidades de exploración física

Habilidades prácticas/técnicas

Habilidades de razonamiento clínico

Interpretación de hallazgos (incluyendo pruebas de imagen) e investigaciones clínicas

Toma de decisiones clínicas, incluido el diagnóstico diferencial

Gestión de una situación clínica, incluido el tratamiento y la derivación

Habilidades para resolver problemas clínicos

Actuar de forma segura y adecuada en una situación clínica de urgencia

Pensamiento crítico en la gestión terapéutica

Educación del paciente

Promoción de la salud

Habilidades de equipo

Gestión interdisciplinar en la atención sanitaria

Este artículo tiene como objetivos definir el modelo ECOE y explicar la importancia que tiene la implementación de estaciones radiológicas en esta prueba.

Implementación de la ECOE en España

En el curso académico 2011/2012 la Conferencia Nacional de Decanos de Medicina (CNDM) acordó que todas las facultades de Medicina de España debían realizar una evaluación final de competencias clínicas y de comunicación, de carácter eminentemente práctico, mediante una prueba ECOE⁸. Como primer paso, se organizó un curso formativo sobre ECOE en la universidad de Alcalá de Henares. Posteriormente, la CNDM estableció que todos los estudiantes de las 40 facultades de Medicina españolas que finalizasen sus estudios en el curso 2015/2016 deberían superar una prueba ECOE que evaluase 8 competencias clínicas: anamnesis, exploración física, comunicación, habilidades técnicas, juicio clínico, manejo diagnóstico y tratamiento, prevención y promoción de la salud, relaciones interprofesionales y aspectos éticos y legales⁹. Las imágenes radiológicas se suelen incluir en el manejo diagnóstico, como parte de las pruebas complementarias, en estaciones no específicas de radiología en algunas universidades y con estaciones específicas de radiología en otras. De esta manera, la prueba ECOE ha quedado integrada en nuestro país al final de los estudios de grado como un examen multidisciplinar que evalúa los conocimientos teórico-prácticos aprendidos y el manejo y gestión de estos.

Organización, diseño y principios fundamentales de la ECOE

Los 2 principios fundamentales del modelo ECOE son la objetividad y la estructura⁴. La objetividad se consigue mediante modelos de examen estandarizados, actuación estandarizada de los actores/pacientes que intervengan (pacientes estandarizados) y un entrenamiento previo de los evaluadores para que realicen las mismas preguntas, evaluándolas de manera similar. La estructura se centra en el diseño de cada estación ECOE, que evalúa tareas clínicas específicas de manera estructurada y estandarizada, acordes con el plan de formación. Debido a esos 2 principios fundamentales, una ECOE bien diseñada ha demostrado ser una herramienta con alta fiabilidad, poco sesgo y gran validez interna⁴. Agarwal et al.¹⁰ hicieron un interesante análisis de debilidades, amenazas, fortalezas y oportunidades (DAFO) del sistema ECOE, que se resume en la tabla 2.

Tabla 2.

Análisis debilidades, amenazas, fortalezas y oportunidades (DAFO) del sistema ECOE

Fortalezas	Debilidades
Objetividad	Costoso (tiempo/esfuerzo)
Autenticidad	Gran cantidad de tiempo para su preparación
Eficaz y con validez interna	Requiere un gran área para montar las diferentes estaciones ECOE
Feedback
Evaluación en tiempo real
Reduce sesgos respecto a la evaluación tradicional
Amplía y desarrolla habilidades no tenidas en cuenta en exámenes tradicionales (ética, comunicación, trato al paciente, etc.)
Oportunidades	Amenazas
Reemplazar el sistema de evaluación tradicional	Oposición al sistema de evaluación tradicional
Implementar la evaluación ECOE en todas las especialidades médicas	No participación activa e intercambio de ideas, necesarios para el sistema ECOE
Favorecer objetividad sobre subjetividad en la evaluación	Sensación de amenaza por parte del profesorado universitario ante el nuevo sistema

Los elementos fundamentales para el diseño de una ECOE son^11,12:

• a.

  El comité organizador. Lo constituyen entre 6 y 12 profesionales clínicos con experiencia, conocimientos y habilidades acerca de esta prueba evaluadora, quienes definen aspectos fundamentales como la confidencialidad de los contenidos, el nivel de exigencia requerido, la evaluación de los resultados, la información que reciben los alumnos, el profesorado responsable de las diferentes estaciones y la emisión de los certificados correspondientes. Otras funciones del comité son establecer los requisitos del profesional evaluador, definir los criterios de ponderación de las pruebas y elaborar las situaciones clínicas, casos y elementos que formarán parte de las estaciones clínicas.

• b.

  La tabla de especificaciones. Es un documento fundamental que incluye el diseño global de la prueba. Está constituido por filas y columnas con la ubicación de las estaciones, los turnos de participación (ruedas o rondas) de los alumnos, las asignaturas a evaluar, los examinadores, los instrumentos evaluadores y el diseño de cada estación (véase material suplementario, anexo 1).

• c.

  Las estaciones clínicas. Son el espacio físico donde se desarrollan los casos y donde los examinadores evalúan a los alumnos. Cada estación clínica dispone de elementos y materiales concretos que deben ser especificados y chequeados previamente a la realización de la prueba¹⁰. Cada estación está identificada con un número. Su localización debe ser sencilla y el acceso a la siguiente estación debe ser fácil y rápido para evitar pérdidas de tiempo o concentración¹². Por ello se organiza una rueda de estaciones correlativas, optimizando así los recursos y el tiempo (fig. 1). Es importante desarrollar y mantener un banco de estaciones ECOE de calidad garantizada y revisadas por pares para usarlas en varias convocatorias de exámenes¹³.

  
  

  Figura 1.

  Ejemplo de rueda de evaluación clínica objetiva estructurada (ECOE) consistente en 20 estaciones clínicas (EST) y 3 puestos de descanso. Cada estudiante, del 1 al 23, comienza en una estación y al acabar el tiempo (habitualmente 10 min), debe pasar a la siguiente. El alumno al que le corresponda la silla descansará durante ese turno. Esta rueda de ECOE se utilizó en una universidad española en 2019. Nótese que se especifican las diferentes especialidades médicas de cada estación y que la número 13 correspondía a Radiología.
• d.

  Los casos. Son el contenido primario fundamental de la ECOE y la base de las diferentes estaciones clínicas. Cada caso se compone habitualmente de una descripción con datos del paciente, anamnesis y exploración física, pruebas clínicas o radiológicas y examen con las diferentes preguntas a desarrollar (fig. 2), así como una lista de verificación para evaluar las competencias requeridas de forma objetiva, uniforme y estandarizada (tabla 3). Los casos deben incluir en la medida de lo posible las siguientes características: 1)prevalencia, deben recoger enfermedad frecuente; 2)globalidad o capacidad de evaluación de todas las competencias necesarias en cada caso; 3)factibilidad o posibilidad real de diseño de la estación con los recursos disponibles; y 4)facilidad de evaluación, mediante una lista de verificación. Además, sería interesante añadir modelos de simulación como parte de los casos-pacientes de la ECOE para poner en práctica habilidades vinculadas a las imágenes (como, por ejemplo, marcajes pleurales, biopsias guiadas por imagen o ecografía entre otras).

  
  

  Figura 2.

  Ejemplo de imágenes aportadas a un caso clínico en una estación ECOE, con la siguiente situación de partida: «Mujer de 55 años, que acude a Urgencias por dolor sordo en el hipocondrio derecho, náuseas, vómitos y fiebre de 38,5 °C. Analítica: destaca hiperbilirrubinemia a expensas de la bilirrubina directa, elevación de transaminasas, PCR 89,2, leucocitosis con desviación izquierda. Se le realiza una prueba de imagen. Tiene 10 min para: establecer un juicio clínico de presunción, describir la técnica y los hallazgos radiológicos y prescribir el tratamiento».
  Tabla 3.

  Ejemplo de lista de verificación del caso clínico de la figura 2

  Pregunta	Respuesta	Calificación
  Juicio clínico
  1. Colecistitis aguda	S	3
  Hallazgos radiológicos
  2. TC abdomen cortes axiales	S	1
  3. Contraste IV fase venosa	S	2
  4. Vesícula aumentada de tamaño	S	1
  5. Pared vesicular realzada y edematosa	S	2
  6. Aumento de atenuación de la grasa adyacente	S	1
  7. Líquido libre intraabdominal	S	1
  8. Dilatación de vías biliares intrahepáticas	S	1
  Tratamiento
  9. Cirugía urgente	S	1
  10. ATB intrahospitalaria	S	1
• e.

  Selección y entrenamiento de pacientes estandarizados y de evaluadores. Los pacientes estandarizados suelen ser actores entrenados para simular a un paciente, su historia clínica, exploración física, actitudes y características emocionales, en función del caso que se vaya a representar. Su actuación siempre ofrece la misma información, actuando de la misma manera frente a todos los alumnos. Los evaluadores deben ser personal cualificado y con experiencia, tanto en la situación clínica que se va a evaluar como en el funcionamiento y el desarrollo del sistema ECOE; así mismo, deben estar familiarizados previamente con el caso a examinar, los diferentes ítems que el alumno debe cumplimentar, los criterios de evaluación y las normas generales de la prueba.

ECOE formativa y sumativa

La evaluación sumativa es el método de evaluación tradicional, tiene como objetivo medir los resultados del aprendizaje para tomar decisiones de promoción (aprobar una materia, superar una titulación, acreditarse, etc.). La evaluación formativa evalúa el progreso y el conocimiento de los alumnos, y surge para diagnosticar las dificultades de los estudiantes, proporcionando información que permite mejorar la enseñanza y el aprendizaje¹⁴. La ECOE se utiliza en todo el mundo para la evaluación formativa y sumativa en la formación de las profesiones sanitarias^4,15,16, aunque surgió inicialmente como un método de evaluación sumativa. Se ha descrito que la realización de una ECOE sumativa puede influir negativamente en el aprendizaje debido al estrés por la nota y puede estimular métodos de trampa y engaño para adquirir mejores puntuaciones en el examen, en detrimento del aprendizaje. Habitualmente, los estudiantes que realizan una ECOE formativa valoran la oportunidad de completarla como una experiencia de aprendizaje, aunque en ocasiones no identifican el carácter formativo de la misma¹⁷.

Las ECOE formativas a menudo incluyen comentarios inmediatos de pacientes estandarizados o proporcionan a los estudiantes acceso a datos de rendimiento, puntuaciones, listas de verificación y grabaciones de vídeo para complementar la retroalimentación¹⁸. Esta retroalimentación muestra al estudiante sus fortalezas y debilidades en las diferentes competencias evaluadas, lo que estimula una mejora continua incluso después de la realización de la prueba. Por ello, la ECOE formativa puede ser de gran utilidad también durante la formación de posgrado^17,19.

La participación de Radiología en las pruebas ECOE

Las imágenes radiológicas están presentes con frecuencia en las pruebas ECOE, a veces como parte de una estación clínica de otra especialidad, otras como una estación propia de Radiología. Se han encontrado diferencias significativas en el número de estaciones ECOE radiológicas utilizadas en las universidades. Aunque algunas no incluyen ninguna, según un estudio realizado en las universidades escocesas, el promedio es incluir una estación por prueba ECOE⁷. Por otro lado, las estaciones radiológicas incluidas en pruebas ECOE multidisciplinares permiten a los profesores evaluar competencias clínicas como resultado de actividades docentes sobre radiografía convencional²⁰, mamografía²¹, tomografía computarizada, resonancia magnéticas o ecografía^22,23.

La presencia de imágenes radiológicas en las pruebas ECOE refleja la importancia de la radiología como componente de la formación de los estudiantes de medicina. Los radiólogos debemos estar implicados en los comités que toman decisiones sobre las pruebas ECOE universitarias para garantizar la presencia de estaciones radiológicas y perfilar adecuadamente los objetivos, contenidos y el desarrollo de las pruebas.

Las estaciones ECOE radiológicas exploran frecuentemente habilidades interpretativas. Para ello, suelen incluir un caso clínico en el que se muestra una técnica de imagen determinada y el estudiante debe contestar preguntas relacionadas con su percepción de los hallazgos esenciales, su interpretación y juicio clínico²⁴.

En una estación ECOE radiológica es fundamental enfocarse en los siguientes objetivos: a) comprender adecuadamente la historia clínica y de las indicaciones de las pruebas de imagen; b) describir adecuadamente los hallazgos radiológicos observados y la técnica empleada; c) proponer un diagnóstico diferencial, y d) conocer el manejo diagnóstico, terapéutico y los próximos pasos a seguir según la enfermedad mostrada. Se ha observado que el entrenamiento de los alumnos de Medicina en este tipo de estaciones ECOE favorece un mejor entendimiento de las diferentes enfermedades, una mejor comprensión de la anatomía y fisiología aplicadas al contexto real del paciente y una mejora en el entendimiento del manejo terapéutico, planificación quirúrgica y correlación radiopatológica de las diferentes enfermedades²⁵. Otro punto importante de las estaciones ECOE radiológicas reside en evaluar la formación radiológica aplicada a casos clínicos reales, mediante contextos clínicos que emulan la realidad, enseñando a discernir cuándo es adecuado solicitar las pruebas radiológicas y qué técnica es la más adecuada según el diagnóstico de presunción, evitando una exposición innecesaria a radiaciones ionizantes.

Existe otro tipo de estaciones radiológicas que permite evaluar una habilidad técnica concreta, por ejemplo, la realización de una ecografía^22,23,26, o bien habilidades éticas, interpersonales y de comunicación con el paciente (p. ej., gestionar diferencias de opinión entre colegas o informar a la paciente o el familiar del diagnóstico obtenido por una prueba de imagen)^21,27. Como ejemplo de estaciones ECOE de radiología que evalúan habilidades técnicas, se ha utilizado una estación de examen ECOE de final de curso para demostrar el dominio de los objetivos de aprendizaje de un curso de ecografía toracoabdominal²². Los estudiantes debían demostrar su capacidad para realizar un examen ecográfico, obteniendo correctamente los planos anatómicos solicitados. De forma similar, en otro estudio²³ se evaluaron las habilidades realizando ecografía musculoesquelética. Se pidió a los participantes que reprodujeran 3 planos seccionales estándar de hombro, e incluso se midió el tiempo desde que la sonda toca el hombro hasta que se creó una imagen fija del plano de sección final. Estaciones similares a las de estos estudios permitirían evaluar habilidades de intervencionismo guiado por ecografía, especialmente en la formación de residentes.

En las estaciones ECOE radiológicas se pueden evaluar habilidades de comunicación, habitualmente centradas en la explicación al paciente o familiares de los hallazgos radiológicos encontrados y del manejo radiológico-terapéutico recomendado²⁵. Los pacientes estandarizados son esenciales para este tipo de estaciones ECOE, pues permiten evaluar habilidades interpersonales en situaciones clínicas reales como: a) informar de un diagnóstico equivocado; b) dar malas noticias; c) manifestar el desacuerdo con un colega; d) informar de un diagnóstico omitido; e) explicar una complicación del procedimiento, o f) informar y solicitar un consentimiento informado²⁷. Yendo un paso más allá, Lown et al.²¹ realizaron una interesante experiencia basada en 2 estaciones ECOE formativas para mejorar las habilidades de comunicación de residentes de radiodiagnóstico informando a las pacientes de los hallazgos de imagen mamaria. Para ello contaron con la colaboración de pacientes que se implicaron en el diseño de la prueba y en aportar retroalimentación basada en el papel interpretado y en sus experiencias reales.

ECOE específicas de Radiología

La ECOE puede ser un método adecuado para probar la integración del conocimiento clínico y radiológico²⁴. El modelo ECOE está siendo ampliamente utilizado, tanto en pregrado como posgrado, en la evaluación de competencias de diferentes especialidades médicas^28–30. Las pruebas ECOE específicas de radiología se han utilizado con estudiantes de medicina^1,24, residentes de radiodiagnóstico y estudiantes de técnica radiológica^31,32.

Morag et al.²⁴ realizaron una prueba ECOE durante un rotatorio obligatorio de radiología, basada en 5 casos clínicos, en la que participaron 122 estudiantes. Concluyeron que la ECOE puede ser útil para descubrir deficiencias en individuos y grupos más allá de las detectadas en evaluaciones tradicionales y aportar orientación para remediarlas. Staziaki et al.¹ realizaron una prueba ECOE tras un rotatorio electivo de radiología, con 9 estaciones de Radiología convencional. Tras la participación de 184 estudiantes de Medicina, concluyeron que las ECOE radiológicas demostraron ser objetivas, estructuradas, reproducibles y de bajo costo, y señalaron la necesidad de un entrenamiento previo para mejorar la correlación entre evaluadores. Hofer et al.²⁶ realizaron y validaron una prueba ECOE con 11-14 estaciones específicas de ecografía abdominal para estudiantes de Medicina. La validación de los ítems incluidos les ha permitido utilizar el mismo diseño, modificando los valores de corte y la elección de casos, con residentes de radiodiagnóstico³³.

Recientemente, se ha explorado la posibilidad de que estudiantes de años avanzados evalúen a estudiantes de cursos inferiores en una prueba ECOE de radiología con participación mínima del profesorado, atendiendo a un concepto de evaluación por «pares cercanos»³². Los autores encontraron en la ECOE una herramienta valiosa que ayuda a los estudiantes a desarrollar un juicio evaluativo y, al mismo tiempo, proporciona una experiencia de aprendizaje auténtica e inmersiva. A nivel de posgrado, en la Universidad Pontificia Católica de Chile, se ha utilizado la ECOE formativa para evaluar las competencias de los residentes de Radiodiagnóstico antes de su incorporación autónoma a las guardias de Radiología, observando que el modelo ECOE muestra los déficits curriculares, fomenta la retroalimentación y mejora el diseño de la formación en la especialidad^34,35. Puede que sea el momento de introducir la ECOE como una prueba práctica de radiología en las asignaturas de grado y en la formación de residentes. Esto requerirá varias medidas de colaboración¹⁰, como: a) participación de la comunidad académica de radiología y de facultativos de las principales instituciones docentes; b) organización de talleres y reuniones para conocer los fundamentos de la ECOE, y c) garantizar el proceso de validación, certificación y finalización antes de su uso.

ECOE virtuales

La pandemia por COVID-19 ha revolucionado el impacto de la formación online en la enseñanza superior. Las restricciones de contacto y presencia física han conducido al desarrollo de las tecnologías y han habituado a profesores y alumnos a utilizar recursos online³⁶. Durante el confinamiento en 2020 se realizó la prueba ECOE virtual, con acceso online, como solución a estas restricciones^37–39.

En España se desarrolló una prueba ECOE virtual, coordinada por la CNDM, que incluyó las competencias de: anamnesis, exploración, juicio clínico, aspectos éticos, relaciones interprofesionales y prevención y promoción de la salud. No se evaluaron habilidades técnicas ni de comunicación³⁹. Esta ECOE virtual consistió en 10 estaciones de Ginecología, Pediatría, Psiquiatría, Cirugía y Traumatología, Medicina y Atención Primaria. Se organizaron 21 facultades de medicina españolas, participando 3.479 alumnos de sexto curso, con las plataformas de gestión de docencia de cada universidad (Moodle, Sakai, Blackboard y la plataforma de la Fundación Practicum-Script®). Los alumnos completaron una encuesta de satisfacción tras la prueba, en la que un 52% señaló haber percibido bastante nivel de estrés previo. A pesar de ello, la mayoría valoró como adecuada la información previa recibida (70%), la organización el día de la prueba (83%), los conocimientos previos adquiridos (88%) y el tipo de problemas médicos presentados (76%), y consideró la prueba como una buena experiencia del aprendizaje (75%). Esta experiencia innovadora integró las diferentes facultades en la preparación de una ECOE conjunta, evaluando un gran número de competencias necesarias y mostrando la utilidad de la aplicación virtual de este modelo de evaluación. Además, esta ECOE virtual se asemeja al paso 3 del examen de licenciatura médica de EE. UU. (Computer-based Case Simulation), lo que junto con la ECOE presencial podría promover la homologación futura de la titulación española con la de EE. UU.³⁹. En junio del 2021 se repitió una ECOE virtual a nivel nacional, con características similares a la de 2020 y en 2022 se ha realizado una experiencia mixta, con 10 estaciones virtuales idénticas en un examen sincrónico para toda España y 10 estaciones presenciales, desarrolladas por el formato clásico en cada universidad.

Las ECOE virtuales han demostrado ser agradables, interactivas y fáciles para los alumnos, además de ser coste-efectivas en términos de personal y recursos necesarios, y eliminar la necesidad de amplios espacios para su realización¹⁰. Como inconvenientes no permiten demostrar en directo habilidades manuales y de comunicación sincrónica con pacientes estandarizados. Se han propuesto 12 consejos para la implementación de una adecuada ECOE en formato virtual que quedan reflejados en la tabla 4⁴⁰.

Tabla 4.

Consejos para la implementación de una adecuada ECOE en formato virtual

1	Pensar en la dimensión práctica de la prueba: qué habilidades se quiere evaluar, que objetivos se plantean, qué estaciones incluir o excluir, qué expectativas tienen estudiantes y profesores y qué recursos hay disponibles
2	Elegir un soporte tecnológico eficaz. Hay muchas plataformas virtuales, pero la mejor opción es aquella con la que profesorado y alumnos estén más familiarizados
3	Elegir a los anfitriones (administradores) cuidadosamente. Llevan el peso más importante de la ECOE, dirigiendo a alumnos y evaluadores, facilitando un buen soporte digital e informático en todo el proceso
4	Seleccionar y modificar las estaciones ECOE para adaptarlas a un desarrollo online. Las estaciones virtuales deben simular presencialidad de la forma más cercana posible, especialmente para la evaluación de habilidades prácticas
5	La creatividad desempeña un importante papel en las ECOE virtuales, por ejemplo, para evaluar un taller de sutura, puede enviarse al estudiante el material y ver por videograbación como se desenvuelve al llevarla a cabo
6	No revelar el contenido de las ECOE antes del desarrollo del examen. La privacidad del examen es fundamental
7	Proporcionar preparación extra en el modelo de ECOE virtual. Es fundamental que los alumnos y profesores estén familiarizados con la plataforma online donde se va a desarrollar la ECOE
8	No perder la concentración en el alumno. Cuando los profesores tienen paralelamente múltiples tareas pueden no centrarse plenamente en cómo se está desarrollando el examen, por ello, debe grabarse lo que está sucediendo para una correcta evaluación posterior
9	Optimización de lo mostrado en la pantalla de los alumnos. El alumno debe ver claramente las instrucciones de cada estación, los documentos adicionales, las imágenes aportadas y las preguntas a contestar
10	Hacer una simulación completa de la ECOE virtual previamente al día del examen. Es fundamental revisar todo el circuito y comprobar que la conectividad de los anfitriones y los profesores funciona adecuadamente
11	Utilizar un canal externo de comunicación privada entre los organizadores del ECOE y los profesores para solventar cualquier problema durante el examen
12	Promover una buena retroalimentación a todo el personal involucrado en el examen, para solventar posibles errores o fallos y mejorarlos en el futuro

La prueba ECOE en entornos virtuales tridimensionales

Los mundos virtuales, también llamados entornos inmersivos o metaverso, son espacios virtuales tridimensionales generados por ordenador donde las personas se relacionan entre sí de forma remota. Los estudiantes de Medicina actuales utilizan la tecnología y los juegos virtuales para divertirse y relacionarse, por lo que usarlos como método de enseñanza podría ser una forma eficaz de implicar a los alumnos en su aprendizaje⁴¹. Como inconvenientes, existen limitaciones técnicas ocasionales (de procesador, tarjeta gráfica o transmisión de datos en Internet), y hay que considerar costes de mantenimiento del espacio virtual y el tiempo de profesorado para preparar contenidos.

Se han desarrollado entornos de simulación clínica en mundos virtuales para entrenar competencias diversas, como realizar la anamnesis a pacientes virtuales⁴², resolver situaciones clínicas en una guardia de neumología⁴³, entrenar la resucitación cardiopulmonar⁴⁴ o entrenar habilidades de comunicación con los pacientes⁴⁵. Estos escenarios virtuales propician que se puedan realizar pruebas ECOE en las que el estudiante interactúa mediante su avatar con un escenario en un contexto clínico determinado, por ejemplo, los accidentes domésticos en Geriatría⁴⁶ o con otro avatar representando un paciente estandarizado⁴⁷, suponiendo una alternativa práctica y aceptable a las ECOE tradicionales.

Uno de los mundos virtuales más ampliamente utilizados como recurso docente para profesionales sanitarios es Second Life®⁴⁸. Ha demostrado ser una herramienta útil de docencia y aprendizaje en actividades online, tanto sincrónicas como asincrónicas, para la enseñanza de Radiología⁴⁹. Sus principales ventajas son la capacidad de acceso remoto, la importante sensación de presencialidad, el fácil acceso y su gratuidad. Ha sido descrito por los alumnos en diversos proyectos como un entorno lúdico, divertido, atractivo e interesante como herramienta formativa^50–52. Todas estas ventajas de Second Life® refuerzan su utilidad como plataforma digital para la realización de pruebas ECOE, tanto sumativas como formativas, pues permite diseñar y recrear escenarios diversos para entrenar la toma de decisiones frente a casos clínicos⁵³ e interactuar con pacientes estandarizados virtuales⁴⁷. Recientemente, se ha realizado una experiencia docente virtual sobre radiología de urgencias, en la que estudiantes de sexto de medicina debían resolver en grupos de 3-4 alumnos casos de radiología en urgencias en 7 estaciones ECOE virtuales (fig. 3). Los alumnos mostraron gran aceptación e interés por este sistema, valorando muy positivamente, el entorno, los casos ECOE y la utilidad formativa de la experiencia⁵⁴. Sería interesante desarrollar e implementar ECOE radiológicas en entornos virtuales, tanto a nivel universitario como para la docencia MIR, pues permitiría la optimización de recursos y la realización de estudios multicéntricos.

Figura 3.

Escenas del proyecto ECOE-RX de pregrado. Puede apreciarse el distribuidor de acceso a las habitaciones con las estaciones ECOE y varios grupos de alumnos trabajando las estaciones correspondientes, con casos de radiología de urgencias. Las estaciones muestran un escenario simulando una unidad de Radiología con la situación clínica descrita en un póster en la pared y una mesa de reuniones con uno o 2 monitores presentando las imágenes del caso.

La realidad virtual, utilizando gafas inmersivas y dispositivos manuales hápticos (que proporcionan la realimentación de fuerza al sujeto que los manipula), puede utilizarse para evaluar competencias de habilidades manuales. Hay experiencias descritas en la formación en radiología vascular intervencionista, evaluando técnicas de Seldinger, cateterización vascular, angiografía y angioplastia, que han demostrado mejorar las habilidades de los residentes de radiodiagnóstico, aunque con ciertas limitaciones ergonómicas⁵⁵.

Conclusiones

La ECOE es un modelo de evaluación estructurado, uniforme, sistemático, objetivo y estandarizado. Su implementación en pregrado está aumentado actualmente a nivel global dada la eficacia demostrada al evaluar diferentes competencias y habilidades del alumno. Es importante incluir estaciones ECOE radiológicas en las evaluaciones de los centros universitarios para equiparar el peso que tiene la radiología en la clínica. La ECOE es una técnica de evaluación que puede y debe incorporarse en la formación radiológica en pregrado, la residencia y la formación continuada. Las ECOE virtuales posibilitan la evaluación online mediante plataformas bidimensionales, aunque con ciertas limitaciones. La tecnología de realidad virtual permite reproducir escenarios diversos tridimensionales para estaciones ECOE. Es importante explorar estos recursos en el ámbito radiológico, pues experiencias recientes han mostrado gran aceptación, interés y motivación en los alumnos.

Autoría

• 1.

  Responsable de la integridad del estudio AVPB y FSP.

• 2.

  Concepción del estudio AVPB y FSP.

• 3.

  Diseño del estudio AVPB y FSP.

• 4.

  Búsqueda bibliográfica AVPB y FSP.

• 5.

  Redacción del trabajo: AVPB y FSP.

• 6.

  Revisión crítica del manuscrito con aportaciones intelectualmente relevantes: AVPB y FSP.

• 7.

  Aprobación de la versión final: AVPB y FSP.

Financiación

La presente investigación no ha recibido ayudas específicas provenientes de agencias del sector público, sector comercial o entidades sin ánimo de lucro.

Conflicto de intereses

Los autores declaran que no tienen conflicto de intereses.