Fiabilidad de un examen clínico objetivo estructurado para predecir la futura competencia profesional de estudiantes de medicina

Abstract

espanolIntroduccion. Cuando con los resultados de un examen clinico objetivo estructurado (ECOE) se decide sobre la futura competencia profesional de estudiantes de medicina, la fiabilidad de dicha prueba debe adecuarse a esta finalidad. Objetivo. Calcular la fiabilidad (alfa de Cronbach) de una serie de ECOE y su relacion con la duracion, numero de participantes, estaciones, items y evaluadores. Sujetos y metodos. Se analizan 14 ECOE realizados a 2.995 estudiantes de cuarto y quinto curso de la Facultad de Medicina de Granada desde 2004 a 2013. Resultados. La fiabilidad fue ≥ 0,70 en el 92,84% de los ECOE. Tambien fue significativamente ≥ 0,70 cuando la duracion total fue ≥ 60 minutos (p = 0,042), el numero de estaciones ≥ 10 (p = 0019), el numero de items ≥ 50 (p = 0,018) y el numero de evaluadores ≥ 6 (p = 0,018). No se observaron diferencias con el numero de estudiantes ni con las opciones al item utilizadas. Conclusiones. Los ECOE cuyos resultados se utilicen para aprobar asignaturas de la carrera de medicina deben tener una fiabilidad ≥ 0,70. Para alcanzar dicha fiabilidad o mayor, el formato debe constar de al menos 10 estaciones, durar ≥ 60 minutos, tener ≥ 50 items y ≥ 6 evaluadores. EnglishIntroduction. When the future professional competence of medical students is decided based on results of an objective structured clinical examination (OSCE), the reliability of this test should be adequate to this purpose. Aim. To calculate the reliability (Cronbach’s alpha) of each one of OSCEs we performed and its relationship with the duration, number of participants, stations, items and evaluators. Subjects and methods. Fourteen OSCE tests performed to 2995 medical students of 4th and 5th year of the Faculty of Medicine of Granada between 2004 to 2013 were analyzed. Results. The reliability was ≥ 0.70 in 92.84% of the OSCEs. It was also significant ≥ 0.70 with a total duration ≥ 60 minutes (p = 0.042), and a number of stations ≥ 10 ( p = 0.019), a number of items ≥ 50 (p = 0.018) and a number of evaluators ≥ 6 (p = 0.018). No differences with the number of students, neither with the options to the item were observed. Conclusions. The OSCEs carried out in centers which results are used to approve subjects of the medical career, must have a reliability ≥ 0.70. To achieve this reliability or greater, the format should consist of at least: 10 stations, a duration ≥ 60 minutes, and having ≥ 50 items and ≥ 6 evaluators.