Jesús Castro-Calvo, Diana Pons-Cañaveras, Patricia Beltrán-Martínez, Francisco Atienza-González, Ascensión Bellver-Pérez, Usue De la Barrera-Marzal, Amelia Díaz-Martínez, Alicia Juan-Hidalgo, L. Lacomba-Trejo, Adriana Mira-Pastor, Estefanía Mónaco-Gerónimo, Inmaculada Montoya-Castilla, Konstanze Schoeps, Castora Silva-Silva, M. E. Wrzesien
{"title":"通过项目反应理论分析多项选择考试的质量:在“心理评估”学科中的应用","authors":"Jesús Castro-Calvo, Diana Pons-Cañaveras, Patricia Beltrán-Martínez, Francisco Atienza-González, Ascensión Bellver-Pérez, Usue De la Barrera-Marzal, Amelia Díaz-Martínez, Alicia Juan-Hidalgo, L. Lacomba-Trejo, Adriana Mira-Pastor, Estefanía Mónaco-Gerónimo, Inmaculada Montoya-Castilla, Konstanze Schoeps, Castora Silva-Silva, M. E. Wrzesien","doi":"10.4995/inred2022.2022.15905","DOIUrl":null,"url":null,"abstract":"Los Exámenes de Alternativa Múltiple (EAM) son la forma más popular de evaluar la adquisición de conocimiento. Elaborar un EAM entraña cierta complejidad; sin embargo, rara vez se analiza en qué grado los EAM cumplen los criterios de calidad exigibles a estas pruebas (p.e., en términos de dificultad, capacidad de discriminación o eficacia de los distractores). La «Teoría de Respuesta al Ítem (TRI)» es una aproximación estadística que puede ayudar a la hora de evaluar la calidad de un EAM a través de la obtención de índices objetivos que, en una fase posterior, se pueden usar para mejorar la evaluación. El objetivo de este trabajo es presentar los resultados de un Proyecto de Innovación Docente en el que se analizó, mediante TRI, los EAM usados durante los últimos tres cursos en la asignatura «Evaluación Psicológica» (Grado en Logopedia). Los resultados sugieren que una proporción importante de preguntas analizadas presentaban limitaciones relacionadas con la excesiva presencia de ítems fáciles (entre el 45%-67.5%) o distractores ineficaces (entre el 17.5%-26.6%), si bien esto no afectó sobre su capacidad de discriminación. Estos resultados sirven de base para proponer iniciativas que permitan mejorar las evaluaciones a través de EAM.","PeriodicalId":326366,"journal":{"name":"In-Red 2022 - VIII Congreso Nacional de Innovación Educativa y Docencia en Red","volume":null,"pages":null},"PeriodicalIF":0.0000,"publicationDate":"2022-07-06","publicationTypes":"Journal Article","fieldsOfStudy":null,"isOpenAccess":false,"openAccessPdf":"","citationCount":"0","resultStr":"{\"title\":\"Análisis de la calidad de exámenes de alternativa múltiple a través de la teoría de respuesta al item: aplicación en la asignatura de “Evaluación Psicològica”\",\"authors\":\"Jesús Castro-Calvo, Diana Pons-Cañaveras, Patricia Beltrán-Martínez, Francisco Atienza-González, Ascensión Bellver-Pérez, Usue De la Barrera-Marzal, Amelia Díaz-Martínez, Alicia Juan-Hidalgo, L. Lacomba-Trejo, Adriana Mira-Pastor, Estefanía Mónaco-Gerónimo, Inmaculada Montoya-Castilla, Konstanze Schoeps, Castora Silva-Silva, M. E. Wrzesien\",\"doi\":\"10.4995/inred2022.2022.15905\",\"DOIUrl\":null,\"url\":null,\"abstract\":\"Los Exámenes de Alternativa Múltiple (EAM) son la forma más popular de evaluar la adquisición de conocimiento. Elaborar un EAM entraña cierta complejidad; sin embargo, rara vez se analiza en qué grado los EAM cumplen los criterios de calidad exigibles a estas pruebas (p.e., en términos de dificultad, capacidad de discriminación o eficacia de los distractores). La «Teoría de Respuesta al Ítem (TRI)» es una aproximación estadística que puede ayudar a la hora de evaluar la calidad de un EAM a través de la obtención de índices objetivos que, en una fase posterior, se pueden usar para mejorar la evaluación. El objetivo de este trabajo es presentar los resultados de un Proyecto de Innovación Docente en el que se analizó, mediante TRI, los EAM usados durante los últimos tres cursos en la asignatura «Evaluación Psicológica» (Grado en Logopedia). Los resultados sugieren que una proporción importante de preguntas analizadas presentaban limitaciones relacionadas con la excesiva presencia de ítems fáciles (entre el 45%-67.5%) o distractores ineficaces (entre el 17.5%-26.6%), si bien esto no afectó sobre su capacidad de discriminación. Estos resultados sirven de base para proponer iniciativas que permitan mejorar las evaluaciones a través de EAM.\",\"PeriodicalId\":326366,\"journal\":{\"name\":\"In-Red 2022 - VIII Congreso Nacional de Innovación Educativa y Docencia en Red\",\"volume\":null,\"pages\":null},\"PeriodicalIF\":0.0000,\"publicationDate\":\"2022-07-06\",\"publicationTypes\":\"Journal Article\",\"fieldsOfStudy\":null,\"isOpenAccess\":false,\"openAccessPdf\":\"\",\"citationCount\":\"0\",\"resultStr\":null,\"platform\":\"Semanticscholar\",\"paperid\":null,\"PeriodicalName\":\"In-Red 2022 - VIII Congreso Nacional de Innovación Educativa y Docencia en Red\",\"FirstCategoryId\":\"1085\",\"ListUrlMain\":\"https://doi.org/10.4995/inred2022.2022.15905\",\"RegionNum\":0,\"RegionCategory\":null,\"ArticlePicture\":[],\"TitleCN\":null,\"AbstractTextCN\":null,\"PMCID\":null,\"EPubDate\":\"\",\"PubModel\":\"\",\"JCR\":\"\",\"JCRName\":\"\",\"Score\":null,\"Total\":0}","platform":"Semanticscholar","paperid":null,"PeriodicalName":"In-Red 2022 - VIII Congreso Nacional de Innovación Educativa y Docencia en Red","FirstCategoryId":"1085","ListUrlMain":"https://doi.org/10.4995/inred2022.2022.15905","RegionNum":0,"RegionCategory":null,"ArticlePicture":[],"TitleCN":null,"AbstractTextCN":null,"PMCID":null,"EPubDate":"","PubModel":"","JCR":"","JCRName":"","Score":null,"Total":0}
Análisis de la calidad de exámenes de alternativa múltiple a través de la teoría de respuesta al item: aplicación en la asignatura de “Evaluación Psicològica”
Los Exámenes de Alternativa Múltiple (EAM) son la forma más popular de evaluar la adquisición de conocimiento. Elaborar un EAM entraña cierta complejidad; sin embargo, rara vez se analiza en qué grado los EAM cumplen los criterios de calidad exigibles a estas pruebas (p.e., en términos de dificultad, capacidad de discriminación o eficacia de los distractores). La «Teoría de Respuesta al Ítem (TRI)» es una aproximación estadística que puede ayudar a la hora de evaluar la calidad de un EAM a través de la obtención de índices objetivos que, en una fase posterior, se pueden usar para mejorar la evaluación. El objetivo de este trabajo es presentar los resultados de un Proyecto de Innovación Docente en el que se analizó, mediante TRI, los EAM usados durante los últimos tres cursos en la asignatura «Evaluación Psicológica» (Grado en Logopedia). Los resultados sugieren que una proporción importante de preguntas analizadas presentaban limitaciones relacionadas con la excesiva presencia de ítems fáciles (entre el 45%-67.5%) o distractores ineficaces (entre el 17.5%-26.6%), si bien esto no afectó sobre su capacidad de discriminación. Estos resultados sirven de base para proponer iniciativas que permitan mejorar las evaluaciones a través de EAM.