{"title":"英语测试,自动求值,以属性linguı́信息对其ı́cie和内容","authors":"Silvéiro Sirotheau, J. Santos, Eloi L. Favero","doi":"10.5753/WEI.2019.6634","DOIUrl":null,"url":null,"abstract":"Cresce a necessidade de ambientes inteligentes para o ensino a distância. Um dos seus elementos é um sistema de avaliação automática de questões conceituais discursivas. Neste trabalho, propõe-se um método de avaliação automática de ensaio na lı́ngua portuguesa baseado no refinamento de atributos de conteúdo (semânticos), de coerência e estatı́sticos de superfı́cie para predizer a pontuação de um ensaio. A acurácia do sistema (SxH) foi contrastada com a acurácia medida entre dois avaliadores humanos (HxH), o que resultou num valor de erro médio de 0.91 SxH contra 0.89 HxH e numa acurácia kappa quadrático de 0.62 SxH contra 0.52 HxH. Este estudo mostra que esta tecnologia está alcançando maturidade para o uso em ambientes.","PeriodicalId":237172,"journal":{"name":"Anais do Workshop sobre Educação em Computação (WEI)","volume":"132 1","pages":"0"},"PeriodicalIF":0.0000,"publicationDate":"2019-07-12","publicationTypes":"Journal Article","fieldsOfStudy":null,"isOpenAccess":false,"openAccessPdf":"","citationCount":"0","resultStr":"{\"title\":\"Avaliação Automática de Ensaios, em português, centrada em atributos linguı́sticos de superfı́cie e de conteúdo\",\"authors\":\"Silvéiro Sirotheau, J. Santos, Eloi L. Favero\",\"doi\":\"10.5753/WEI.2019.6634\",\"DOIUrl\":null,\"url\":null,\"abstract\":\"Cresce a necessidade de ambientes inteligentes para o ensino a distância. Um dos seus elementos é um sistema de avaliação automática de questões conceituais discursivas. Neste trabalho, propõe-se um método de avaliação automática de ensaio na lı́ngua portuguesa baseado no refinamento de atributos de conteúdo (semânticos), de coerência e estatı́sticos de superfı́cie para predizer a pontuação de um ensaio. A acurácia do sistema (SxH) foi contrastada com a acurácia medida entre dois avaliadores humanos (HxH), o que resultou num valor de erro médio de 0.91 SxH contra 0.89 HxH e numa acurácia kappa quadrático de 0.62 SxH contra 0.52 HxH. Este estudo mostra que esta tecnologia está alcançando maturidade para o uso em ambientes.\",\"PeriodicalId\":237172,\"journal\":{\"name\":\"Anais do Workshop sobre Educação em Computação (WEI)\",\"volume\":\"132 1\",\"pages\":\"0\"},\"PeriodicalIF\":0.0000,\"publicationDate\":\"2019-07-12\",\"publicationTypes\":\"Journal Article\",\"fieldsOfStudy\":null,\"isOpenAccess\":false,\"openAccessPdf\":\"\",\"citationCount\":\"0\",\"resultStr\":null,\"platform\":\"Semanticscholar\",\"paperid\":null,\"PeriodicalName\":\"Anais do Workshop sobre Educação em Computação (WEI)\",\"FirstCategoryId\":\"1085\",\"ListUrlMain\":\"https://doi.org/10.5753/WEI.2019.6634\",\"RegionNum\":0,\"RegionCategory\":null,\"ArticlePicture\":[],\"TitleCN\":null,\"AbstractTextCN\":null,\"PMCID\":null,\"EPubDate\":\"\",\"PubModel\":\"\",\"JCR\":\"\",\"JCRName\":\"\",\"Score\":null,\"Total\":0}","platform":"Semanticscholar","paperid":null,"PeriodicalName":"Anais do Workshop sobre Educação em Computação (WEI)","FirstCategoryId":"1085","ListUrlMain":"https://doi.org/10.5753/WEI.2019.6634","RegionNum":0,"RegionCategory":null,"ArticlePicture":[],"TitleCN":null,"AbstractTextCN":null,"PMCID":null,"EPubDate":"","PubModel":"","JCR":"","JCRName":"","Score":null,"Total":0}
引用次数: 0
摘要
对远程学习智能环境的需求日益增长。它的一个要素是概念性论述问题的自动评价系统。评估工作,提出了一种自动测试际ı́葡萄牙发送基于细化的语义内容(属性),统计的一致性和ı́信息对其ı́预测评分的一个测试。系统精度(SxH)与两个人类评估者(HxH)测量的精度进行了对比，结果平均误差值为0.91 SxH vs . 0.89 HxH，二次kappa精度为0.62 SxH vs . 0.52 HxH。这项研究表明，这项技术正在达到在环境中使用的成熟。
Avaliação Automática de Ensaios, em português, centrada em atributos linguı́sticos de superfı́cie e de conteúdo
Cresce a necessidade de ambientes inteligentes para o ensino a distância. Um dos seus elementos é um sistema de avaliação automática de questões conceituais discursivas. Neste trabalho, propõe-se um método de avaliação automática de ensaio na lı́ngua portuguesa baseado no refinamento de atributos de conteúdo (semânticos), de coerência e estatı́sticos de superfı́cie para predizer a pontuação de um ensaio. A acurácia do sistema (SxH) foi contrastada com a acurácia medida entre dois avaliadores humanos (HxH), o que resultou num valor de erro médio de 0.91 SxH contra 0.89 HxH e numa acurácia kappa quadrático de 0.62 SxH contra 0.52 HxH. Este estudo mostra que esta tecnologia está alcançando maturidade para o uso em ambientes.
求助内容：
应助结果提醒方式：
京公网安备 11010802042870号
