Overview of ADoBo 2021: Automatic Detection of Unassimilated Borrowings in the Spanish Press

Abstract

espanolEn este articulo presentamos los resultados de ADoBo 2021, la tarea compartida de IberLEF 2021 sobre deteccion de prestamos lexicos en la prensa espanola. En esta tarea abordamos la deteccion de prestamos como un problema de etiquetado de secuencias. A los participantes de la tarea se les proporciono un corpus de prensa espanola anotado con prestamos lexicos no asimilados (mayoritariamente anglicismos) siguiendo el esquema BIO. Recibimos nueve sistemas distintos provenientes de cuatro equipos diferentes. Los resultados obtenidos oscilan entre los 37 y los 85 puntos de valor F1, lo que indica que la deteccion de prestamos lexicos es un problema no resuelto (sobre todo cuando se abordan prestamos no vistos anteriormente) y que el trabajo lexicografico tradicional podria beneficiarse de incorporar las tecnicas actuales del PLN. EnglishThis paper summarizes the main findings of the ADoBo 2021 shared task, proposed in the context of IberLef 2021. In this task, we invited participants to detect lexical borrowings (coming mostly from English) in Spanish newswire texts. This task was framed as a sequence classification problem using BIO encoding. We provided participants with an annotated corpus of lexical borrowings which we split into training, development and test splits. We received submissions from 4 teams with 9 different system runs overall. The results, which range from F1 scores of 37 to 85, suggest that this is a challenging task, especially when out-of-domain or OOV words are considered, and that traditional methods informed with lexicographic information would benefit from taking advantage of current NLP trends.