- Book学术

发布求助

文献互助智能选刊最新文献

Научно-техническая информация. Серия 2: Информационные процессы и системы Pub Date : 2021-01-01 DOI:10.36535/0548-0027-2021-02-2

А. Ю. Малафеев, А.Yu. Malafeev, Л.П. Мальтина, L.P. Maltina

{"title":"Распределённые представления редких слов русского языка, учитывающие векторы однокоренных слов","authors":"А. Ю. Малафеев, А.Yu. Malafeev, Л.П. Мальтина, L.P. Maltina","doi":"10.36535/0548-0027-2021-02-2","DOIUrl":null,"url":null,"abstract":"Рассматриваются алгоритмы, выполняющие автоматический морфемный анализ слов, и методы распределённых представлений слов, которые используют информацию о морфемном составе, но не напрямую, а через усреднение векторов однокоренных слов. Оценивается качество моделей морфемного анализа для русского языка, в том числе и на выборке из редких слов. Предлагается несколько способов получения распределённых представлений редких слов на основе word2vec-представлений однокоренных слов. Проведённые эксперименты показали, что на задаче определения семантической близости пары слов предлагаемые методики дают результаты, сопоставимые с результатами модели fastText или превосходят их.","PeriodicalId":24076,"journal":{"name":"Научно-техническая информация. Серия 2: Информационные процессы и системы","volume":null,"pages":null},"PeriodicalIF":0.0000,"publicationDate":"2021-01-01","publicationTypes":"Journal Article","fieldsOfStudy":null,"isOpenAccess":false,"openAccessPdf":"","citationCount":"0","resultStr":null,"platform":"Semanticscholar","paperid":null,"PeriodicalName":"Научно-техническая информация. Серия 2: Информационные процессы и системы","FirstCategoryId":"1085","ListUrlMain":"https://doi.org/10.36535/0548-0027-2021-02-2","RegionNum":0,"RegionCategory":null,"ArticlePicture":[],"TitleCN":null,"AbstractTextCN":null,"PMCID":null,"EPubDate":"","PubModel":"","JCR":"","JCRName":"","Score":null,"Total":0}

引用次数: 0

摘要

考虑的是执行自动形态分析单词的算法和分布式表示方法，使用的是单个单词向量的平均值，而不是直接的。俄罗斯语言形态分析模型的质量正在评估中，包括稀有单词的样本。有几种方法可以通过word2vec表示单个单词来分组表示稀有单词。实验表明，在确定成对词的语义亲密的任务中，拟议的方法产生的结果与fastText模型相似或优于。

本文章由计算机程序翻译，如有差异，请以英文原文为准。

查看原文本刊更多论文

Распределённые представления редких слов русского языка, учитывающие векторы однокоренных слов

Рассматриваются алгоритмы, выполняющие автоматический морфемный анализ слов, и методы распределённых представлений слов, которые используют информацию о морфемном составе, но не напрямую, а через усреднение векторов однокоренных слов. Оценивается качество моделей морфемного анализа для русского языка, в том числе и на выборке из редких слов. Предлагается несколько способов получения распределённых представлений редких слов на основе word2vec-представлений однокоренных слов. Проведённые эксперименты показали, что на задаче определения семантической близости пары слов предлагаемые методики дают результаты, сопоставимые с результатами модели fastText или превосходят их.

求助全文

通过发布文献求助，成功后即可免费获取论文全文。去求助

来源期刊

Научно-техническая информация. Серия 2: Информационные процессы и системы

自引率

0.00%

发文量