The construction of the Kazakh language thesauri in automatic word processing system

2020

Закрытый доступ Метаданные (CSL-JSON)
DOI 10.1145/3410352.3410789
Достоверность данных 70 средняя
Как считается эта оценка

Складывается из проверяемых признаков самой записи: есть ли у статьи DOI, сколько независимых источников подтвердили её данные, заполнены ли обязательные поля и насколько свежо последнее подтверждение. Снижают оценку расхождения между источниками и отсутствие идентификатора. Значение от 80 означает, что запись опубликована без дополнительной проверки; от 60 до 79 — что она опубликована с пониженной достоверностью и ручная проверка желательна. Запись, выверенную редактором вручную, пересчёт не опускает ниже 90. Это оценка наших данных о статье, а не оценка самой статьи.

Аннотация

In the paper presents an overview of existing electronic Kazakh-language thesauri and their automatic methods of construction and application. The author analyzed the main characteristics of open access thesauri for scientific research, evaluated the dynamics of their development and effectiveness in solving problems of natural language processing. Statistical and linguistic methods of thesaurus construction were studied, which allow to automate the development and reduce the labor costs of expert linguists. It is considered algorithms for selecting key terms from texts and semantic thesaurus links of all types, as well as the quality of application of the resulting thesauri. For illustrate the features of various methods of building thesaurus links, a combined method was developed that generates a specialized thesaurus completely automatically based on the corpus of domain texts and several existing linguistic resources.