Effective Search Engine Optimization in CMS Using Morphological Analysis

2024

Закрытый доступ Метаданные (CSL-JSON)
DOI 10.1109/ceii65291.2024.00042
Достоверность данных 70 средняя
Как считается эта оценка

Складывается из проверяемых признаков самой записи: есть ли у статьи DOI, сколько независимых источников подтвердили её данные, заполнены ли обязательные поля и насколько свежо последнее подтверждение. Снижают оценку расхождения между источниками и отсутствие идентификатора. Значение от 80 означает, что запись опубликована без дополнительной проверки; от 60 до 79 — что она опубликована с пониженной достоверностью и ручная проверка желательна. Запись, выверенную редактором вручную, пересчёт не опускает ниже 90. Это оценка наших данных о статье, а не оценка самой статьи.

Аннотация

The Internet has changed dramatically over the past decade, and search engines have worked hard to adapt to these changes by providing better content to users. Many efforts have been made to assess document quality, including attempts to use semantic analysis to extract meaningful information from material presented on the Internet. This article describes the development of a text editor that uses morphological and syntactic analyzers to process website content. The main purpose of the system is to automatically mark and improve the text content of web pages by integrating semantic information obtained based on text structure and meaning analysis. The system uses preprocessing technology and deep NLP models (such as BERT), combined with a self-built Kazakh tree library (ConLL-U format) to restore the query's lemmatization. Optimize the matching of queries and documents through TF-IDF, Word2Vec and query expansion technology. Experiments were conducted on an autonomously collected Kazakh news dataset. Experimental results show that morphological analysis significantly improves retrieval accuracy during the text normalization process, while the deep learning model further enhances the ranking effect based on semantic correlation. This research provides new technical means for content optimization and information retrieval in low-resource languages, and helps improve the performance of search engines in multi-language environments.