Multi-agent latent semantic internet technology for the formation of a subject-oriented knowledge model

Abstract

EN: Context. The article proposes a latent-semantic technology for extracting information from Internet resources, which allows processing information in natural language, as well as a multi-agent search algorithm based on it. The relevance of this approach to the search for subject-oriented information determined by the fact that currently a direct lexical comparison of queries with document indexes does not fully satisfy the developer. The object of the study is a multi-agent latent-semantic algorithm for searching for subject-oriented information. Objective. The work is to increase the efficiency of forming a knowledge model that is adequate for this subject area. Method. A latent semantic technology based on the weighted descriptor method developed by the authors is proposed. The main difference from the existing methods is that the analysis of words occurring in the text both in frequency and taking into account semantics carried out by selecting the appropriate descriptors, which improves the quality of the information found. Results. The developed latent-semantic technology of information search tested in the task of constructing a knowledge model of automated decision support systems for operational and dispatching control of urban engineering networks. The conducted modeling of the search for subject-oriented information in this subject area showed the effectiveness of the developed approach. Conclusions. Improving the efficiency of search and semantic content of subject-oriented information of the knowledge model of this subject area achieved by using the weighted descriptor method based on Zipf’s laws in this technology. The prospects for further research are to build evolutionary models of knowledge and improve the quality of updated information. UK: Актуальність. У статті пропонується латентно-семантична технологія вилучення інформації з інтернет-ресурсів, що дозволяє обробляти інформацію природною мовою, а також заснований на ній мультиагентний алгоритм пошуку. Актуальність даного підходу до пошуку предметно-орієнтованої інформації визначається тим, що в даний час пряме лексичне порівняння запитів з індексами документів не повною мірою задовольняє розробника. Об’єкт дослідження – мультиагентний латентно-семантичний алгоритм пошуку предметно-орієнтованої інформації. Мета роботи – підвищення ефективності формування адекватної даної предметної області моделі знань. Метод. Запропонована латентно-семантична технологія, заснована на розробленому авторами методі зважених дескрипторів. Основна відмінність від існуючих методів полягає в тому, що аналіз слів, що зустрічаються в тексті як по частотності, так і з урахуванням семантики, здійснюється шляхом підбору відповідних дескрипторів, що підвищує якість знайденої інформації. Результати. Розроблена латентно-семантична технологія пошуку інформації апробована в задачі побудови моделі знань автоматизованої СППР для оперативно-диспетчерського управління міськими інженерними мережами (ГІС). Проведене моделювання пошуку предметно-орієнтованої інформації даної предметної області показало ефективність розробленого підходу. Висновки. Підвищення ефективності пошуку і семантичного наповнення предметно-орієнтованої інформації моделі знань даної предметної області досягається за рахунок використання в даній технології методу зважених дескрипторів, заснованого на законах Зіпфа. Перспективи подальших досліджень полягають у побудові еволюційних моделей знань і підвищення якості оновлюваної інформації.