DISCOVERY SERVICE FOR XML DATA

Abstract

В работе рассматривается дискавери сервис для XML-данных, который представляет собой распределенную систему автономных поисковых машин (сервер ZooPARK) с выделенным центром координации и собственным сбалансированным API. Дано описание основных систем и подсистем дискавери сервиса, в том числе дано описание объектной модели документа, которая лежит в основе ETL-процессов (сбор, подготовка, загрузка и индексирования данных). В рамках работы выполнено исследование различных подходов пригодных для равномерного распределения данных на конечном множестве вычислительных узлов. The paper considers a discovery service for XML data, which is a distributed system of autonomous search engines (ZooPARK server) with a dedicated coordination center and its own balanced API. A description of the main systems and subsystems of the discovery service is given, including a description of the document object model that underlies ETL processes (data collection, preparation, loading and indexing). As part of the work, a study was made of various approaches suitable for uniform distribution of data on a finite set of computing nodes.