Краулеры¶
Краулеры предназначены для сбора метаданных из систем-источников данных различного типа вручную или автоматически по заданному расписанию. Полученные метаданные загружаются в систему Юниверс DG и содержат собственные типы активов и связей, которые доступны для дальнейшей настройки и редактирования внутри системы.
Краулер представляет собой точку расширения, которая содержит базовые методы получения и отправки данных, а также позволяет реализовывать подключения к различным СУБД (например, MySQL или MongoDB). По умолчанию в систему загружен краулер БД PostgreSQL.
При проектной разработке краулера, например, для MongoDB помимо методов получения и отправки данных в краулер будут добавлены методы поиска определенных типов активов по заданному атрибутивному составу и методы извлечения подходящих из всех имеющихся типов.
Совет
Создание подключений к источникам данных осуществляется по разделам в следующем порядке: Источники данных → Библиотеки → Краулеры → Подключения → Информационные системы → Сканеры
Содержание