Правила сопоставления

Данные во вкладке представлены в табличном виде (Рисунок 1). Вкладка “Правила сопоставления” предназначена для создания, редактирования и удаления правила сопоставления.

Правила сопоставления указывают на хранилище данных, в котором будет производиться поиск дубликатов, а также выбирают количество и состав алгоритмов сопоставления.

Создание правила

Чтобы создать правило сопоставления:

1. Убедитесь, что включен режим черновика и выбран черновик.

2. Нажмите кнопку Создать правило, расположенную в правой части экрана.

3. В результате действия откроется выдвижная панель с настройками правила и алгоритмов.

4. Заполните основные параметры правила (Рисунок 2):

   • Имя - системное имя правила. Имя должно начинаться с буквы и содержать только латинские буквы, цифры, символы "-", "_". Не может содержать пробелы. Недоступно для редактирования после сохранения.

   • Отображаемое имя - имя правила, которое будет отображаться пользователям.

   • Описание - любая дополнительная информация о правиле сопоставления.

   • Хранилище - содержит набор алгоритмов, который может быть расширен за счет пользовательских библиотек. На данный момент в системе реализовано хранилище на основе базы данных Postgres, содержащее алгоритмы сопоставления по точному и неточному соответствию и по набору значений.

5. В секции "Алгоритмы" выберите необходимый алгоритм сопоставления из списка доступных.

6. Для добавления нескольких алгоритмов нажмите кнопку Добавить, расположенную справа от заголовка "Алгоритмы", или Удалить, чтобы стереть лишний.

7. Нажмите "Сохранить" после заполнения всех параметров и опубликуйте черновик.

8. После завершения работы с правилами перейдите во вкладку Наборы правил.

Примечание

Подробнее о работе алгоритма Неточное соответствие

Алгоритмы сопоставления

Точное соответствие - сравнивает записи по точному соответствию значений атрибута.

• "Регистронезависимый поиск" - флаг, определяющий, будет ли при поиске сопоставлений учитываться регистр (для строковых типов атрибутов).

Неточное соответствие - сравнивает записи по неточному соответствию значений, используя стемминг и триграммы (только для строковых атрибутов).

• "Язык содержимого" - в текущей реализации поддерживаются только русский и английский (по умолчанию).

• "Порог схожести" - отсекает наборы триграмм по коэффициенту схожести. Значение в диапазоне от 0.00 до 1.00 включительно. По умолчанию = 0.65.

• "Тип объединения" - тип объединения лексем в объектах tsquery. В текущей реализации поддерживаются & (И) и | (ИЛИ). По умолчанию: & (И).

• Сопоставление наборов значений - сравнивает записи по имеющимся у них связям, используя настройку "Сопоставить по пересечению".

  • "Учитывать периоды подобъектов" - флаг, определяющий попадание записи в кластер, если совпал хотя бы 1 экземпляр связи, и период действия этой связи имеет пересечение. Подобъекты - это объекты, которые используются для сравнения, например, связи.

Доп. параметры алгоритмов точного/неточного соответствия:

• Учитывать null - при включении разрешается сопоставление по значению null в выбранном столбце таблицы сопоставления.

• Учитывать пустые строки - при включении разрешается сопоставление по пустой строке в выбранном столбце таблицы сопоставления. Пустые строки - строки нулевой длины, а также состоящие только из пробелов.

• Сопоставлять null с пустыми строками - при включении разрешается сопоставление по null и пустым строкам между собой. Включение доступно, только если включены обе опции "Учитывать null" и "Учитывать пустые строки".

Указанные параметры влияют только на сопоставление по строковым колонкам таблиц.

Для алгоритмов точного/неточного соответствия пробелы в начале и конце строк не влияют на сопоставление - т.е. используется значение строки, как если бы этих пробелов не было.

Удаление правила

Чтобы удалить правило сопоставления:

1. Убедитесь, что включен режим черновика и выбран черновик.

2. В крайнем левом столбце отметьте галочкой строку с необходимым правилом (одну или несколько).

3. Нажмите кнопку Удалить правило, расположенную в правом верхнем углу вкладки.

4. Подтвердите или отмените действие.

Совет

Удаление назначенных правил сопоставления происходит в обратном порядке по вкладкам: Назначение правил → Наборы правил → Правила сопоставления → Таблицы сопоставления

Рисунок 1 – Вкладка "Правила сопоставления"

Рисунок 2 – Параметры правил сопоставления