BatchUniqueChecker

4 Листопада, 2020 0

BatchUniqueChecker – небольшая портативная программа для Microsoft Windows, предназначенная для пакетной проверки группы URL на уникальность между собой, который можно запускать даже со сменного носителя.

Принцип работы утилиты достаточно прост: из предоставленного пользователем списка URL-адресов программа скачивает содержимое, получает текстовое содержимое страницы без блока HEAD и без HTML-тегов, и далее сравнивает их друг с другом при помощи алгоритма шинглов.

В настройках программы можно установить размер шингла, задать алгоритм проверки сходства содержимого, а также выбрать предпочитаемый User-Agent.

Основные возможности BatchUniqueChecker

Проверка группы URL на уникальность между собой;
Возможность проверки произвольного списка URL либо импорт ссылок из sitemap.xml;
Возможность использования “значимых” текстов среди общего контента страницы;
Отображение различий между двумя любыми выбранными URL;
Установка длины шингла (от 1 до 10 слов в шингле);
Экспорт отчётов в Excel (формат CSV).