10 Грудня, 2022
0
Collect URL – простая в работе программа для парсинга веб-страниц, которая сканирует их подобно поисковому боту. Начиная с URL, введенного пользователем, она перебирает все ссылки, найденные на веб-странице. Затем программа рекурсивно продолжает сканирование URL в списке. Пользователь может ограничить программу сбором только одного домена или поддомена. Список исключений расширений файлов можно редактировать, также как и значения таймаута соединения и ответа. Пользователь также может изменить значение User-Agent для HTTP и HTTPS соединений.
Данное приложение представляет собой программу для сбора ссылок, которая может собирать ссылки с любого веб-сайта. Введите любой “Начальный URL” и нажмите кнопку “Старт”, после чего программа начнёт рекурсивное сканирование и сбор ссылок.
Помимо создания “Полного списка URL”, ещё одной удобной функцией программы является создание “Фильтрованного списка URL”. Пользователи могут фильтровать любой текст в адресе URL или содержимом HTML. Используя эту функцию, вы можете найти все веб-страницы, содержащие определённый текст.
Поддерживает работу в операционных системах Microsoft Windows XP, Vista, 7, 8, 8.1, 10 и 11.
Ссылки
