Как парсить ссылки на сабдомены?

Тема в разделе "Сбор ссылок сканером сайтов", создана пользователем GAGAn, 6 ноя 2023.

  1. GAGAn

    GAGAn New Member Пользователи

    Регистрация:
    26 май 2017
    Сообщения:
    2
    К примеру начинаем парсить с site.com, на странице ссылки asdf.site.com f1123.site.com ssss.site.com 54321.site.com
    Как вот эти ссылки на сабы автоматический загрузить в очередь и по ним пройтись? На сабах тоже сть ссылки на сабы в пределах 1 домена.
     
  2. kagorec

    kagorec Администратор Команда форума Администратор

    Регистрация:
    3 янв 2011
    Сообщения:
    4.434
    Адрес:
    Latvia
    Добавить указание в фильтре и в списке очереди что допускаются еще и ссылки
    Код:
    .site.com
    
     
  3. GAGAn

    GAGAn New Member Пользователи

    Регистрация:
    26 май 2017
    Сообщения:
    2
    Не работает upload_2023-11-6_20-51-12.png
    Ставил разные галочки но находит только 10 ссылок которые есть на первой странице, и в очередь на сканирование их не добавляет.
     

    Вложения:

Поделиться этой страницей