Как парсить ссылки на сабдомены?

Тема в разделе "Сбор ссылок сканером сайтов", создана пользователем GAGAn, 6 ноя 2023.

  1. GAGAn

    GAGAn New Member Пользователи

    Регистрация:
    26 май 2017
    Сообщения:
    2
    К примеру начинаем парсить с site.com, на странице ссылки asdf.site.com f1123.site.com ssss.site.com 54321.site.com
    Как вот эти ссылки на сабы автоматический загрузить в очередь и по ним пройтись? На сабах тоже сть ссылки на сабы в пределах 1 домена.
     
    GAGAn, 6 ноя 2023
    #1
  2. kagorec

    kagorec Администратор Команда форума Администратор

    Регистрация:
    3 янв 2011
    Сообщения:
    4.442
    Адрес:
    Latvia
    Добавить указание в фильтре и в списке очереди что допускаются еще и ссылки
    Код:
    .site.com
     
    kagorec, 6 ноя 2023
    #2
  3. GAGAn

    GAGAn New Member Пользователи

    Регистрация:
    26 май 2017
    Сообщения:
    2
    Не работает upload_2023-11-6_20-51-12.png
    Ставил разные галочки но находит только 10 ссылок которые есть на первой странице, и в очередь на сканирование их не добавляет.
     

    Вложения:

    GAGAn, 6 ноя 2023
    #3
Similar Threads
  1. atonx

    Как парсить ссылки

    atonx, 30 мар 2013, в разделе: Парсинг во вкладке "Ссылки"
    Ответов:
    1
    Просмотров:
    2.966
    nikolas1612
    30 мар 2013
  2. Igor_st

    Как парсить ссылки через редирект

    Igor_st, 1 май 2013, в разделе: Парсинг конкретных сайтов по запросу (ПЛАТНО)
    Ответов:
    4
    Просмотров:
    3.413
    torygmile
    20 дек 2013
  3. serfer

    Парсить ссылки и контент

    serfer, 4 сен 2013, в разделе: Решение различных задач по парсингу
    Ответов:
    3
    Просмотров:
    1.436
    Root
    5 сен 2013
  4. TeslaCo

    Как парсить товары из ссылки XML

    TeslaCo, 17 июн 2014, в разделе: Разное
    Ответов:
    10
    Просмотров:
    2.683
    Root
    17 июн 2014
  5. coolbratan

    Парсить ссылки, подгружаемые скриптом

    coolbratan, 6 янв 2015, в разделе: Парсинг конкретных сайтов по запросу (ПЛАТНО)
    Ответов:
    6
    Просмотров:
    1.905
    coolbratan
    9 янв 2015
Загрузка...

Поделиться этой страницей