Вопрос по сканеру

Тема в разделе "Сбор ссылок сканером сайтов", создана пользователем Stan, 13 июл 2018.

  1. Stan

    Stan Active Member Пользователи

    Регистрация:
    15 июн 2011
    Сообщения:
    499
    Здравствуйте.

    На входе список сайтов (главные страницы), нужно с этих сайтов собрать ссылки только с этих главных, по фильтру брал c0ntact,about, , чтобы дальше не шерстил весь сайт.
     
    Stan, 13 июл 2018
    #1
  2. inotoxic

    inotoxic Well-Known Member Пользователи

    Регистрация:
    13 сен 2015
    Сообщения:
    867
    Так а в чем проблема?
    В сканере ссылок - глубина ссылок от 2 до 2 + брать только внутренние = будет брать ссылки с главной
     
    inotoxic, 13 июл 2018
    #2
  3. Stan

    Stan Active Member Пользователи

    Регистрация:
    15 июн 2011
    Сообщения:
    499
    2? не 1 разве?
     
    Stan, 13 июл 2018
    #3
  4. inotoxic

    inotoxic Well-Known Member Пользователи

    Регистрация:
    13 сен 2015
    Сообщения:
    867
    Если брать ссылки с главной - то 2
    1 - это и есть домен - главная страница сайта
    [​IMG]
     
    inotoxic, 13 июл 2018
    #4
  5. Stan

    Stan Active Member Пользователи

    Регистрация:
    15 июн 2011
    Сообщения:
    499
    чот все равно не догнал, про уровень ссылок то я понял.

    мне надо взять ссылки с главной все , отсеял по фильтьтру contact, и не добавлял ничего в очередь с этого домена
     
    Stan, 13 июл 2018
    #5
  6. kagorec

    kagorec Администратор Команда форума Администратор

    Регистрация:
    3 янв 2011
    Сообщения:
    4.431
    Адрес:
    Latvia
    Очередной вопрос неправильно изложенный и приходиться предпологть что человеку надо.
    Допустим вы собрались из выдачи собирать контакты - и вам лень поиском посмотреть что такие темы ранее обсуждались на форуме
    Или допустим у вас есть список адресов сайтов где вы хотите получить контакты
    ----
    Логически подумаем, каждый нормальный сайт на сайте если предоставляет контакты то на главной странице есть ссылки на страницу контактов.
    Это значит в сканере что мы смело ставим галочку "не добавлять страницы" и в фильтре ссылок (Ctrl+3) построчно указываем что нам нужно страницы в которых фигурируют элементы
    Далее с этих страниц выдираем контакты по алгоритму простому (для сбора майлов) - в шаблоне вывода
    Код:
    [EXTRACTEMAILS]<CD_AUTO!>[/EXTRACTEMAILS]
    п.с. будет замечательно если кто-то поделиться списком ссылок сбора контактных страниц таких
     
    kagorec, 14 июл 2018
    #6
    xLime нравится это.
  7. inotoxic

    inotoxic Well-Known Member Пользователи

    Регистрация:
    13 сен 2015
    Сообщения:
    867
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 300 постов.**
     
    inotoxic, 15 июл 2018
    #7
    kagorec нравится это.
Similar Threads
  1. andreich777

    Вопрос по сканеру сайта

    andreich777, 18 июл 2014, в разделе: Решение проблем с использованием программы
    Ответов:
    1
    Просмотров:
    833
    Root
    18 июл 2014
  2. artem59

    Вопрос!!!

    artem59, 15 сен 2014, в разделе: Разное
    Ответов:
    3
    Просмотров:
    1.467
    Root
    16 сен 2014
  3. алексей232

    вопрос

    алексей232, 24 апр 2015, в разделе: Границы парсинга
    Ответов:
    2
    Просмотров:
    1.079
    Root
    25 апр 2015
  4. Ден

    Вопрос по [HORIZTABLE]

    Ден, 29 июн 2015, в разделе: Функции и интерфейс программы
    Ответов:
    7
    Просмотров:
    1.312
    Root
    1 июл 2015
  5. ПолныйТормоз

    Вопрос

    ПолныйТормоз, 9 дек 2015, в разделе: Парсинг конкретных сайтов по запросу (ПЛАТНО)
    Ответов:
    5
    Просмотров:
    921
    Root
    10 дек 2015
Загрузка...

Поделиться этой страницей