Яндекс новости, находит не все ссылки

Тема в разделе "Парсинг конкретных сайтов по запросу (ПЛАТНО)", создана пользователем Mind, 20 дек 2016.

  1. Mind

    Mind Well-Known Member Пользователи

    Регистрация:
    8 ноя 2016
    Сообщения:
    190
    Доброго дня!

    Подскажите пожалуйста, мистика какая-то...
    Имеем рубрики с Яши Ссылки недоступны для гостей
    Задача собрать адреса,телефоны. Границы все нашел, не проблема, а вот собрать автоматом ссылки не получается.Ссылки должны выглядеть так Ссылки недоступны для гостей
    Пошел "ручным" способом...
    Собрал все рубрики руками и вставил в закладку "ссылки"
    С рубрик такого вида, все ок, ссылки собирает
    Ссылки недоступны для гостей
    Ссылки недоступны для гостей
    Ссылки недоступны для гостей
    А вот с этой что-то не хочет...
    Ссылки недоступны для гостей
    Что делал
    включил DOM для "Ссылки", поток 1, пауза 400.

    Просьба подсказать верный путь)
     
  2. Kreol

    Kreol Модератор Команда форума Модератор

    Регистрация:
    6 янв 2013
    Сообщения:
    2.666
    скорее всего вас банят поставьте 2000-4000
     
    Mind нравится это.
  3. Mind

    Mind Well-Known Member Пользователи

    Регистрация:
    8 ноя 2016
    Сообщения:
    190
    Спасибо, пробую...но...почему-то по этой единственной рубрике
    Ссылки недоступны для гостейне находит ссылки, а после ее парса получаю
    Ссылки недоступны для гостей
     
    Последнее редактирование: 20 дек 2016
  4. Kreol

    Kreol Модератор Команда форума Модератор

    Регистрация:
    6 янв 2013
    Сообщения:
    2.666
    а что именно там должно находить?
     
  5. Mind

    Mind Well-Known Member Пользователи

    Регистрация:
    8 ноя 2016
    Сообщения:
    190
    Там должны быть ссылки вида Ссылки недоступны для гостей... на организации также как и по другим рубрикам
     
  6. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Я вижу разницу между двумя предоставленными вами страницами. А вы?
     

    Вложения:

    Mind нравится это.
  7. Mind

    Mind Well-Known Member Пользователи

    Регистрация:
    8 ноя 2016
    Сообщения:
    190
    Прошу прощения, может коряво объяснил. Как писал в первом сообщении, я собрал рубрики вручную. Так вот с одной рубрики с параметром ?rubric=0 ссылки не собираются
     
  8. Japonec

    Japonec Well-Known Member Пользователи

    Регистрация:
    19 июл 2015
    Сообщения:
    92
    Адрес:
    Kiev
    Так на первом же скриншоте вам ответили же, что и не должно собираться.
     
    Root и Mind нравится это.
  9. Mind

    Mind Well-Known Member Пользователи

    Регистрация:
    8 ноя 2016
    Сообщения:
    190
    Спасибо огромное, не внимательно посмотрел...
     

Поделиться этой страницей