Парсинг поисковой формы сайта с поиском яндекса

Тема в разделе "Решение различных задач по парсингу", создана пользователем adkondr, 28 сен 2019.

Статус темы:
Закрыта.
  1. adkondr

    adkondr New Member Пользователи

    Регистрация:
    28 сен 2019
    Сообщения:
    8
    Город:
    Рязань
    Пытаюсь спарсить ссылки с сайта через поисковую строку сайта. Поиск организован через яндекс, например строка с поисковым запросом имеет вид
    Ссылки недоступны для гостей
    В браузере выходят найденный страницы, но программа их не видит
     
  2. kagorec

    kagorec Администратор Команда форума Администратор

    Регистрация:
    3 янв 2011
    Сообщения:
    4.429
    Адрес:
    Latvia
    Все хорошо там работает.
     

    Вложения:

  3. adkondr

    adkondr New Member Пользователи

    Регистрация:
    28 сен 2019
    Сообщения:
    8
    Город:
    Рязань
    Не все ссылки видимо берет, например pdf файл
    В поисковую строку сайта вводим "методичка", получаем выдачу одной ссылки на один файл pdf
    По запросу Ссылки недоступны для гостей
    на сайте получаем ссылку Ссылки недоступны для гостей

    Вбив в программе получаем 10 ссылок, файла pdf по ссылкам нет
     

    Вложения:

  4. kagorec

    kagorec Администратор Команда форума Администратор

    Регистрация:
    3 янв 2011
    Сообщения:
    4.429
    Адрес:
    Latvia
    Стоит обратиться к специалистам по настройке если самостоятельно трудно понять как настроить.
    Ссылки недоступны для гостей - Система помощи.
    Ссылки недоступны для гостей - Специалисты по настройке.
     
  5. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Эти данные подгружаются скриптами в браузере. Можно парсить с помощью браузера.

    Ссылки недоступны для гостей
     
Статус темы:
Закрыта.

Поделиться этой страницей