Парсинг подгружаемых ссылок

Тема в разделе "Решение различных задач по парсингу", создана пользователем Konstantine, 28 июн 2018.

  1. Konstantine

    Konstantine Member Пользователи

    Регистрация:
    7 май 2018
    Сообщения:
    33
    Доброго времени суток, уважаемое комьюнити! Прошу смиренно Вашей помощи! Например есть вот такая страница Ссылки недоступны для гостей
    В верхней части страницы есть слайдер, из которого мне нужно взять ссылки на картинки ну и потом закачать их по этим ссылкам. Проблема в том, что ссылки грузятсья каким-то странным методом, программа их просто не видит в окне задания границ парсинга. Пробовал WBapp с ожиданием как загрузки, так и блока со слайдером, но результата нет. Прошу подсказать, что я еще могу сделать
     
  2. inotoxic

    inotoxic Well-Known Member Пользователи

    Регистрация:
    13 сен 2015
    Сообщения:
    868
    [​IMG]
    в коде страницы ссылки на фото
    [​IMG]
     
    xLime нравится это.
  3. Konstantine

    Konstantine Member Пользователи

    Регистрация:
    7 май 2018
    Сообщения:
    33
    Я что-то не так делаю, видимо. У меня изображения не прогружаются даже в окне задания границ парсинга и в коде их нет

    [​IMG]

    Internet Explorer версии 11+
    Java для IE установлена
    Content Downloader обновлен
    Win 10
    Проблема проявляется как с прокси, так и без
     
    Последнее редактирование: 2 июл 2018
  4. xLime

    xLime Well-Known Member Супер Модератор Модератор

    Регистрация:
    4 сен 2017
    Сообщения:
    401
     
    Konstantine нравится это.
  5. Konstantine

    Konstantine Member Пользователи

    Регистрация:
    7 май 2018
    Сообщения:
    33
    Можете подробнее рассказать, что у Вас из софта установлено для работы парсера? Через какую библиотеку работаете?
    У меня такая конфа машины с CD:
    Internet Explorer версии 11+
    Java для IE установлена
    Content Downloader обновлен
    Win 10

    Я уже разные настройки пробовал, библиотеки перебирал. WBapp настраивал и на ожидание страницы, и на ожидание самого слайдера.
    Ссылки на фото отсутствуют в коде как с прокси, так и без.
     
  6. inotoxic

    inotoxic Well-Known Member Пользователи

    Регистрация:
    13 сен 2015
    Сообщения:
    868
    1) Ничего особенного не установлено, стандартный Windows Server 2012
    2) Библиотека WIN
     

Поделиться этой страницей