Как быстро спарсить подгружаемые данные?

Тема в разделе "Решение различных задач по парсингу", создана пользователем Spond, 28 окт 2015.

  1. Spond

    Spond New Member Пользователи

    Регистрация:
    19 апр 2012
    Сообщения:
    8
    Спасибо за соучастие, неактуально!
     
    Последнее редактирование: 29 окт 2015
  2. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Здравствуйте.

    По макросу подсказать не могу.

    Но в запросах можно покопаться. Поясните, если желаете, откуда и что нужно спарсить.

    С уважением к вам, Сергей.
     
  3. trans5

    trans5 Member Пользователи

    Регистрация:
    26 сен 2017
    Сообщения:
    66
    Город:
    екаеринбург
    Здравствуйте, подскажите пож-та
    Есть товар Ссылки недоступны для гостей надо спарсить наличие в магазинах которое подгружается дополнительно.
    Предварительно открываю страницу через WbApp, жду пока все прогрузится в т.ч. адреса
    upload_2018-7-24_10-31-56.png


    но при открытии кода наличие в магазинах не доступно
    upload_2018-7-24_10-32-50.png

    Подскажите как это побороть
     
  4. drvoodoo

    drvoodoo Active Member Пользователи

    Регистрация:
    30 дек 2016
    Сообщения:
    69
    На этом товаре и так наличие 0

    либо вы чего то не договариваете.
     
  5. trans5

    trans5 Member Пользователи

    Регистрация:
    26 сен 2017
    Сообщения:
    66
    Город:
    екаеринбург
    Странно что у вас нет в наличии, у меня есть... Может у вас город не москва выбран
    upload_2018-7-24_11-3-18.png
     
  6. trans5

    trans5 Member Пользователи

    Регистрация:
    26 сен 2017
    Сообщения:
    66
    Город:
    екаеринбург
    Интересно вот еще: Если в WBApp ткнуть мышкой на "Наличие в магазинах" то там тоже пусто хотя написано (55), но если изменить размеры окна то адреса тут же появляются...

    Но в редакторе задания границ их все равно нету((
     
  7. napserious

    napserious Well-Known Member Пользователи Активирован

    Регистрация:
    16 окт 2015
    Сообщения:
    324
    У меня тоже в Наличии нету товаров при переходе на ссылку.
    Город Москва.
     
  8. trans5

    trans5 Member Пользователи

    Регистрация:
    26 сен 2017
    Сообщения:
    66
    Город:
    екаеринбург
    Посмотрите еще ссылки:
    Ссылки недоступны для гостей
    Ссылки недоступны для гостей
    Ссылки недоступны для гостей
    Ссылки недоступны для гостей

    Странно у меня есть, единственное что при открытии товара информация и кнопка "добавить в корзину" подгружается через 1-2 сек.

    Нет в наличии у вас при открытии в браузере или в парсере?
     
  9. napserious

    napserious Well-Known Member Пользователи Активирован

    Регистрация:
    16 окт 2015
    Сообщения:
    324
    При открытие в браузере.
     
  10. napserious

    napserious Well-Known Member Пользователи Активирован

    Регистрация:
    16 окт 2015
    Сообщения:
    324
    Установил через VPN местоположение в Москве, результат тот же.
     
  11. trans5

    trans5 Member Пользователи

    Регистрация:
    26 сен 2017
    Сообщения:
    66
    Город:
    екаеринбург
    во всех ссылках нет в наличии?

    Попробуйте впринципе с главной любой товар открыть Ссылки недоступны для гостей
     
  12. napserious

    napserious Well-Known Member Пользователи Активирован

    Регистрация:
    16 окт 2015
    Сообщения:
    324
    Открыл товар с главной страницы.
    Все товары показывает нет в наличии.

    Видимо у вас также при выборе границ.
     
  13. napserious

    napserious Well-Known Member Пользователи Активирован

    Регистрация:
    16 окт 2015
    Сообщения:
    324
    Чтото не то с этим сайтом, так как у меня даже кнопки добавить к корзину нету.
     
  14. drvoodoo

    drvoodoo Active Member Пользователи

    Регистрация:
    30 дек 2016
    Сообщения:
    69
    Похоже он авторизован а мы нет ;)
    Я прав?
     
  15. trans5

    trans5 Member Пользователи

    Регистрация:
    26 сен 2017
    Сообщения:
    66
    Город:
    екаеринбург
    У вас интернет подттупливает может? у меня щас тупил при записи дак долго подгружалось
     
  16. trans5

    trans5 Member Пользователи

    Регистрация:
    26 сен 2017
    Сообщения:
    66
    Город:
    екаеринбург
    Нет я не авторизован, на видео видно:)
     
  17. trans5

    trans5 Member Пользователи

    Регистрация:
    26 сен 2017
    Сообщения:
    66
    Город:
    екаеринбург
    Раз уж начал записывать, записал как это в парсере,
     
  18. drvoodoo

    drvoodoo Active Member Пользователи

    Регистрация:
    30 дек 2016
    Сообщения:
    69
    Разобрался. Сайт подгружает значение асинхронно.
    У меня значения появились и в браузере и в CD, просто нужно ждать (долго).
    Стратегия такая...
    Собираем средствами wbapp, настраиваем wbapp ожидать появления значения.
    Как это сделать читаем тут Ссылки недоступны для гостей
     
    xLime и trans5 нравится это.
  19. drvoodoo

    drvoodoo Active Member Пользователи

    Регистрация:
    30 дек 2016
    Сообщения:
    69
    Включите отработку js скриптов
     
  20. trans5

    trans5 Member Пользователи

    Регистрация:
    26 сен 2017
    Сообщения:
    66
    Город:
    екаеринбург
    Никак не найду где она включается.
     
Similar Threads
  1. itser
    Ответов:
    3
    Просмотров:
    1.427
  2. GDie
    Ответов:
    7
    Просмотров:
    1.446
  3. drpellot
    Ответов:
    11
    Просмотров:
    1.583
  4. QuZ
    Ответов:
    7
    Просмотров:
    762
  5. q457
    Ответов:
    1
    Просмотров:
    358
Загрузка...

Поделиться этой страницей