Заскриптованные ссылки на товары www.vseinstrumenti.ru

Тема в разделе "Решения по парсингу популярных сайтов", создана пользователем Ilya33, 20 мар 2020.

  1. Ilya33

    Ilya33 New Member Пользователи

    Регистрация:
    20 мар 2020
    Сообщения:
    8
    Город:
    Владимир
    Подскажите, как формируются ссылки на товары в категориях? Код в виде скрипта и не могу в нем разобраться. Ссылки подгружаются по методу Get и на товары в виде /бренд/наименование. По ключевым словам (бренд/наименование) в скрипте ничего нет. Помогите, как ссылки на товары вытянуть?
     

    Вложения:

  2. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Здравствуйте.

    Обратите внимание на карту сайта

    Ссылки недоступны для гостей
     
  3. Ilya33

    Ilya33 New Member Пользователи

    Регистрация:
    20 мар 2020
    Сообщения:
    8
    Город:
    Владимир
    Пытался спарсить ссылки с карты сайта, тоже не выходит. Тот же скрипт в коде без ссылок и каких либо намеков на параметры товаров... Куки с заголовком тоже копировал и вставлял в прогу. Пересмотрел варианты и видео в поддержке, ничего подобного не нашел... Подскажите, почему мне при просмотре различных ссылок этого сайта один и тот же скрипт выдает? как до ссылок добраться, ну или хотя бы дайте ссылку на инфу как подобное можно решить, буду премного благодарен!
     
  4. kagorec

    kagorec Администратор Команда форума Администратор

    Регистрация:
    3 янв 2011
    Сообщения:
    4.431
    Адрес:
    Latvia
    Сайт, именно код от сайта корректно отображается в парсере при включенной обработке DOM (Ctrl+h).
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
     
  5. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Посмотрел.

    В ответ на запрос от сайта приходит код со скриптами, которые обрабатываются в браузере.

    Соответственно, данный сайт нужно парсить с использованием браузера.

    Ссылки недоступны для гостей
     
  6. Ilya33

    Ilya33 New Member Пользователи

    Регистрация:
    20 мар 2020
    Сообщения:
    8
    Город:
    Владимир
    Спасибо большое за помощь! Купил прогу специально для парсинга данного сайта, думал уже что зря. На самом деле не надеялся, что на форуме помогут, но всё получилось. Буду рекомендовать!
     
  7. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Пожалуйста.

    И вам спасибо.

    Обращайтесь, если возникнут вопросы.
     
  8. Ilya33

    Ilya33 New Member Пользователи

    Регистрация:
    20 мар 2020
    Сообщения:
    8
    Город:
    Владимир
    Добрый день! Я не могу скачать файлы pdf, при том что картинки скачиваются. Подскажите в чём может быть проблема? Все остальное парсится и без банов Screenshot_1.png Screenshot_2.png
     
  9. inotoxic

    inotoxic Well-Known Member Пользователи

    Регистрация:
    13 сен 2015
    Сообщения:
    867
    Отлично, если вопрошающим из данной темы не требуется скачивать pdf, то у вас есть возможность заработать 30к
     
  10. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    2020-04-10_00-52-31.png

    Любителям заставлять переписывать URL со скриншотов особый привет.
     

Поделиться этой страницей