Помогите разобраться с сайтом на Ajax

Тема в разделе "Решение различных задач по парсингу", создана пользователем pagemaster, 15 авг 2017.

Метки:
  1. pagemaster

    pagemaster New Member Пользователи

    Регистрация:
    15 янв 2015
    Сообщения:
    43
    Добрый день.
    Встретился мне сайт автозапчастей
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
    , который никак не могу спарсить, хотя опыта у меня много и парсингом занимаюсь больше 2 лет... В общем авторизироваться там не проблема, вот логин и пароль для пробы:
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 10 постов.**
    Хотя после авторизации в WBApp пишет что мы вошли и интерфейс как после входа, но данные не выводятся, наверное потому что там абсолютно всё на скриптах.
    Все карточки товара браузер получает по ссылке вида
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
    , где 5500991061 - код товара, а 991061 - внутренний код системы для этого товара. В целом сгенерировать ссылки такого типа для всех товаров думаю не сложно, но дело в том, что прямой заход по такой ссылке не возвращает данных, а просто пишет мол произошла ошибка. В общем там идет какая то дополнительная проверка на авторизацию, которую в пост запросах я не вижу...

    Подскажите как парсить этот чудо-сайт, буду очень благодарен))
     
  2. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Здравствуйте.

    Думаю, с помощью WBApp его только парсить Ссылки недоступны для гостей
     
  3. pagemaster

    pagemaster New Member Пользователи

    Регистрация:
    15 янв 2015
    Сообщения:
    43
    WBApp не выводит данных и не может перейти на карточку товара
     
  4. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    В IE, как оказалось, этот сайт не работает.

    Тогда ВАМ нужно разбираться с запросами для парсинга с этого сайта.
     
  5. pagemaster

    pagemaster New Member Пользователи

    Регистрация:
    15 янв 2015
    Сообщения:
    43
    решил не плодить темы и написать новый вопрос в этой же теме, так как вопрос по тому же сайту
    хочу скачать картинки определенных товаров, они имеют такой вид:
    Ссылки недоступны для гостей
    где в конце это ID товара
    список ссылок на картинки есть, но картинки невозможно скачать без авторизации... пробовал через WebApp аторизироваться имитацией вставки логина, пароля и нажатием кнопки ввойти - не работает. Пробовал в браузере авторизироваться и скопировать куки - не сработало... Подскажите что делать?)
    P.S. Данные для авторизации в первом посту
     
  6. Djahat

    Djahat Well-Known Member Пользователи

    Регистрация:
    14 янв 2013
    Сообщения:
    543
    Город:
    Мордор
    тоже интересно, методами CD и FIDDLER не смог авторизацию пройти, и записать как надо куки.
    CEF нормально работает с авторизацией , но вот макрос [GETCOOKIES_EX] ли [GETCOOKIES] в нем пока не реализован как я понял, поэтому через CEF проверить не смог
     

Поделиться этой страницей