Парсинг пагинации подгружаемой post запросами

Тема в разделе "Решение различных задач по парсингу", создана пользователем kenny872012, 15 май 2018.

  1. kenny872012

    kenny872012 Well-Known Member Пользователи

    Регистрация:
    18 фев 2018
    Сообщения:
    312
    Здравствуйте. Есть сайт Ссылки недоступны для гостей Переход по ссылкам пагинации осуществятся методом post. Подскажите пожалуйста как настроить сканер сайтов, что бы в очередь ссылок попадали товары со всех страниц. Проект не прилагаю, т.к. он встал на этапе настройки сканера.
     
  2. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Здравствуйте.

    Код:
    https://www.okeydostavka.ru/webapp/wcs/stores/servlet/ProductListingView?searchType=1000&filterTerm=&langId=-20&advancedSearch=&sType=SimpleSearch&gridPosition=&metaData=&manufacturer=&custom_view=true&ajaxStoreImageDir=%2Fwcsstore%2FOKMarketSAS%2F&resultCatEntryType=&catalogId=12051&searchTerm=&resultsPerPage=72&emsName=&facet=&categoryId=66551&storeId=10151&disableProductCompare=false&ddkey=ProductListingView_4_3074457345618263654_3074457345618295993&filterFacet=&beginIndex=144
    Где beginIndex отвечает за номер страницы и изменяется на 72
     
    kenny872012 нравится это.
  3. kenny872012

    kenny872012 Well-Known Member Пользователи

    Регистрация:
    18 фев 2018
    Сообщения:
    312
    Спасибо, все оказалось очень просто.
     
    Root нравится это.

Поделиться этой страницей