Проблема со сбором ссылок, прошу помочь!

Тема в разделе "Парсинг конкретных сайтов по запросу (ПЛАТНО)", создана пользователем MaryConst, 15 ноя 2017.

  1. MaryConst

    MaryConst New Member Пользователи

    Регистрация:
    15 ноя 2017
    Сообщения:
    2
    Город:
    Кишинев
    Добрый день!
    Столкнулись с такой проблемой. Есть сайт, с которого нужно собрать ссылки. Но из-за установленного скрипта на сайте удается спарсить только 40 ссылок с каждой страницы.
    Пробовали по разному, но результат один.
    Пробовали через [GETMORECYCLECONTENT] с помощью обучающего видео, там все написано доступно, но к сожалению не помогло.
    Через расширение для firefox "Просмотр http заголовков" выгружается такая штука как заголовок
    Ссылки недоступны для гостей и category_id=202&url=compressors&num=80&tovar_nalichie=undefined&sort_tovar=3
    (меняется только цифра "num=")
    Для всего сайта ссылка одна, разные лишь значения num и category_id

    Через редактор шаблонов вывода прописали такое:
    [GETMORECYCLECONTENT]Ссылки недоступны для гостей[START]<a itemprop="url" href="[/START][END]" title="[/END][TOSTART][/TOSTART][TOEND][/TOEND][PARAMS][/PARAMS][SEP]{br}[/SEP][/GETMORECYCLECONTENT]

    Если сделать как по инструкции (Ссылки недоступны для гостей) - то не парсит ничего, если в поле URL-ссылки ввести ссылку на группу - все работает.

    Подскажите пожалуйста, какие есть варианты, уже все перерыла, но не хватает знаний, как это можно обойти эту прокрутку страницы.
    Пробовала WebApp как по инструкции, но так и не поняла как он мне поможет честно говоря.
    Помогите пожалуйста новичку

    домен: holod - magazin . ru (без пробелов)
     
  2. emkub

    emkub Active Member Пользователи

    Регистрация:
    16 мар 2015
    Сообщения:
    157
    Напишите ваш скайп.
     
  3. MaryConst

    MaryConst New Member Пользователи

    Регистрация:
    15 ноя 2017
    Сообщения:
    2
    Город:
    Кишинев
    я в личку отправлю
     
  4. Dron25

    Dron25 Well-Known Member Пользователи

    Регистрация:
    17 июн 2014
    Сообщения:
    263
    через WBApp проскрольте страницу до конца и будут все ссылки на товары

    самый простой вариант (у меня работает)
    Код:
    [REPEAT]
    [SCROLLDOWN]
    [/REPEAT]
    [GETHTML]
    у самой большой категории 900+ товаров (это примерно 25 repeat , в настройках выставите)
     
    Последнее редактирование: 17 ноя 2017
    Root нравится это.

Поделиться этой страницей