Многострадальный Яндекс маркет

Тема в разделе "Парсинг конкретных сайтов по запросу (ПЛАТНО)", создана пользователем TPOJIb, 23 мар 2017.

  1. Blolk

    Blolk New Member Пользователи

    Регистрация:
    26 авг 2018
    Сообщения:
    18
    Город:
    Могилев
    Проект настроен, когда не в бане, то все норм. Ставлю поток 1, время между запросами 20000-30000 пробовал выставлять. Начинаю парсинг, и в csv файле только несколько строк с результатом, хотя обработаны все ссылки. И потом предпросмотр недоступен.
     
  2. inotoxic

    inotoxic Well-Known Member Пользователи

    Регистрация:
    13 сен 2015
    Сообщения:
    874
    как прокси из advor прописаны?
     
  3. Blolk

    Blolk New Member Пользователи

    Регистрация:
    26 авг 2018
    Сообщения:
    18
    Город:
    Могилев
  4. inotoxic

    inotoxic Well-Known Member Пользователи

    Регистрация:
    13 сен 2015
    Сообщения:
    874
    Как вариант, в advor настраивать автосмену прокси
    или собирать паблик и проверять на бан в яндекс
    или платные
     
  5. Blolk

    Blolk New Member Пользователи

    Регистрация:
    26 авг 2018
    Сообщения:
    18
    Город:
    Могилев
    Если в логе парсинга будет указан прокси, это значит, что заблокировали?
     
  6. kagorec

    kagorec Администратор Команда форума Администратор

    Регистрация:
    3 янв 2011
    Сообщения:
    4.442
    Адрес:
    Latvia
    Маркет яндекс парсится через Wbapp, в ином случае моментально каптча или бан. Advor и яндекс маркет вещи несовместимые.
     
  7. Blolk

    Blolk New Member Пользователи

    Регистрация:
    26 авг 2018
    Сообщения:
    18
    Город:
    Могилев
    Ясно...Спасибо за ответ
     
  8. Blolk

    Blolk New Member Пользователи

    Регистрация:
    26 авг 2018
    Сообщения:
    18
    Город:
    Могилев
    Еще вопрос. Можно ссылку на настройку Wbapp для парсинга маркета?
     
  9. Kreol

    Kreol Модератор Команда форума Модератор

    Регистрация:
    6 янв 2013
    Сообщения:
    2.666
    Почему не подключить антикапчу?
    Лично я бы искал другие источники.
     
  10. kagorec

    kagorec Администратор Команда форума Администратор

    Регистрация:
    3 янв 2011
    Сообщения:
    4.442
    Адрес:
    Latvia
    Как настройка должна выглядеть, какие задачи в Wbapp для яндекс маркета должны выполняться?
    п.с. Можно заказать проект у специалистов, если интересует готовое решение.
     
  11. Blolk

    Blolk New Member Пользователи

    Регистрация:
    26 авг 2018
    Сообщения:
    18
    Город:
    Могилев
    Хочу сам разобраться)
    Можно поподробнее? Нашел это Ссылки недоступны для гостей, но без примера как то не совсем понятно.
    Опять же, с помощью WBApp разобрался, как обходить капчу. Сейчас изучаю, как это должно работать с моим проектом для парсинга товаров. Список событий автоматически будет запускаться, когда я начну парсинг? Или нужно где-то что-то указывать?
     
  12. Kreol

    Kreol Модератор Команда форума Модератор

    Регистрация:
    6 янв 2013
    Сообщения:
    2.666
    Если вы настроите в том проэкте в котором работаете то да.
    не забывайте что есть 2 поля, для ссылок и для контента
    Ссылки недоступны для гостей
     
    Blolk нравится это.

Поделиться этой страницей