Как обойти блокировку сайта по IP

Тема в разделе "Решение различных задач по парсингу", создана пользователем AlexandrSorokin, 21 дек 2018.

  1. AlexandrSorokin

    AlexandrSorokin Active Member Пользователи

    Регистрация:
    27 ноя 2018
    Сообщения:
    71
    Город:
    Пермь
    Привет!
    Натолкнулся на сайт по Ссылки недоступны для гостей
    По ходу не парсится вообще?
    Проходит 3 страницы и в блок, даже в 1 поток при задержке в 20 секунд.
    Есть ли смысл на каждую страницу искать прокси? там же несколько тысяч товаров
    Пример настройки
     

    Вложения:

  2. inotoxic

    inotoxic Well-Known Member Пользователи

    Регистрация:
    13 сен 2015
    Сообщения:
    867
    А вы пробовали через прокси собирать?
    Зачем на каждую страницу искать прокси
    CDx же по кругу использует прокси
    просто нужно большое кол-во проксей, что-бы кода первая прокся пойдет на второй круг, прошло достаточно времени и сайт ее пропустил
     
    Root нравится это.
  3. AlexandrSorokin

    AlexandrSorokin Active Member Пользователи

    Регистрация:
    27 ноя 2018
    Сообщения:
    71
    Город:
    Пермь
    Спасибо за ответ!

    Всем совет - ИЩИТЕ КАК МОЖНО БОЛЬШЕ ПРОКСИ! НЕСКОЛЬКО ТЫСЯЧ СЕРВЕРОВ СПАСУТ ВАС =)
     
    Последнее редактирование: 21 дек 2018
    Root нравится это.

Поделиться этой страницей