Проблема с парсингом сайта razborkino.ru

Тема в разделе "Решение различных задач по парсингу", создана пользователем yans01, 11 май 2018.

Метки:
  1. yans01

    yans01 New Member Пользователи

    Регистрация:
    28 мар 2018
    Сообщения:
    14
    Город:
    Бишкек
    При парсинге данного сайта, прокси сервера (прокси качественные, платные) банятся почти сразу, например при 20 потоках (и даже на 2-х потоках), и с задержкой 10000 - 20000 (и больше). Может у кого нибудь, есть опыт преодоления данной проблемы. Если есть, то поделитесь. Заранее благодарен.
     
  2. Root

    Root Администратор Команда форума Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    9.623
    Город:
    Сочи
    Здравствуйте.

    Какое количество прокси в вашем списке?
     
  3. kagorec

    kagorec Администратор Команда форума Администратор

    Регистрация:
    3 янв 2011
    Сообщения:
    3.044
    Добавьте список Useragents (ссылка на тему в подписи) в ctrl+h
     

Поделиться этой страницей