Proxy сервисы которые пригодятся для Content Downloader

Тема в разделе "Прокси для парсинга", создана пользователем kagorec, 5 фев 2017.

Метки:
  1. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    12.562
    Пожалуйста.

     
    Dimon_chik и Grafin нравится это.
  2. Grafin

    Grafin Member Пользователи

    Регистрация:
    14 ноя 2018
    Сообщения:
    130
    Город:
    Киров
    Спасибо за видео.
    А чтобы прокси так быстро в бан не улетали, видимо лучше паузу между запросами делать?
    upload_2019-6-9_13-15-34.png
     
  3. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    12.562
    Лучше добавить больше прокси.
     
  4. Dimon_chik

    Dimon_chik New Member Пользователи

    Регистрация:
    10 июн 2019
    Сообщения:
    28
    Здравствуйте! Больше прокси, это сколько в цифрах?
     
  5. Grafin

    Grafin Member Пользователи

    Регистрация:
    14 ноя 2018
    Сообщения:
    130
    Город:
    Киров
    Это ж математика! Прикиньте через сколько времени прилетает бан, затем предполагаемое время "общения" с этим сайтом делите на время бана и получите количество необходимых прокси. Но лучше накинуть например 10-25%.
     
    Root нравится это.
  6. Dimon_chik

    Dimon_chik New Member Пользователи

    Регистрация:
    10 июн 2019
    Сообщения:
    28
    Математика- это точная наука в цифрах) А это моё второе сообщение на форуме, программой ни разу не пользовался, хотя бы гипотетически представлять о нужных количествах прокси
     
  7. kalit

    kalit New Member Пользователи

    Регистрация:
    25 май 2018
    Сообщения:
    1
    Город:
    Moscow
    20 proxy 10 потоков редко банят
     
  8. dfssss

    dfssss New Member Пользователи

    Регистрация:
    13 мар 2019
    Сообщения:
    1
    Город:
    wer
    от каждого конкретного случая зависит. некоторые не дают более 10-20и страниц посетить с 1 ip за 24 часа. недавно мне понадобилось 2k проксей чтобы спарсить 50k страниц
     
  9. Rust_Iskh

    Rust_Iskh New Member Пользователи

    Регистрация:
    24 апр 2020
    Сообщения:
    1
    Согласен
     

Поделиться этой страницей