Парсинг exist.ua

Добрый день.

Подскажите, пожалуйста.

При парсинге сайт банит IP как только получает с него два одновременных запроса.

Если будет установлено 5 потоков и добавлено 5 прокси - потоки будут всегда идти параллельно с разных прокси или есть шанс, что два потока будет запущено с одного адреса?

 

Здравствуйте.

Прокси разными потоками берутся по очереди из списка.

Но такой шанс есть. Так как каждый поток, если не загрузит WEB-страницу, делает несколько повторных попыток с новыми прокси.