Периодическая проверка списка прокси при парсинге

Так и не понял, можно или на лету парсинга менять список прокси?
тоесть если они "сдохли"
программа остановит или зацикливается или ещё как ? или видишь и паузу поставил и сменил прокси и опять нажал продолжить? как то так ?
к примеру программа наткнулась на блок по айпи, и она что делает останавливается или что? можно ли чтобы она сообщила, ты заменил прокси и она пошла далее, а не с начала ????
хочу купить прогу и не пойму вот эти важные моменты.

 

а те которые не сработали прокси и страницы заблокированы , тоесть не спарсена с них информация, они как то помечаются или в список докачки какой то ставятся или как ?

 

Несколько попыток загрузки с разными прокси. Все страницы должны спарситься.

 

а если ушёл спать)) а все прокси упали, что тогда ? несколько попыток это крах парсинга, надо или бесконечные или в очередь на докачку.

 

Тогда нужно вызывать супергероев на помощь.

 

тоесть в программе это непредусмотрено?

 

Если у вас будет список прокси, то у вас 2 варианта: либо это публичные бесплатные прокси, которые по качеству будут ой как проседать, либо уже купленные в личное пользование.
На рынке полно вариантов того, что предлагают: и статичные, и динамические, и мобильные, про это можно целую статью написать, которых в интернете полно.

Вернёмся к вопросу: в программе есть возможность каждые N раз проверять прокси (скриншот от Root выше), есть также возможность отсеивать прокси если они по каким-то причинам не сработали.

лучший вариант -делать периодическую проверку, если прокси бесплатные, или взять платные динамические (мобильные) прокси (которые меняют IP-адрес каждые 2 или 10 минут) и зарядить страницы сайта, чтобы всё отработало

 

да вопрос ещё в том, что к прмиеру все прокси накрылись, что делает программа ? остановится ? или запишет то что не смогла на будущую перепроверку, или просто пропустит и не узнаешь что она пропустила, и без возможности допарсить то что пропущено? или остановится и будет ждать новых прокси)

 

а как покупать? и вообще как давно вышло обновление программы ??? в каком году?
какие скидки) для некомерческих организаций?

 

Лог доработок и инструкция по покупке Ссылки недоступны для гостей

Скидок нет.