Ссылки на фото, взяты из категории - "Free Photos" ?
То, должны понимать, что сохраняя страницу которую вы парсили в файл, в случае ошибки, можно сохраненный файл загрузить - и распарсить по новой
Сохраняйте код страниц, которые парсите по файлам - будет вам кеш
Решайте капчу, получайте куки и далее...
Какая цель проекта ? При нажатии кнопи "Free Download" - получить из заголовков -ссылку на фото в большом размере ?
Скорей всего одно и тоже лекарство в нескольких категориях - вот и получается 1,5 мл а по факту 150к
Откуда инфо о 1,2 млн ссылок ?
Как при CIS получить RESPONCSECODE ? [IMG]
так прокся требует авторизации передайте в строке прокси данные для авторизации - будете получать 2хх-3хх ответы при редиректах
Через сканер сайтов, с применением фильтра ссылок https://sbfactory.ru/cd/#LINKS
рег данные хранятся в реестре
Реально. Можем решить на платной оснрве
https://sbfactory.ru/cd/?p=261#toprice
как минимум ссылку на сайт по возможности можете приложить файл проекта
Что-то мне подсказыает, что вы не договоряиваете кое-какие данные
Парсер. По списку ссылок, будет сохраняться DOM модель страницы. Подробней в лс, в подписи есть контакты
Можно решить на платной основе
Без использования WBApp, все нормально отображается [IMG]
При больших объемах - не вариант
Пример товара можно ?
Имена участников (разделяйте запятой).