В доноре около 50 милл. нужных ссылок. И потому список-очереди все время пополняются. Список найденных ссылок я периодически подчищаю, сохраняя их.
Насчет парса частями я так и предполагал, но как быть со сканером сайтов? Разве можно собирать ссылки частями? А как же быть со списком очереди?...
Здравствуйте! Скажите, пожалуйста, можно ли как-то избавиться от OutOfMemory при сканирование сайта? В компьютере 16 Гб оперативной памяти, но...
Спасибо огромное! Все получилось.
Подскажите, пожалуйста, как решить проблему: Интернет магазин, необходимо спарсить категории и подкатегории. Этот товар имеет структуру:...
Здравствуйте! Подскажите, как можно заставить CD, чтобы при наличии в коде определенного слова (к примеру, присутствие фото которое обозначает...
Имеется сайт донор с которого был спарсен весь товар, предварительно собрав сылки с помощью "Сканер сайтов". В общей сложности - около 500к...
Спасибо огромное!
Все тот же www.sammydress.com... Столкнулся со следующей проблемой... В границах парсинга есть "Главная картинка" (основное изображение...
Всем огромное спасибо! Все получилось!
Необходимо спарсить магазин www.sammydress.com И тут столкнулся с проблемой, связанной с категориями. В данном магазине товар размещен в...
Имена участников (разделяйте запятой).