Игнорирование/пропуск/не скачивание картинки-заглушки (no image)

Здравствуйте, господа. Поздравляю всех с прошедшими праздниками.

В общем возникла задача спарсить очень-очень большой сайт, на котором (на разных страницах) присутствует иногда одна и та же dummy-картинка вместо товара - типа "нет фото"/изображение камеры - вот как тут на форуме знак вопроса.

Картинок миллионы скачал вместе с данными (это я только начал), думал раздублить эти какой-нибудь программой, но что-то весь софт валится на таких обьемах. Чтож... похоже надо придумать фильтрацию на лету.

Пока пришел в голову такой алгоритм: во время парсинга берем картинку и кидаем своему php-скрипту то возвращает нам или размер её в байтах или делает хэш, и если он совпадает с нашим условием, то не скачиваем её.

Было бы, конечно, здорово, если бы многоуважаемый Root добавил макрос вида [duplicatepic] - и туда заносилось это самое условие (размер, например, в байтах) для такой dummy-картинки, или путь к самой картинке, если упростить для пользователя. И она бы не скачивалась, заменялась на единственную заглушку в данных. Мне кажется, это очень частая задача как на магазинах, так и других каталогах.

Спасибо

 

Спасибо! Проглядел

 

Нет, все равно не то, кажется

Названия скачиваемых файлов, конечно же, могут быть разными (привязка к товару на странице), а сам файл одинаковый. А настройка приведенная выше просто, я так понимаю, сравнивает файл по имени - и не фильтрует. Не работает это.

Прилагаю файл проекта с несколькими ссылками, в нем часть картинок - dummy, а часть нормальная. Помогите разрешить проблему, пожалуйста.

 

Нет в вашем проекте никаких ссылок.

 

Пардон

 

1) Скачивать картинки макросом DOWNLOADFILE Ссылки недоступны для гостей
2) Включить эту опцию http://forum.sbfactory.ru/threads/neskachivanie-odinakovyx-kartinok.5955/#post-34336

 

???

 

Не удалось прикрепить шаблон в прошлом посте

 

Замените файл Content Downloader.exe (в папке с программой) этим файлом:

Скрытое содержимое:

**Скрытое содержимое: доступно при наличии 1 постов.**

 

Спасибо! Оперативно