Парсинг товаров с сайта на ASP.NET

Есть сайт в польше, который написан на ASP.NET, окончание всех ссылок .aspx (мало ли важно), нашел нужные мне ссылки товаров около 180. Начал настраивать парсинг контента, открываю первую ссылку и товар не соответствует артикулу по которому ищу, открываю в предпросмотре другой товар, тоже самое, содержимое, фото и все остальное точно такое же как и предыдущая страница и так со всеми ссылками.
в общем если открывать любую страницу, там будет один и тот же товар, если искать через сайт по этим артикулам (они в PARAM) то страницы с товарами меняются, в чем может быть затык? Есть ли какие нибудь надстройки которые могут бороться с такими не очень приятными вещами? Если да то как всегда ссылочку на лекцию пожалуйста.

 

А вы сколько таким образом ссылок просмотрели? откройте штук 5 и посмотрите на содержимое

 

А если с картинками, то вот только что зашел, просмотрел 5 ссылок, вот скрин 5 ссылки:

и теперь эта же ссылка но только в браузере:

Прошу обратить внимание именно на артикулы сверху, зеленого цвета.

 

Ссылки недоступны для гостей
Ссылки недоступны для гостей
Вот совершенно разные ссылки (Открывать строго в CD так как в браузере будут разные в CD одинаковые!)

Короче сейчас настрою границы парсинга, придется все спарсить и я вам скину то что получилось.

 

Просто запустите проект и посмотрите что получится. все ссылки разные, а фото у всех одинаковый. Почему? Потому что все страницы берутся из КЭША, как они туда попали? Без понятия. Почему остальные сайты норм парсятся и нормально подгружаются? Тоже хз. Отключил я кэширование в CD? Конечно!

Блин ну я не знаю как еще объяснить суть проблемы? Просто скачайте проект, запустите у себя, и посмотрите хотя бы на фото того что спарсится. Почему если открыть одну ссылку, она кешируется и при открытии других ссылок ничего не меняется?(все относится к CD если смотреть)

Только что спарсил 31 товар у всех одна и та же картинка, АААААА

Ссылки недоступны для гостей вот сами смотрите.

 

Есть другой вариант, который я рассматривал, сканером сайта найти все товары, и потом отсортировать то что надо и не надо. Нашел больше 50.000 ссылок на товары, это польские ссылки, русские и английские. как их отсортировать ВОООБЩЕ без понятия. Остался последний вариант это вот этот и все.

 

данный макрос к какой именно границе парсинга использовать? мне по сути дела нужны только картинки

 

и получится один товар, так как при парсинге все ссылки будут дублями

 

Ух ты.. скажите пожалуйста как вы привели все ссылки к такому виду? удалили Search/cache и все? я так делал у меня сразу главная открывалась

 

Низкий Вам поклон! Спасибо буду теперь знать.