При задании границ парсинга редирект на главную

Всем доброго дня. наткнулся на такую проблему, есть сайт:

Скрытое содержимое:

**Скрытое содержимое: доступно при наличии 1 постов.**

при попытке задать границы парсинга открывает главную страницу, с такой ссылкой

Скрытое содержимое:

**Скрытое содержимое: доступно при наличии 1 постов.**

сами ссылки имеют такой вид:

Скрытое содержимое:

**Скрытое содержимое: доступно при наличии 1 постов.**

Вопрос, почему происходит редирект? в таком случае не нужно обрабатывать редирект?
если открыть саму ссылку на СТО через WBApp в любом случае редирект на главную.

Приходит на мысль одна идея это парсить ссылки на СТО с помощью WBApp но при таком случае не будет ли подобной истории?

 

Здравствуйте.

Проверил. Редиректа не происходит.

 

Хммм, почему у меня тогда с редиректом? Все ссылки взяты с сайтмапа

Попробовал только что взять ссылки через скайнер сайтов, все равно редирект на главную.

Хммм... если вставить ссылку в ручную, то редиректа нет. Если через сканер сайтов или сайтмап то есть редирект на главную. в чем проблема может быть?

 

Вопрос решен. Добавил всем ссылкам www и получилось.