Подмена ссылок из документа на их конечный адрес (редирект)

Парсинг сайта требует собрать ссылки из повторяющихся границ в одном из столбиков CSV файла.

но из огромного массива полученных ссылок теперь предстоит найти конечные ссылки (которые получает пользователь после перехода через редиректы)

как можно на лету получать ссылку после редиректа?

 

Здравствуйте!

Нажмите ctrl+h, включите там галочку "работать с редиректными ссылками", в шаблон вывода вставьте <CD_DOCURL!> (выведет ссылку после редиректа).

С уважением к вам, Сергей.

 

мы видимо друг друга не поняли. <CD_DOCURL!> я использую когда нужно узнать конечный урл документа, который я обрабатываю в данный момент парсером.

Мне же нужно несколько иной вариант:
например я обрабатываю веб страницу по ссылке -

Скрытое содержимое:

**Скрытое содержимое: доступно при наличии 1 постов.**

В записях на стене содержаться ссылки

Скрытое содержимое:

**Скрытое содержимое: доступно при наличии 1 постов.**

 

Подобного функционала нет.

 

Скрытое содержимое:

**Скрытое содержимое: доступно при наличии 1 постов.**

думаю то что нужно

Либо вариант по проще - Screaming Frog SEO Spider

 

Если это чаще, чем раз в год нужно, то можно подумать над реализацией такой функции)

 

Уж будьте любезны, :bow:

 

Спасибо! Учли.
Скажите, такой момент. Если ссылка "битая" или сервер не ответил, что вставляем вместо такого URL тогда?

 

если ссылка редирект не дает ответа, то в идеале должен быть выбор:
- ничего не ставить
- отдать код (статус) ошибки
- Оставить "ссылку-редирект,
- Вставить текст (по усмотрению пользователя)

 

Готово. Потестируете? Жду вас в Skype. Спасибо!

 

Вроде все работает!

 

Отличная новость. Пока на выходных ездил к родителям в гости над моими пожеланиями кипела работа.

Спасибо. сегодня буду тестить.

 

Пожалуйста.
Рады помочь, обращайтесь.

 

Здравствуйте! Пытаюсь получить конечный адрес после редиректа, но возвращается исходная ссылка. Подскажите, в чем может быть проблема.

Скрытое содержимое:

**Скрытое содержимое: доступно при наличии 1 постов.**

 

Здравствуйте.
Ссылка должна быть в теге a (a href="ссылка")

 

Истину глаголите! Все получилось!:yes: Спасибо!:handshake:

 

Пожалуйста =) Обращайтесь.

 

Здравствуйте. У меня не получается сделать, к сожалению. На сайте стоит редирект вида:

Скрытое содержимое:

**Скрытое содержимое: доступно при наличии 1 постов.**

Я этот кусок парсю, собственно из предпросмотра и выдернул. Потом обозначаю повторяющиеся границы:

Скрытое содержимое:

**Скрытое содержимое: доступно при наличии 1 постов.**

как следствие каждая ссылка, заключенная в тег <a> у меня выдёргивается, потом в настройке повторяющихся границ делаю так:
[GETREDIRECT][VALUE][/GETREDIRECT]
К сожалению результатом вместо вожделенных ссылок становится это:

Скрытое содержимое:

**Скрытое содержимое: доступно при наличии 1 постов.**

Подскажите, пожалуйста, что я делаю не так?

 

Спасибо за быструю реакцию. Проект прилагаю.