Удаление дублей ссылок из разных рубрик

Приветствую!
В общем ситуация такая:
Есть сайт на котором хлебные крошки можно увидеть только если идти по пути товара (заходим на категорию, потом дальше и т.д.
Есть xml в котором есть ссылки на товары, но там нет привязки к категориям (ссылка ниже)

Скрытое содержимое:

**Скрытое содержимое: доступно при наличии 100 постов.**

а вот так выглядит ссылка с привязкой

Скрытое содержимое:

**Скрытое содержимое: доступно при наличии 100 постов.**

Проблема в том, что собрать ссылки с привязкой я могу, но вот такой вариант в итоге получается:

Скрытое содержимое:

**Скрытое содержимое: доступно при наличии 100 постов.**

т.е. ссылка одна и таже, но она во многих категориях.
Нам нужно чтоб ссылка осталась одна для любой из категории (обычно первой.
Вопрос: Как решить эту задачу (таких инструментов для обработки ссылок у нас нету (либо я смотрб не туда)
Единственное решение которое я могу предположить, это сделать через PARAM + удаление дублей без учета PARAM.
Но это ручная работа. У нас нет инструментов, чтоб автоматически что-то делать с ссылками до момента их загрузки.
Может кто что подскажетя7

 

Теоретически;
В сканере в поиск-замена перекинуть значение категории в [PARAM] чтобы отсеяло дубли на стадии сканирования стандартным способом.

Код:

re:\?ref=categor:([\d]+)|[PARAM]:?ref=categor:$1

или
Пробуй надстроить "Инструмент расширенного удаления дублей ссылок"

 

А как эту функцию использовать автоматически при загрузке ссылок из файла? Я походу что-то не понял.