Как спарсить с сохранением структуры ссылок

Тема в разделе "Решение различных задач по парсингу", создана пользователем Igor_st, 7 мар 2014.

  1. Igor_st

    Igor_st New Member Пользователи

    Регистрация:
    8 фев 2013
    Сообщения:
    47
    Всем привет,

    Подскажите, как спарсить сайт с сохранением структуры ссылок?

    Спасибо
     
  2. Kreol

    Kreol Модератор Команда форума Модератор

    Регистрация:
    6 янв 2013
    Сообщения:
    2.666
    Здравствуйте, объясните что именно Вы имеете ввиду? Ссылок на что?
     
  3. Igor_st

    Igor_st New Member Пользователи

    Регистрация:
    8 фев 2013
    Сообщения:
    47
    Сохраняется так article_85.htm
    А нужно что бы было так showthread.php?p=9219#post9219
     
  4. Kreol

    Kreol Модератор Команда форума Модератор

    Регистрация:
    6 янв 2013
    Сообщения:
    2.666
    То есть Вы хотите поменять имя файла? Или я ничего не понимаю.
     
  5. Igor_st

    Igor_st New Member Пользователи

    Регистрация:
    8 фев 2013
    Сообщения:
    47
    Я просто хочу сохранить структуру ссылки (ЧПУ), ну чтобы она была такой же как и на сайте доноре.

    Или другими словами создат полный дубль сайта что бы при переходе по внутреним ссылкам попадать на теже страницы что и на доноре.
     
  6. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Здравствуйте!

    Думаю, так не получится.
    По теме переименования документов можете посмотреть макрос [DOCNAME] тут Ссылки недоступны для гостей

    С уважением к вам, Сергей.
     
  7. Kreol

    Kreol Модератор Команда форума Модератор

    Регистрация:
    6 янв 2013
    Сообщения:
    2.666
    проводите поиск/замены, думаю только так.
     
  8. Igor_st

    Igor_st New Member Пользователи

    Регистрация:
    8 фев 2013
    Сообщения:
    47
    Теперь я не понял при чем тут поиск замена?, если файлов порядка 10 тысяч

    Может есть возможность как то через макрос <CD_DOCURL!> и [DOCNAME] - пробывал, но не получается.

    Неужели такой мощный комбаин такого не умеет
     
  9. Kreol

    Kreol Модератор Команда форума Модератор

    Регистрация:
    6 янв 2013
    Сообщения:
    2.666
    Ну вы хотите сказать, что когда у вас сохраняется картинка то из href="www.site.ru/image выходит href="/image
    в этом русле?
     
  10. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Совсем не для обсуждаемой задачи программа.
    Теоретически настроить можно (да и в полной мере - наврятли), но я за это браться не собираюсь, думаю, как и никто другой...
    Лучше спарсите с сайта контент и импортируйте его в подходящую CMS.
     
  11. Kreol

    Kreol Модератор Команда форума Модератор

    Регистрация:
    6 янв 2013
    Сообщения:
    2.666
    Если Вам нужен 100% дубль сайта, воспользуйтесь программами Teleport pro и им подобными. Но и они не дают тех абсолютных путей, которые Вы хотите, да и зачем это?. Ведь Вы потом будет делать партнерку скорее всего.
     
  12. nikolas1612

    nikolas1612 Member Пользователи

    Регистрация:
    27 ноя 2011
    Сообщения:
    439
    вы парсите, прежде всего, на жесткий диск своего компьютера. проблема в том, что вы даже файл так назвать не сможете, и это не проблема CD. это ограничение ОС Виндоуз, в названии файла не может быть целого ряда знаков - и знак вопроса - один из них. полного дубля не будет в любом случае. я вообще с трудом представляю, для чего может понадобиться полный дубль. ведь при переходе по таким ссылкам вы попадете на сайт-донор.
     
    Последнее редактирование: 8 мар 2014

Поделиться этой страницей