парсинг ссылок товаров

Тема в разделе "Парсинг конкретных сайтов по запросу (ПЛАТНО)", создана пользователем didjay, 28 ноя 2014.

  1. didjay

    didjay New Member Пользователи

    Регистрация:
    17 май 2014
    Сообщения:
    19
    Здравствуйте,подскажите если не трудно,как правильно спарсить ссылки товаров из категории тюнинг.
    добавил вот такие критерии
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
    Лезет все что есть на сайте,вообщем не то.
    раньше парсил,но там было с /products ,а здесь не знаю.вроде не трудно,но пока понять не пойму.Приложил проект.
     

    Вложения:

  2. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Здравствуйте.

    Обратите внимание на XML-карту сайта
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
     

    Вложения:

  3. didjay

    didjay New Member Пользователи

    Регистрация:
    17 май 2014
    Сообщения:
    19
    а вы бы могли показать настройку,как спарсили с этой категории.
    (стартовый url,только ссылки с)
     
  4. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Обратите внимание на пункт меню инструмент загрузки ссылок из XML-карты сайта на этой WEB-странице Ссылки недоступны для гостей
     
  5. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    В карте сайта, как я понял, размещены ссылки на все товары сайта. Для отсеивания товаров с ненужных рубрик (при парсинге контента) вы можете пользоваться функциями "фильтрации документов по списку ключевиков" (shift+ctrl+f). Где в качестве "ключевика" будет указываться нужная рубрика товара (тюнинг)...

    Проект прилагаю...
     

    Вложения:

  6. didjay

    didjay New Member Пользователи

    Регистрация:
    17 май 2014
    Сообщения:
    19
    по идее нужно дождаться когда он переберет эти 8к элементов и тогда спарсятся нужные ссылки.Есть ли по проще вариант как спарсить ссылки на товары из этой категории
     
  7. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Парсинг 8000 ссылок будет идти около двух часов. Ссылки я вам собрал около 45 минут назад. Думаю, быстрее дождаться парсинга 8000 ссылок, чем придумывать (непонятно зачем) другие решения...
     
  8. didjay

    didjay New Member Пользователи

    Регистрация:
    17 май 2014
    Сообщения:
    19
    парсинг закончен
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
    никаких ссылок нет,в csv док-те тоже пусто.
     
  9. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Да елки, нужно понимать, что вы делаете... Раз так, то вот проект, который спарсит в CSV ссылки на товары рубрики "тюнинг". Больше я перенастраивать вам не собираюсь, уж простите...
     

    Вложения:

  10. didjay

    didjay New Member Пользователи

    Регистрация:
    17 май 2014
    Сообщения:
    19
    Спасибо.
     

Поделиться этой страницей