Как спарсить товар N..е количество раз по заданому критерию

Тема в разделе "Разное", создана пользователем sarootua, 18 дек 2015.

  1. sarootua

    sarootua New Member Пользователи

    Регистрация:
    29 авг 2015
    Сообщения:
    14
    Всем привет! Возникла необходимость спарсить с 1-го url товар несколько раз, а именно:
    есть товар и у него есть параметр Цвет: Черный, Белый.... и тди тп
    в зависимости от выбора цвета меняется галерея картинок
    так вот, нужно спарсить этот товар сколько раз (все в один файл), сколько есть значений Цвет

    Есть мысли как это можно сделать?

    Заранее спасибо
     
  2. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Здравствуйте.

    Нет универсального решения этой задачи. Решение подбирается индивидуально к каждому сайту.

    С уважением к вам, Сергей.
     
  3. sarootua

    sarootua New Member Пользователи

    Регистрация:
    29 авг 2015
    Сообщения:
    14
    Ссылки недоступны для гостей вот ссылка
     
  4. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Эта ссылка для белого цвета товара. Почему бы не собрать ссылки на все цвета товаров и парсить их отдельно (парсить товар каждого цвета отдельно).
     
  5. kagorec

    kagorec Администратор Команда форума Администратор

    Регистрация:
    3 янв 2011
    Сообщения:
    4.429
    Адрес:
    Latvia
    1. Сканирование всех товаров
    2. Парсинг ссылок товаров чтобы распарсить ид цветов и сформмировать список на цветовые ссылки. Но как альтернатива можно попробовать ADDURL
     

    Вложения:

    • 6pm.png
      6pm.png
      Размер файла:
      91,9 КБ
      Просмотров:
      4
  6. sarootua

    sarootua New Member Пользователи

    Регистрация:
    29 авг 2015
    Сообщения:
    14
    Не на всех ссылках есть указание цвета или ID цвета
     
  7. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Здравствуйте.

    Вы какую-то рубрику сайта парсите или сайт целиком? Пожалуйста, поясните механизм сбора ссылок.
     
  8. sarootua

    sarootua New Member Пользователи

    Регистрация:
    29 авг 2015
    Сообщения:
    14
    Смотрите, мне нужно спарсить все ссылки с сайта + в каждой ссылке, найти SKU + ID Цвета, основываясь на этих данных автоматически генерировать ссылки нужных вариантов. так что бы данные ссылки записывались в столбец
     
  9. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Здравствуйте еще раз.

    Скачайте доработанную версию:
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
    Обратите внимание на <CD_CYCLE_GRAN_1!> в шаблоне вывода. Она служит для добавления ссылок с вариациями цветов.

    В итоге парсинга (не предпросмотра) ссылки Ссылки недоступны для гостей мы получим три строки в CSV с вариациями цветов этого товара.

    Файл проекта приложил (в программе: меню - файл - загрузить проект).

    С уважением к вам, Сергей.
     

    Вложения:

    • 6pm_com.cdp
      Размер файла:
      28,2 КБ
      Просмотров:
      2
  10. sarootua

    sarootua New Member Пользователи

    Регистрация:
    29 авг 2015
    Сообщения:
    14
    Спасибо за ответ, но строки с вариациями не выводятся. только 1-на строка
     
  11. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Значит что-то не так делаете, хотя я расписал все и предоставил проект (предварительно проверив его работоспособность у себя).

    1) Покажите мне CSV-файл, который получается при парсинге. Для запуска парсинга нажмите F5 и подождите, пока процесс завершится;
    2) Покажите мне скриншот лога (ctrl+l) после завершения парсинга;
    3) Убедитесь, установили ли вы доработанную версию программы:
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
    Что получается у меня, я прикрепил.

    С уважением к вам, Сергей.
     

    Вложения:

    • 6pm_com.cdp
      Размер файла:
      28,2 КБ
      Просмотров:
      16
    • article_all_1.csv
      Размер файла:
      777 байт
      Просмотров:
      2

Поделиться этой страницей