Парсинг категорий и картинок магазина на e-bay

Тема в разделе "Решение различных задач по парсингу", создана пользователем pompey, 10 фев 2015.

  1. pompey

    pompey New Member Пользователи

    Регистрация:
    27 янв 2015
    Сообщения:
    20
    Здравствуйте!

    5-ый день мучаюсь, как грамотно спарсить магазин eBay... Пересмотрел все видео по своей теме - часа 2 наверное :worry:

    В приложении файл с результатом до которого я дошел.

    Мне нужно чтобы выводились следующие столбцы:

    Название - Описание - Стоимость доставки - Цена - Цена завершенного лота - Категория и подкатегория - Картинки

    Все кроме 2-х посоледних пунктов я реализовал. Категория и подкатегория содержится только на страницах
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
    а страница товара выглядит так
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
    Парсим мы конечно же со страницы товара все.

    Там хоть и отображаются категории, но как забрать нужную?


    И второй вопрос:
    я парсил картинки через повторяющиеся границы. Т.к. код картинок берется хрен пойми откуда, мне пришлось подменить часть ссылки $_35 на $_57 (это ссылка на картинку максимального размера)

    Вот так выглядит большая картинка http://i.ebayimg.com/00/s/MTIwMFgxNjAw/z/IasAAOSw0e9UygxH/$_57.JPG

    В результате у меня копируются дубли картинки по нескольку раз.

    Как убрать дубли, чтобы в результате уже не было повторяющихся?


    P.S. Все видео я просмотрел - там нет точного ответа под мою задачу, поэтому буду рад помощи более опытных людей, чем я.

    Спасибо за ответ!
     

    Вложения:

  2. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Здравствуйте.

    1). На странице товаров есть:
    Разве не является ли это категориями? Если нет, то почему?

    2). По поводу картинок: задал повторяющиеся границы парсинга по-другому (меню - файл - загрузить проект).

    С уважением к вам, Сергей...
     

    Вложения:

  3. pompey

    pompey New Member Пользователи

    Регистрация:
    27 янв 2015
    Сообщения:
    20
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
    Только проблем в том что категории магазина не видны на странице товара. Вернее они видны, только все одновременно - в одинаковом виде. И не понятно за что зацепиться, чтобы вытащить нужную мне.
     
  4. pompey

    pompey New Member Пользователи

    Регистрация:
    27 янв 2015
    Сообщения:
    20
    Вы царь =)))

    А помогите расшифровать - я должен это знать.... несколько дней мучений не дадут мне уснуть, если я не узнаю о чем тут и как вышло что он убрал дубли.

    [DFN][TOTRANSLITE:regdown,clear,convertspaces]<CD_GRAN_1!>[/TOTRANSLITE][/DFN]<DOWNLOADFILE>[BEFORE_IMG_REPLACE(\u002F|/)][VALUE][/BEFORE_IMG_REPLACE]</DOWNLOADFILE>

    Не понятно мне это [TOTRANSLITE:regdown,clear,convertspaces]
    и это [BEFORE_IMG_REPLACE(\u002F|/)][VALUE][/BEFORE_IMG_REPLACE]
     
  5. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Повторяющаяся граница 4 перезадана и изначально берет только 10 ссылок на картинки.

    Макрос [TOTRANSLITE] превращает текст в транслит (заменяет русские буквы на их английские аналоги).

    [BEFORE_IMG_REPLACE(\u002F|/)][VALUE][/BEFORE_IMG_REPLACE] заменяет \u002F на / так как в ссылках на картинки есть \u002F. Почему не [REPLACE]: [REPLACE] выполняется после функции загрузки картинок, а [BEFORE_IMG_REPLACE] выполняется до функции загрузки картинок.
     
  6. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    По поводу категорий: сделайте скриншот WEB-страницы и выделите на нем категории, которые нужно взять.
     
  7. pompey

    pompey New Member Пользователи

    Регистрация:
    27 янв 2015
    Сообщения:
    20
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
    Можно конечно в 2 этапа и склеить по совпадающим ссылка, но не хотелось бы... Подобную обезьянью работу придется проделывать часто.
     
    Последнее редактирование: 10 фев 2015
  8. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Тут вам сейчас ничего больше предложить не могу, кроме как парсить те рубрики, что есть на странице товара:
    С их парсингом проблем быть не должно.
     
  9. pompey

    pompey New Member Пользователи

    Регистрация:
    27 янв 2015
    Сообщения:
    20
    Но все равно - спасибо за картинки!

    А это я тогда склею из 2-х файлов
     
  10. alexander

    alexander New Member Пользователи

    Регистрация:
    26 июл 2012
    Сообщения:
    33
    Адрес:
    deutschland
    Уважаемый админ,подскажи пожалуйста как переделать в этом шаблоне (ebay_com-military-shop-upgrade.cdp ) Повторяющие границы 4 чтобы все картинки были в одной строке и после каждой была запятая,а перед каждой в место files/ была data/ как на скриншоте
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
    :sweat:
     
  11. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Здравствуйте.

    Смотрите пояснения на скриншоте.

    С уважением к вам, Сергей...
     

    Вложения:

  12. alexander

    alexander New Member Пользователи

    Регистрация:
    26 июл 2012
    Сообщения:
    33
    Адрес:
    deutschland
    Спасибо Сергей всё получилось,у тебя лучшая поддержка в интернете,в знак благодарности-хочу проапгрейдить тип лицензии с standard -> ULTIMATE (500 рублей)

    Пошлю сюда 7 € PayPal: sbfroot@gmail.com
     
    Последнее редактирование: 23 дек 2015
  13. pompey

    pompey New Member Пользователи

    Регистрация:
    27 янв 2015
    Сообщения:
    20
    Не парсится описание товара

    Здравствуйте!

    А не знаете почему то перестало парситься описание товаров на ebay

    Ссылки недоступны для гостей

    В коде части с описанием больше нету. Есть вариант обойти их новые фишки защиты?
     

    Вложения:

  14. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Здравствуйте.

    Описание теперь в iframe у них. Подгружайте его макросом GETMORECONTENT Ссылки недоступны для гостей

    С уважением к вам, Сергей.
     

    Вложения:

  15. pompey

    pompey New Member Пользователи

    Регистрация:
    27 янв 2015
    Сообщения:
    20
    Спасибо!

    Вроде все понятно с первого раза. Сегодня заюзаю Ваш совет.
     

Поделиться этой страницей