Парсинг картинок Яндекс маркет

Тема в разделе "Решение различных задач по парсингу", создана пользователем alex063, 18 апр 2018.

  1. alex063

    alex063 Member Пользователи

    Регистрация:
    15 мар 2018
    Сообщения:
    27
    Город:
    Тольятти
    Вижу уже есть подобные темы. но они все старые,яндекс сменил алгоритм выдачи. Вопрос существует ли какое либо решение по парсингу ? Платное или бесплатное?
     
  2. napserious

    napserious Well-Known Member Пользователи Активирован

    Регистрация:
    16 окт 2015
    Сообщения:
    324
    А в чем проблема с Яндексом?

    upload_2018-4-18_13-47-20.png


    Вроде обычный сайт, парсинг работает как и на всех сайтах.
     
    Последнее редактирование: 18 апр 2018
  3. alex063

    alex063 Member Пользователи

    Регистрация:
    15 мар 2018
    Сообщения:
    27
    Город:
    Тольятти
    нужно картинки по ключевикам парсить,что то никак не выходит
     
  4. napserious

    napserious Well-Known Member Пользователи Активирован

    Регистрация:
    16 окт 2015
    Сообщения:
    324
    Это эти ?
    upload_2018-4-18_14-13-16.png
     
  5. alex063

    alex063 Member Пользователи

    Регистрация:
    15 мар 2018
    Сообщения:
    27
    Город:
    Тольятти
    типа того,только при разных запросах картинки в разных местах получаются,никак не могу поймать
     
  6. napserious

    napserious Well-Known Member Пользователи Активирован

    Регистрация:
    16 окт 2015
    Сообщения:
    324
    upload_2018-4-18_15-30-20.png
    Так?
    Вроде никуда не убежали =)

    Ключевые слова вставляются в {key}, далее изображение сохраняется на диск и название файла равно ключевому слову.

    Keyword = huawei p20 pro
    Image = huawei-p20-pro.jpg
     
  7. napserious

    napserious Well-Known Member Пользователи Активирован

    Регистрация:
    16 окт 2015
    Сообщения:
    324
    Вот какие ключевые я задал:
    upload_2018-4-18_15-37-20.png
    Вот что я получил:
    upload_2018-4-18_15-37-54.png
     
    alex063 и xLime нравится это.
  8. alex063

    alex063 Member Пользователи

    Регистрация:
    15 мар 2018
    Сообщения:
    27
    Город:
    Тольятти
  9. alex063

    alex063 Member Пользователи

    Регистрация:
    15 мар 2018
    Сообщения:
    27
    Город:
    Тольятти
    и к следующему ключевику уже картинка не извлекается
     
  10. alex063

    alex063 Member Пользователи

    Регистрация:
    15 мар 2018
    Сообщения:
    27
    Город:
    Тольятти
    понятно что если каждый раз указывать в границах парсинга ссылку на картинку то все норм,только вот картинок около тысячи
     
  11. napserious

    napserious Well-Known Member Пользователи Активирован

    Регистрация:
    16 окт 2015
    Сообщения:
    324
    Дайте список ключевиков.
    Проверю если моим способом меняется граница.

    И КСТАТЕ, в CD можно указывать несколько границ!
     
  12. alex063

    alex063 Member Пользователи

    Регистрация:
    15 мар 2018
    Сообщения:
    27
    Город:
    Тольятти
    ключевики тут не принципиальны, возьмем на примере тех же телефонов при запросе каждого,будет менятся расположение ссылки на фото и куча кода яндекса))
     
  13. napserious

    napserious Well-Known Member Пользователи Активирован

    Регистрация:
    16 окт 2015
    Сообщения:
    324
    Я не использую стандартный метод, по этому у меня расположение изображений не меняется, я подошел к этому вопросу с другой стороны.

    Я вам показываю что у меня работает это, а вы меня будто отговариваете что это не работает =))
     
  14. alex063

    alex063 Member Пользователи

    Регистрация:
    15 мар 2018
    Сообщения:
    27
    Город:
    Тольятти
    Даже и не думал отговаривать))
     
  15. napserious

    napserious Well-Known Member Пользователи Активирован

    Регистрация:
    16 окт 2015
    Сообщения:
    324
    Вот проект.
    Ключевые слова ставите в {key}
     

    Вложения:

    • yandex_ru.cdp
      Размер файла:
      38,7 КБ
      Просмотров:
      20
  16. alex063

    alex063 Member Пользователи

    Регистрация:
    15 мар 2018
    Сообщения:
    27
    Город:
    Тольятти
    Забитые в проект ключевики парсятся,но когда подставляю свои,ничего не получается. Куки свои вставлять? может в этом дело? ?
     
  17. alex063

    alex063 Member Пользователи

    Регистрация:
    15 мар 2018
    Сообщения:
    27
    Город:
    Тольятти
    вставил свои и результат тоже нулевой,при нажатии на задание границы парсинга для названия,выдается текстовый документ с текстом запроса
     
  18. alex063

    alex063 Member Пользователи

    Регистрация:
    15 мар 2018
    Сообщения:
    27
    Город:
    Тольятти
    В общем разобрался,осталось капчу победить или может интервал между запросами увеличить? Время есть,никуда не спешу,может знает кто как это сделать?
     
  19. alex063

    alex063 Member Пользователи

    Регистрация:
    15 мар 2018
    Сообщения:
    27
    Город:
    Тольятти
    или без хороших прокси никак?
     
  20. kagorec

    kagorec Администратор Команда форума Администратор

    Регистрация:
    3 янв 2011
    Сообщения:
    4.431
    Адрес:
    Latvia
    При парсинге через Wbapp заметно оттягивает время появления каптчи, но в разы скорость меньше.
     

Поделиться этой страницей