Многострадальный Яндекс маркет

Тема в разделе "Парсинг конкретных сайтов (ПЛАТНО)", создана пользователем TPOJIb, 23 мар 2017.

  1. TPOJIb

    TPOJIb New Member Пользователи

    Регистрация:
    23 мар 2017
    Сообщения:
    16
    Приветствую. Необходимо спарсить все характеристики по заданным ссылкам. Ссылки такого порядка:
    Ссылки недоступны для гостей, зарегистрируйтесь или авторизуйтесь на форуме! Ссылки недоступны для гостей, зарегистрируйтесь или авторизуйтесь на форуме! Ссылки недоступны для гостей, зарегистрируйтесь или авторизуйтесь на форуме! Ссылки недоступны для гостей, зарегистрируйтесь или авторизуйтесь на форуме! Ссылки недоступны для гостей, зарегистрируйтесь или авторизуйтесь на форуме! Ссылки недоступны для гостей, зарегистрируйтесь или авторизуйтесь на форуме! Ссылки недоступны для гостей, зарегистрируйтесь или авторизуйтесь на форуме!

    Но кнопка характеристик неактивная поскольку она формирует отдельную ссылку с другими атрибутами. Вида: Ссылки недоступны для гостей, зарегистрируйтесь или авторизуйтесь на форуме! есть ли решение которое позволит из заданных ссылок сформировать нужные?

    Второй вопрос, я перерыл все справочные материалы но у меня так и не получилось сделать шаблон для прсинга характеристик, поскольку не получается правильно задать границы парссинга, структура страницы отличается от той которую я вижу в видео в разделе помощь. Помогите новичку.
     
  2. kagorec

    kagorec Администратор Команда форума Администратор

    Регистрация:
    3 янв 2011
    Сообщения:
    3.197
    Парсить можно в 2 этапа. Первым главную страницу товара, вторым этапом страницу характеристик.
    В заключении два документа соединить через CSV редактор Ссылки недоступны для гостей, зарегистрируйтесь или авторизуйтесь на форуме! .
    п.с. самое простое и надежное решение.
     
  3. TPOJIb

    TPOJIb New Member Пользователи

    Регистрация:
    23 мар 2017
    Сообщения:
    16
    Спасибо за ответ но мне не надо главную страницу только характеристики, а они под другой ссылкой. Попробовал через генератор ссылок и фильтр получить нужное, но как-то не очень получилось, из 11 тысяч получил 94 ссылки( а нужны все.
    И до сих пор не могу разобраться как стянуть таблицу характеристик.
     
  4. Root

    Root Администратор Команда форума Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    9.641
    Город:
    Сочи
    Здравствуйте.

    1) Используйте функцию поиск-замены в фильтрах ссылок:
    Код:
    ?|/spec?track=tabs&
    2017-03-23_14-14-36.png
     
  5. Root

    Root Администратор Команда форума Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    9.641
    Город:
    Сочи
    2) Смотрите скриншот и проект

    2017-03-23_14-30-24.png
     

    Вложения:

  6. TPOJIb

    TPOJIb New Member Пользователи

    Регистрация:
    23 мар 2017
    Сообщения:
    16
    Спасибо помогло, ссылки получил. теперь бы понять как таблицу характеристик скачать. это самое сложное как я понял.
     
    Последнее редактирование модератором: 23 мар 2017
  7. TPOJIb

    TPOJIb New Member Пользователи

    Регистрация:
    23 мар 2017
    Сообщения:
    16
    все замечательно но я вдруг выяснил что у меня версия программы стандарт, хотя в свое врем вроде бы ультимейт приобретал, хотя могу ошибаться((( оказывается не все доступно в стандарте. Ладно будем разбираться.
     
    Последнее редактирование модератором: 23 мар 2017
  8. Root

    Root Администратор Команда форума Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    9.641
    Город:
    Сочи
    Пожалуйста.

    Сам по себе тип лицензии смениться не может. Сверьтесь с данными о переводе, посмотрите, какую сумму оплачивали при покупке.

    PS: В версии Standard возможен такой вариант парсинга множества характеристик Ссылки недоступны для гостей, зарегистрируйтесь или авторизуйтесь на форуме!
     
  9. TPOJIb

    TPOJIb New Member Пользователи

    Регистрация:
    23 мар 2017
    Сообщения:
    16
    Я очень давно приобретал программу, тогда еще не было типов лицензий даже интерфейс выглядел по другому так что я врятли сейчас найду данные по оплате)
     
  10. Root

    Root Администратор Команда форума Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    9.641
    Город:
    Сочи
    Тогда у вас тип лицензии Standard.

    Либо попробуйте второй метод парсинга (какой я предложил выше), либо сделайте апгрейд типа лицензии Ссылки недоступны для гостей, зарегистрируйтесь или авторизуйтесь на форуме!
     
  11. TPOJIb

    TPOJIb New Member Пользователи

    Регистрация:
    23 мар 2017
    Сообщения:
    16
    Сделал перевод на альфу но там комментарий невозможен, отправил письмо
     
    Последнее редактирование: 23 мар 2017
  12. Root

    Root Администратор Команда форума Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    9.641
    Город:
    Сочи
    Спасибо! Перезапустите программу...
     
  13. Tigr

    Tigr New Member Пользователи

    Регистрация:
    10 ноя 2017
    Сообщения:
    18
    Город:
    Москва
    Меня банит Яндекс,(запрашивает капчу) можно ли полную инфу по парсингу яндекс маркет ?
     
  14. kagorec

    kagorec Администратор Команда форума Администратор

    Регистрация:
    3 янв 2011
    Сообщения:
    3.197
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
     
    Root нравится это.
  15. Blolk

    Blolk New Member Пользователи

    Регистрация:
    26 авг 2018
    Сообщения:
    12
    Город:
    Могилев
    Не знаю, поставил в один поток с паузой в 30 секунд, все равно в баню улетаю. С проксями не разобрался. Их добавлял в список, даже в в пару потоков запустил, в логе было указано, что использованы прокси, а результата нет(
     
  16. inotoxic

    inotoxic Well-Known Member Пользователи

    Регистрация:
    13 сен 2015
    Сообщения:
    272
    Может прокси в бане у яндекса?
    В предпросмотре с проксей, страница нормально грузится без каптчи?
     
  17. Blolk

    Blolk New Member Пользователи

    Регистрация:
    26 авг 2018
    Сообщения:
    12
    Город:
    Могилев
    через раз, Advor поставил, все равно не помогает,,
     
  18. inotoxic

    inotoxic Well-Known Member Пользователи

    Регистрация:
    13 сен 2015
    Сообщения:
    272
    в Advor под яндекс уже все заспамлено
     
  19. Blolk

    Blolk New Member Пользователи

    Регистрация:
    26 авг 2018
    Сообщения:
    12
    Город:
    Могилев
    Печаль, а как быть? может я не так что делаю?
     
  20. inotoxic

    inotoxic Well-Known Member Пользователи

    Регистрация:
    13 сен 2015
    Сообщения:
    272
    Я не знаю
    ... что и как вы делаете?
     

Поделиться этой страницей