Подскажите по play.google.com

Тема в разделе "Парсинг конкретных сайтов по запросу (ПЛАТНО)", создана пользователем Malchishka, 5 фев 2014.

  1. Malchishka

    Malchishka Member Пользователи

    Регистрация:
    12 янв 2014
    Сообщения:
    37
    Его вообще можно спарсить?

    Вся информация, которая находится под скринами в любом посте не поддаётся парсингу, т.е. невозможно задать границы парсинга какого-нибудь элемента, это можно как-то побороть?
     
  2. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Здравствуйте.
    Попробуйте: ctrl+h - Internet Explorer (DOM)
     
  3. Malchishka

    Malchishka Member Пользователи

    Регистрация:
    12 янв 2014
    Сообщения:
    37
  4. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Так, стоп. Без DOM парсит. Создал новый проект, все открывается и вся информация есть. Какую версию программы используете?
     
  5. Malchishka

    Malchishka Member Пользователи

    Регистрация:
    12 янв 2014
    Сообщения:
    37
    Версия 9.3, начало видеть всё только после того как поставил галочку "контент" Internet Explorer (DOM)
     
  6. Malchishka

    Malchishka Member Пользователи

    Регистрация:
    12 янв 2014
    Сообщения:
    37
    А можно как-то заставить CD прикинуться мобильником и залогинившись выкачивать файлы с гуглплей?
     
  7. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Ctrl+h - сменить user agent на мобильный попробуйте...
     
  8. Malchishka

    Malchishka Member Пользователи

    Регистрация:
    12 янв 2014
    Сообщения:
    37
    А можно как-то прокручивать страницу категории до самого конца в сканере сайтов?
    Например вот:
    Ссылки недоступны для гостей

    При прокрутке страницы вниз должны подгружаться новые игры, но в CD он видит первые несколько рядов и в том месте, где должна идти подгрузка останавливается, можно как-то заставить видеть его всё до самого конца и собирать все ссылки на игры?
     
  9. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Ссылки недоступны для гостей - смотреть по каким ссылкам подгружаются данные и парсить по ним =)
     
  10. kagorec

    kagorec Администратор Команда форума Администратор

    Регистрация:
    3 янв 2011
    Сообщения:
    4.442
    Адрес:
    Latvia
    Попробуйте сбор ссылок через пагинацию во вкладке "ссылки"
    Шаблон ссылки, где {num} число с шагом на +60
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
     
  11. Malchishka

    Malchishka Member Пользователи

    Регистрация:
    12 янв 2014
    Сообщения:
    37
    Не очень понял, во я вписал эту ссылку, выставил шаг
    [​IMG]

    Дальше нажимать генерить ссылки или что значит пагинация?
     
  12. kagorec

    kagorec Администратор Команда форума Администратор

    Регистрация:
    3 янв 2011
    Сообщения:
    4.442
    Адрес:
    Latvia
    диапазон от 60 до 360 попробуйте при шаге 60
     
  13. exarh

    exarh New Member Пользователи

    Регистрация:
    15 сен 2010
    Сообщения:
    5
    Никак не вижу где эта вкладка?
     
  14. kagorec

    kagorec Администратор Команда форума Администратор

    Регистрация:
    3 янв 2011
    Сообщения:
    4.442
    Адрес:
    Latvia
    Вкладка "ссылки" и справо "Еще" кнопка [GEN]
     
  15. Kreol

    Kreol Модератор Команда форума Модератор

    Регистрация:
    6 янв 2013
    Сообщения:
    2.666
    И я вставлю свои 5 копеек)
     

    Вложения:

Поделиться этой страницей