Twitter парсинг из веб-версии

Тема в разделе "Решение различных задач по парсингу", создана пользователем mgrbtc, 22 окт 2017.

Метки:
  1. mgrbtc

    mgrbtc New Member Пользователи

    Регистрация:
    22 окт 2017
    Сообщения:
    4
    Доброго времени, требуется спарсить информацию об аккаунтах твиттер, при задании границ парсинга кд почему-то подставляет моб версию, а мне нужна именно веб-версия, тк требуется спарсить год и месяц регистрации каждого из акков, чего в моб версии просто нет.
    Я так понимаю, кд по умолчанию пытается парсить моб версию, тк она легче, вот тут не в курсе правда это или нет.
    Где это можно настроить и вообще можно ли заставить кд парсить именно веб-версию твиттера?
     
  2. xLime

    xLime Well-Known Member Супер Модератор Модератор

    Регистрация:
    4 сен 2017
    Сообщения:
    401
    Добрый день.
    Попробуйте Ссылки недоступны для гостей из окна ctrl+k (или ctrl+h).
    "Авторизация с помощью cookies Internet Explorer"
     
    Последнее редактирование: 22 окт 2017
  3. mgrbtc

    mgrbtc New Member Пользователи

    Регистрация:
    22 окт 2017
    Сообщения:
    4
    Спасибо, не знаю, помогло ли именно это, но теперь при задании границ парсинга открывается всё равно моб версия, но в коде можно найти год и месяц регистрации как будто смотрим веб )
     
  4. kagorec

    kagorec Администратор Команда форума Администратор

    Регистрация:
    3 янв 2011
    Сообщения:
    4.431
    Адрес:
    Latvia
    [​IMG]

    Настроил проект как обычнои никаких юзерагент или кукис там не требуется при парсинге веб-версии.
    Пример проекта приложил, остальное донастроить сможете самостоятельно.
    п.с. скорее всего повод заблуждения был из-за отображения моб версии в предосмотре при настраивании границ.
     

    Вложения:

    Root нравится это.
  5. mgrbtc

    mgrbtc New Member Пользователи

    Регистрация:
    22 окт 2017
    Сообщения:
    4
    Супер, спасибо
     
    Root нравится это.

Поделиться этой страницей