Одноклассники

Discussion in 'Решение различных задач по парсингу' started by Denomega, Oct 19, 2012.

  1. Denomega

    Denomega New Member Пользователи

    Joined:
    Aug 29, 2012
    Messages:
    7
    Как спарсить сообщения из тем в закрытых группах, при условии что есть доступ к группам.
     
  2. kagorec

    kagorec Администратор Staff Member Администратор

    Joined:
    Jan 3, 2011
    Messages:
    4,442
    Location:
    Latvia
    Также как и остальные сайты требующие авторизацию.
    Стандартным способом или через снифер передать cookies, собрать ссылки на страницы нужные, указать границы и парсить.
     
  3. MoloT

    MoloT New Member Пользователи

    Joined:
    Feb 27, 2013
    Messages:
    7
    А ещё вопрос по одноклассникам.
    Как спарсить все фотки с профиля?
    Допустим есть доступ , есть несколько профилей , чтобы картинки каждого профиля сохранялись в отдельные папки.
    Ну или хотя бы по одному профилю парсить.
     
  4. araman

    araman New Member Пользователи

    Joined:
    Feb 18, 2012
    Messages:
    13
    Цель - получить список профилей юзеров из открытых групп. Главная проблема - получить все ссылки на одной странице.
    Выводит ссылки порционно, что бы получить следующую порцию, нужно нажать на ссылку "Показать ещё" (вот скрин - Ссылки недоступны для гостей)
    Между тем линк имеет вид http://odnoklassniki.ru/group/{ID группы}/members#, и введя его в строку браузера ничего не получаем.
    В коде страницы этой ссылке соответствует код:
    <div><a id="nohook_7885143087" class="link-show-more" data-show-more="link-show-more" href="#">Показать ещё</a></div>
    Что означает ID "nohook_7885143087" - неизвестно, с id группы не совпадает, но для каждой группы разный.
    Номера профилей вытащить можно, если вручную кнопать по "Показать ещё" снова и снова.
    Вопрос в том, как получить всю страницу с профилями сразу? Может кто решал подобную задачу.
     
  5. kagorec

    kagorec Администратор Staff Member Администратор

    Joined:
    Jan 3, 2011
    Messages:
    4,442
    Location:
    Latvia
    Поскольку CD пр парсинге не обрабатывает javascript то как вариант лучше социальные сети парсить в мобильной версии
     
  6. araman

    araman New Member Пользователи

    Joined:
    Feb 18, 2012
    Messages:
    13
    Проблема осталась непобежденной. У кого есть какие варианты, буду рад обсудить в личке.
     
  7. MoloT

    MoloT New Member Пользователи

    Joined:
    Feb 27, 2013
    Messages:
    7
    С мобильной версии качает, но фотки качаются размером до 200-240 пикселей.
    araman , у тебя есть решение ?
     
  8. Benjamin Coleman

    Benjamin Coleman New Member Пользователи

    Joined:
    Oct 23, 2010
    Messages:
    152
    В эту же тему: обсуждения в группах "Одноклассников" идут в html в обратном порядке (глазами нормального человека). Кто знает, как собрать данные при помощи повторяющихся границ в обратном порядке? Как расположить повторяющиеся границе в обратном порядке?
     
  9. nikolas1612

    nikolas1612 Member Пользователи

    Joined:
    Nov 27, 2011
    Messages:
    439
    думаю, средствами программы - никак. только доп. скриптами или в Excel после парсинга.
     
  10. Benjamin Coleman

    Benjamin Coleman New Member Пользователи

    Joined:
    Oct 23, 2010
    Messages:
    152
    Спасибо за отклик. Проблема решилась - в мобильной версии Ссылки недоступны для гостей. - все нормально отображается.
     
  11. blax

    blax New Member Пользователи

    Joined:
    Feb 20, 2012
    Messages:
    6
    Вечер добрый!
    Столкнулся с проблемой при сборе урлов популярный групп из раздела группы в Одноклассниках. Список групп обновляется при прокручивании вниз страницы. Отлавливал запросы с помощью HttpFox, однако безрезультатно. Есть выход?
     
  12. kagorec

    kagorec Администратор Staff Member Администратор

    Joined:
    Jan 3, 2011
    Messages:
    4,442
    Location:
    Latvia
    указать парсеру мобильную версию и в юзер-агентах указать какойто старый//слабый мобильник
     
  13. blax

    blax New Member Пользователи

    Joined:
    Feb 20, 2012
    Messages:
    6
    пробовал, но в мобильной версии нет списка популярных групп
     
  14. vavera4ka

    vavera4ka New Member Пользователи

    Joined:
    Aug 28, 2013
    Messages:
    23
    Актуальная проблема.

    Хочу спарсить список пользователей которые поставили лайк под тем или иным постом в группе. На мобильной версии, при прокрутке страницы, появляется кнопка "Показать ещё", следовательно больше 10 пользователей спарсить нельзя (((( Как быть, кто-нибудь решил проблему?
     
  15. vavera4ka

    vavera4ka New Member Пользователи

    Joined:
    Aug 28, 2013
    Messages:
    23
    Я так понимаю, рецепта по решению сие вопроса нет? :) Т.к. я к примеру его не нашел :)
     
Similar Threads
  1. Волшебница
    Replies:
    4
    Views:
    961
Loading...

Share This Page