Как парсить поиск в Rutube?

Тема в разделе "Парсинг конкретных сайтов по запросу (ПЛАТНО)", создана пользователем sn2368, 16 сен 2012.

  1. sn2368

    sn2368 New Member Пользователи

    Регистрация:
    4 авг 2012
    Сообщения:
    14
    Поиск подгружается браузером при прокрутке в конец страницы.
    Подскажите как напарсить 100-200 и более ссылок.
     
  2. kagorec

    kagorec Администратор Команда форума Администратор

    Регистрация:
    3 янв 2011
    Сообщения:
    4.429
    Адрес:
    Latvia
    1. _http://rutube.ru/api/search/?query=string(%22moto%22%2C+annotation_class%3D%22user%22)&view=newrutubesppublished&hits=12&offset=12
    2. _http://rutube.ru/api/search/?query=string(%22moto%22%2C+annotation_class%3D%22user%22)&view=newrutubesppublished&hits=12&offset=24
    3. _http://rutube.ru/api/search/?query=string(%22moto%22%2C+annotation_class%3D%22user%22)&view=newrutubesppublished&hits=12&offset=36

    Как видно что каждая следующая страница выдачи по запросу "moto" на +12

    п.с. повторюсь какой раз - это делается все через аддон мозиллы HTTPFox
     
  3. sn2368

    sn2368 New Member Пользователи

    Регистрация:
    4 авг 2012
    Сообщения:
    14
    Спасибо за ответ и HTTPFox, а с профилем не получается засечь переход. Может есть идеи?
    _http://rutube.ru/video/person/12154/
     
  4. nikolas1612

    nikolas1612 Member Пользователи

    Регистрация:
    27 ноя 2011
    Сообщения:
    439
    есть
    вот на эти строки обратите внимание -
    222 GET 200 application/json Ссылки недоступны для гостейpage=2&sort=
    ...................................
    Ссылки недоступны для гостейpage=3&sort=
    ...................................
    и т.д.
    вроде это тот самый переход
     

Поделиться этой страницей