Как парсить avito?

Тема в разделе "Парсинг конкретных сайтов по запросу (ПЛАТНО)", создана пользователем alex11, 17 фев 2013.

  1. alex11

    alex11 New Member Пользователи

    Регистрация:
    17 фев 2013
    Сообщения:
    6
    Доброго времени суток. Кто парсил авито? Например, ссылка для парсинга Ссылки недоступны для гостей Как можно спарсить объявление полностью, а не только заголовок?
     
  2. redfox

    redfox New Member Пользователи

    Регистрация:
    18 фев 2013
    Сообщения:
    35
    Собирайте ссылки на объявления, а уже с объявлений полностью берете что нужно.
     
  3. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    И, сдается мне, телефонные номера с Авито не спарсить.
     
  4. alex11

    alex11 New Member Пользователи

    Регистрация:
    17 фев 2013
    Сообщения:
    6
    То есть как я понял, в любом случае придется ручками копировать ссылки и из них выдирать объявления?
     
  5. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Я не знаю как вам удобнее.
    С Авито взять номера очень сложно (и я пока даже браться за это не буду) так как там очень хорошо поработали над защитой, но ссылки на объявления и прочая информация легко парсятся.
     
  6. redfox

    redfox New Member Пользователи

    Регистрация:
    18 фев 2013
    Сообщения:
    35
    zennoposter справится :)
     
  7. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Вот уж не думаю... Откуда информация? Пробовали разве? Или так, предположили?
     
  8. Djahat

    Djahat Well-Known Member Пользователи

    Регистрация:
    14 янв 2013
    Сообщения:
    543
    Город:
    Мордор
    А если не секрет - какая основная преграда перед парсингом ?
     
  9. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Картинка с номером загружается только при передаче спец кода, который сложно расшифровать и воссоздать.
     
  10. redfox

    redfox New Member Пользователи

    Регистрация:
    18 фев 2013
    Сообщения:
    35
    Только теоретически я на стадии изучения. Зенно эмулирует работу с браузером тоесть можно создать команду нажатия кнопки и полученый текст парсить.
    Из описания
    Система эмуляции человека
    Поддержка управления браузером из своего кода
     
  11. Djahat

    Djahat Well-Known Member Пользователи

    Регистрация:
    14 янв 2013
    Сообщения:
    543
    Город:
    Мордор
    даешь челоимитатор!
     
  12. Djahat

    Djahat Well-Known Member Пользователи

    Регистрация:
    14 янв 2013
    Сообщения:
    543
    Город:
    Мордор
    А вообще это возможно - сделать клик по координатам на странице - ведь кнопка в одном и том же месте всегда ? таким образом нельзя сделать ?
     
  13. alamina.moon

    alamina.moon Модератор Команда форума Модератор

    Регистрация:
    14 янв 2013
    Сообщения:
    214
    подписываюсь, но придется пое.... ись!
     
    Последнее редактирование: 25 фев 2013
  14. alamina.moon

    alamina.moon Модератор Команда форума Модератор

    Регистрация:
    14 янв 2013
    Сообщения:
    214
    А вообще сейчасас попробовал, получилось распарсить авито без каких либо проблем.. 2 минуты потратил :) и телефоны нормально парсятся ;)
    Кому надо решение продам, могу даже проект не делать ) сами сможете ) все очень просто
    icq 60202000 пишите с 10 до 19 часов ) вечером могу не ответить, но не беспокойтесь, как только буду у компьютера, сразу же Вам отпишусь.

    Если что моя тема: http://forum.sbfactory.ru/showthread.php?t=710

    PS. Все таки CD - уникальная программа, я лично доволен как слон. ЗенноПостер с его кучей багов и корявым интерфейсом рядом не стоял. CD по качеству сравним с Зеброидом, я бы на месте разработчика вообще бы ввел полугодовую абонентку ну или помесячную... За такой софт и денег не жалко платить... однозначно! Спасибо Вам уважаемый Сергей Владимирович за Content Downloader!

    И чтоб не быть голословным ) вот файл небольшой спаршенный только что с авито ) по тему мужских сорочек в москве ну вы поймете ) Ссылки недоступны для гостей
     
    Последнее редактирование: 25 фев 2013
  15. kagorec

    kagorec Администратор Команда форума Администратор

    Регистрация:
    3 янв 2011
    Сообщения:
    4.433
    Адрес:
    Latvia
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 10 постов.**
     
    Последнее редактирование: 26 янв 2014
  16. bowman

    bowman New Member Пользователи

    Регистрация:
    10 окт 2012
    Сообщения:
    10
    При парсинге авито мой компьютер получил бан. Уже больше суток.... похоже это на долго. Подключил AdvOR - данные отлично тянутся, но телефоны перестали парсится. Вместо номеров получаю XXXXXXX. Скажите, если я подключу прокси - будет ли парсинг работать? Есть ли варианты обхода такой проблемы?
     
  17. maxon

    maxon New Member Пользователи

    Регистрация:
    5 май 2013
    Сообщения:
    2
    У меня вопрос, схожий с вопросом bowman. Тоже про телефоны с m.avito.ru, тоже забанен ip. Использую прокси-лист, все данные достаются хорошо, КРОМЕ телефона. Он просто остаётся пустым. Достаю его с помощью <GETMORECONTENT>. Такое ощущение, что этот макрос не использует прокси(( Эту проблему можно как-то решить?
     
  18. Ivanov_vik

    Ivanov_vik New Member Пользователи

    Регистрация:
    18 янв 2013
    Сообщения:
    1
    Вы побольше об этом болтайте, новую лазейку искать придется.
     
  19. Нуб

    Нуб New Member Пользователи

    Регистрация:
    30 июн 2014
    Сообщения:
    5
    Авито.научу парсить

    любая доступная инфа из авито.
     
  20. kagorec

    kagorec Администратор Команда форума Администратор

    Регистрация:
    3 янв 2011
    Сообщения:
    4.433
    Адрес:
    Latvia
    Разработчик давно на видео подробно рассказал и показал как парсить телефоны авито.
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
    - Парсинг телефонных номеров с Авито в виде текста (парсинг информации, которая подгружается при клике на кнопку)
     

Поделиться этой страницей