При парсинге avito не подгружается контент

Тема в разделе "Решение проблем с использованием программы", создана пользователем koleso62, 25 апр 2014.

  1. koleso62

    koleso62 New Member Пользователи

    Регистрация:
    28 янв 2013
    Сообщения:
    29
    Здравствуйте! У меня следующая проблема, при парсинге avito, до конца не подгружается контент и в частности картинка с номером телефона. Я и уменьшил приоритет потоков(lower и lowest), и увеличивал таймаут проверки загрузки web-документа до 3000 мс но все напрасно, бОльшая часть изображений не загружается и программа дико виснет (ОС Windows Pro x64), установлен IE 11, все актуальные обновления Windows установлены, фаерволов нету.В WebApp события срабатывают нормально, а вот при парсинге, и изменял кол-во потоков с 10 до 1, ситуация не изменилась. Для наглядности прилагаю видео Ссылки недоступны для гостей. Подскажите пожалуйста, в чем может быть проблема? Спасибо!
     
  2. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    13.534
    Город:
    Барнаул
    Здравствуйте.
    Висит браузер в окне предпросмотра, когда вы включаете там скрипты - этого делать не нужно.
    Уверяю, код картинки номера есть! Вам нужно просто его найти в инструменте задания границ парсинга ctrl+f1, ориентируясь по коду (код отображается в верхней части инструмента задания границ парсинга).
    Повторяю, включать скрипты в предпросмотре не нужно! =)
    С уважением к вам, Сергей.
     
  3. koleso62

    koleso62 New Member Пользователи

    Регистрация:
    28 янв 2013
    Сообщения:
    29
    Хорошо, то что скрипты не надо включать я понял, но когда я открываю окно задания границ парсинга (Ctrl+F1) телефон почему то не открывается, код картинки с телефоном такой
    HTML:
    <span class="phone"><img src="/items/phone /ryazan_predlozheniya_uslug_gruzchiki._gruzim_vozim_nosim_322462261?pkey=82ddc629eaaab0b6ff8bbded9fde0cef"></span> <div class="alert alert-info" style="display: inline-block;"> <i class="i i-info"></i>
    
    и поэтому нету в коде открытого номера телефона чтобы задать для него границы парсинга чтобы спарсить. Несколько раз пересмотрел первое видео на Ссылки недоступны для гостей все по нему и делал, но почему то у меня номер телефона не открывается а так и находится "под кнопкой "Показать номер"". Подскажите пожалуйста, что я делаю не так? . Спасибо!
     
  4. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    13.534
    Город:
    Барнаул
    Вам не нужно смотреть в браузер внизу. Он живет отдельной жизнью...
    Вам нужно смотреть КОД ВВЕРХУ.
    Вот в нем картинка /items/phone /ryazan_predlozheniya_uslug_gruzchiki._gruzim_vozim_nosim_322462261?pkey=82ddc629eaaab0b6ff8bbded9fde0cef
    Задавайте для нее границу парсинга и грузите ее на диск, взяв в <NIMG>...</NIMG>
     
  5. koleso62

    koleso62 New Member Пользователи

    Регистрация:
    28 янв 2013
    Сообщения:
    29
    Спасибо большое Сергей, Вам за помощь! Получилось спарсить картинки с телефонами. Авитовцы конечно извращенцы, телефоны картинками делать. Теперь придется картинки в текст преобразовывать прогой для распознавания текста )) В качестве пожелания, если Вы сделаете урок или напишите мануал по использованию макроса [WBAPP] то я буду Вам признателен, а то я решил сегодня понять как он работает, но к сожалению не получилось. Еще раз, спасибо Вам за помощь!
     
  6. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    13.534
    Город:
    Барнаул
    Пожалуйста...

    Да, "поизвращались" они на славу =)

    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
    Вы же вроде как его смотрели и комментировали даже.
    Вот он урок Ссылки недоступны для гостей
     
  7. koleso62

    koleso62 New Member Пользователи

    Регистрация:
    28 янв 2013
    Сообщения:
    29
    Точно, у меня почему то в голове отложилось что урок про постинг в WP но не отложилось какими это инструментами достигалось ))
     
  8. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    13.534
    Город:
    Барнаул
    Вызвали из шаблона вывода WBApp макросом [WBAPP] с передачей ему данных и запостили их в WP.
     

Поделиться этой страницей