Не могу получить код сайта! Вижу только графическую оболочку.

Тема в разделе "Парсинг конкретных сайтов по запросу (ПЛАТНО)", создана пользователем Фёдор, 21 июл 2014.

  1. Фёдор

    Фёдор Active Member Пользователи

    Регистрация:
    9 фев 2014
    Сообщения:
    167
    -Видишь код?
    -Нет.
    -А он есть..
    Или нет?
    Ребята спасайте! У меня ситуация нехорошая получилась!
    Человек спрашивал смогу ли я проект написать для парсинга сайта вот ентого вот Ссылки недоступны для гостей
    Я глянул одним глазком на ТЗ, потом одним глазком на сайт и сказал за сколько сделаю.
    По цене сошлись.
    Заказчик исходя из этого приобрел программу алтимэйт версии..
    Когда руки дошли до написания проекта и досконального изучения сайта я с разочарованием обнаружил что код страниц извлечь не получается никак.
    Графика есть, а кода нет..
    Включал DOM пробовал загружать страницы через wbapp и добавлять полученный код -тщетно.
    Сайт весь на скриптах построен. Как его парсить? Вообще не пойму. Файл проекта и вбапп прилагаю.
     

    Вложения:

  2. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Вот у вас в проекте ссылка
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
    Вы ее в браузере открывали? Пустая страница и открывается...
    Что вообще парсить нужно - непонятно...
     
  3. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    На том сайте есть форма поиска. Вот, к примеру, ввожу туда 2 и появляется 383 страницы с товарами.
    Думаю, проще в WBApp вводить туда поисковое слово и прокликивать по всем страницам...
     
  4. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    В общем скажите ему, чтобы писал мне в Skype, я верну ему деньги за программу. Связываться с этим сайтом не хочу и не собираюсь! =)
     
  5. Фёдор

    Фёдор Active Member Пользователи

    Регистрация:
    9 фев 2014
    Сообщения:
    167
    Хорошо. Понял.
    Спасибо Сергей. Я тоже думаю что геморроя от работы с этим сайтом не оберешься. Тем более не понятно получится ли все таки все поставленные задачи выполнить.
     
  6. Волшебница

    Волшебница New Member Пользователи

    Регистрация:
    7 авг 2014
    Сообщения:
    43
    Сергей, посмотрите плиз еще такой сайт
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
    там на каждый товар открывается всплывающее окно - как его парсить?
     
  7. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Здравствуйте.

    Данные товаров нужно парсить с таких вот ссылок:
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
    Где ELEMENT_ID - ID товара.

    ID каждого товара можно парсить из кода страницы, которую вы показали:
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
    Дальше, думаю, знаете, что делать. Если нет, пожалуйста, спрашивайте...
     
  8. Волшебница

    Волшебница New Member Пользователи

    Регистрация:
    7 авг 2014
    Сообщения:
    43
    оооо, классс, спс
     
  9. Волшебница

    Волшебница New Member Пользователи

    Регистрация:
    7 авг 2014
    Сообщения:
    43
    сканер не выдает ссылки такого вида(
     
  10. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Сканер сайтов - инструмент, предназначенный для парсинга гиперссылок. Гиперссылок со страницами товаров на этом сайте нет. Как их парсить - смотрите прикрепленный проект (парсинг во вкладке "контент")
     

    Вложения:

  11. Волшебница

    Волшебница New Member Пользователи

    Регистрация:
    7 авг 2014
    Сообщения:
    43
    т.е. сначала сканером получить ссылки каталога, потом их парсить Вашим проектом для получения нужных ссылок, а потом полученные ссылки уже на предмет нужной информации? или как-то разом это можно сделать?
     
  12. Kreol

    Kreol Модератор Команда форума Модератор

    Регистрация:
    6 янв 2013
    Сообщения:
    2.666
    ---
     
    Последнее редактирование модератором: 12 авг 2014
  13. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Вот поэтому задачу нужно сразу четко и ясно говорить, чтобы мы 100 раз не переделывали и не делали бесполезной работы
     
  14. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Самый лучший вариант для этого сайта - парсить сразу по сгенерированному списку товаров (произойдет перебор всех возможных ID товаров, несуществующие на сайте товары просто не попадут в результат).
    Смотрите файл проекта, если что-то непонятно - пожалуйста, спрашивайте.
     

    Вложения:

  15. hut666

    hut666 New Member Пользователи

    Регистрация:
    11 янв 2015
    Сообщения:
    12
    Здравствуйте. Помогите разобраться

    сайт:
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
    каждый товар открывается в всплыв.окне . гиперссылки на товар нет. Как мне парсить все товары? все данные о товаре и все картинки.
     
  16. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Здравствуйте.

    Парсить товары с таких вот ссылок:
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
    ID товаров есть в коде указанной вами WEB-страницы.
     
  17. hut666

    hut666 New Member Пользователи

    Регистрация:
    11 янв 2015
    Сообщения:
    12
    Спасибо
     

Поделиться этой страницей