Не догружает все фото

Тема в разделе "Подгрузка данных, которых нет в коде WEB-документа", создана пользователем Krench, 26 мар 2020.

  1. Krench

    Krench New Member Пользователи

    Регистрация:
    26 мар 2020
    Сообщения:
    10
    Добрый день!
    Програма не догружает все фото товара, которые есть на сайте.
    Смотрите примеры с программы и браузера.
    Версия продукта:11.1.1110084
    Помогите, пожалуйста, разобраться.
     

    Вложения:

    Последнее редактирование: 26 мар 2020
  2. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Здравствуйте.

    Раз вы говорите про обновления, как и почти все.

    Установите предыдущую версию программы из папки c:\Content_Downloader\updates и напишите, в какой версии у вас все в порядке с этим.
     
  3. Krench

    Krench New Member Пользователи

    Регистрация:
    26 мар 2020
    Сообщения:
    10
    ---------------------
    Перепробовал все версии что были, но результата не достигнул.
    Такие версии были :
    cd_install_1111110081.exe
    cd_install_1111110083.exe
    cd_install_1111110084.exe
    Помогите, пожалуйста.
     
  4. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Дело не в обновлении.

    Сейчас в инструменте задания границ парсинга используется устаревший Internet Explorer. Он может некорректно отображать современные сайты. Данный браузер при парсинге не участвует. Все фотографии должны быть в коде.
     
  5. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    При открытии данной ссылки в Chrome и Firefox наблюдается следующая картина:

    2020-03-26_17-05-04.png

    Чем обусловлено такое поведение сайта - мне неизвестно. Нужно разбираться, но это делать не буду.
     
  6. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Открыл данную ссылку на другом ПК с другой OS - то же самое: 3 изображения товара.
     
  7. Krench

    Krench New Member Пользователи

    Регистрация:
    26 мар 2020
    Сообщения:
    10
    В скрине "с_программы_скрин.jpg" есть дерево с названием "images" это из браузера получается инфа ?
     
  8. Krench

    Krench New Member Пользователи

    Регистрация:
    26 мар 2020
    Сообщения:
    10
    В коде этих фото так же нет. Подскажите хоть куда копать в такой ситуации ?
     
  9. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Я не знаю, почему сайт отдает так картинки.
     
  10. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Если у вас в каком-то браузере все картинки отображаются, возьмите из него HTTP заголовки и вставьте их в окно ctrl+h.
     
  11. Krench

    Krench New Member Пользователи

    Регистрация:
    26 мар 2020
    Сообщения:
    10
    Вот таким хожу Mozilla/5.0 (Windows NT 10.0; Win64; x64; rv:74.0) Gecko/20100101 Firefox/74.0
    и работает в браузере, через ПО в ручную пару раз получилось и всё.
    И да, експлорер и хром так же отображают не верно.
     
  12. Krench

    Krench New Member Пользователи

    Регистрация:
    26 мар 2020
    Сообщения:
    10
    С этой страницы
    Код с браузера, где есть все фото.
    HTTP заголовк (Mozilla/5.0 (Windows NT 10.0; Win64; x64; rv:74.0) Gecko/20100101 Firefox/74.0)

    Ссылки на фото с кода от мазилы:
    Ссылки недоступны для гостей
    Ссылки недоступны для гостей
    Ссылки недоступны для гостей
    Ссылки недоступны для гостей
    Ссылки недоступны для гостей
    Ссылки недоступны для гостей
    =====================================================
    Ссылки на фото с кода от проги
    Ссылки недоступны для гостей
    Ссылки недоступны для гостей
    Ссылки недоступны для гостей

    Файл кода страницы с браузера и программы прикрепляю.
    Подскажите, как сделать, чтобы можно было видеть все ссылки на фото.
    Раз у меня браузер показывает значит и через программу можно сделать, не врею, что нельзя.
    Скидываю скрин с настройками.

    Помогите, плиз.
     

    Вложения:

    Последнее редактирование: 27 мар 2020
  13. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    У меня на двух ПК, как в Firefox, так и в Chrome тоже не отображаются все картинки. Это вопросы к работе сайта.
     
  14. Krench

    Krench New Member Пользователи

    Регистрация:
    26 мар 2020
    Сообщения:
    10
    Я вам показываю на своем браузере. Я ж не выдумую.
     
  15. Krench

    Krench New Member Пользователи

    Регистрация:
    26 мар 2020
    Сообщения:
    10
    Получилось сделать вывод в код.
    С такими параметрами:
    HTTP заголовк (Mozilla/5.0 (Linux; Android 6.0; Nexus 5 Build/MRA58N) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/80.0.3987.132 Mobile Safari/537.36)
     

    Вложения:

    • ok_1.png
      ok_1.png
      Размер файла:
      283,9 КБ
      Просмотров:
      7
  16. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Ну вот, отлично.
     
  17. Krench

    Krench New Member Пользователи

    Регистрация:
    26 мар 2020
    Сообщения:
    10
    Ну не все так хорошо.
    Работает не стабильно и не пойму в чем прикол.
    Открываю первый раз после настройки все, ок, открываю второй раз снова не все фото.
    Может есть какие-то еще поднастройки ?
     
  18. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Повторяю, я не знаю, как работает данный сайт. Не знаю, почему он проявляет такое поведение. У меня на двух ПК в разных браузерах также товар отображается без всех фото.
     
  19. napserious

    napserious Well-Known Member Пользователи Активирован

    Регистрация:
    16 окт 2015
    Сообщения:
    324
    Странно, у меня все картинки подгружаются без каких либо изменений в Headers, Useragent и т.д. Просто создал новый проект.

    Только я не понимаю что за границы вы используете для парсинга. У меня, я вывел все картинки совсем другой повторяющееся границей:
    Код:
    img alt="Product View" src="
    upload_2020-3-27_12-51-11.png
     
    kagorec нравится это.
  20. Krench

    Krench New Member Пользователи

    Регистрация:
    26 мар 2020
    Сообщения:
    10
    Работает не стабильно.

    "Только я не понимаю что за границы вы используете для парсинга. У меня, я вывел все картинки совсем другой повторяющееся границей:"
    Дело не в границах, а в том, что в коде нет ВСЕХ ссылок на фото.

    Кликаю по ссылке чтобы просмотреть в CSV. Первый раз - ок, Второй -не хватает фоток, Третий раз- не хватает фоток, Четвертый - ок.
    Вот видео подтвеждение Ссылки недоступны для гостей
    Ну чудес же не бывает
     
    Последнее редактирование: 27 мар 2020

Поделиться этой страницей