Не догружает все фото

Тема в разделе "Подгрузка данных, которых нет в коде WEB-документа", создана пользователем Krench, 26 мар 2020.

  1. Krench

    Krench New Member Пользователи

    Регистрация:
    26 мар 2020
    Сообщения:
    10
    Добрый день!
    Програма не догружает все фото товара, которые есть на сайте.
    Смотрите примеры с программы и браузера.
    Версия продукта:11.1.1110084
    Помогите, пожалуйста, разобраться.
     

    Вложения:

    Последнее редактирование: 26 мар 2020
  2. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    12.562
    Здравствуйте.

    Раз вы говорите про обновления, как и почти все.

    Установите предыдущую версию программы из папки c:\Content_Downloader\updates и напишите, в какой версии у вас все в порядке с этим.
     
  3. Krench

    Krench New Member Пользователи

    Регистрация:
    26 мар 2020
    Сообщения:
    10
    ---------------------
    Перепробовал все версии что были, но результата не достигнул.
    Такие версии были :
    cd_install_1111110081.exe
    cd_install_1111110083.exe
    cd_install_1111110084.exe
    Помогите, пожалуйста.
     
  4. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    12.562
    Дело не в обновлении.

    Сейчас в инструменте задания границ парсинга используется устаревший Internet Explorer. Он может некорректно отображать современные сайты. Данный браузер при парсинге не участвует. Все фотографии должны быть в коде.
     
  5. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    12.562
    При открытии данной ссылки в Chrome и Firefox наблюдается следующая картина:

    2020-03-26_17-05-04.png

    Чем обусловлено такое поведение сайта - мне неизвестно. Нужно разбираться, но это делать не буду.
     
  6. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    12.562
    Открыл данную ссылку на другом ПК с другой OS - то же самое: 3 изображения товара.
     
  7. Krench

    Krench New Member Пользователи

    Регистрация:
    26 мар 2020
    Сообщения:
    10
    В скрине "с_программы_скрин.jpg" есть дерево с названием "images" это из браузера получается инфа ?
     
  8. Krench

    Krench New Member Пользователи

    Регистрация:
    26 мар 2020
    Сообщения:
    10
    В коде этих фото так же нет. Подскажите хоть куда копать в такой ситуации ?
     
  9. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    12.562
    Я не знаю, почему сайт отдает так картинки.
     
  10. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    12.562
    Если у вас в каком-то браузере все картинки отображаются, возьмите из него HTTP заголовки и вставьте их в окно ctrl+h.
     
  11. Krench

    Krench New Member Пользователи

    Регистрация:
    26 мар 2020
    Сообщения:
    10
    Вот таким хожу Mozilla/5.0 (Windows NT 10.0; Win64; x64; rv:74.0) Gecko/20100101 Firefox/74.0
    и работает в браузере, через ПО в ручную пару раз получилось и всё.
    И да, експлорер и хром так же отображают не верно.
     
  12. Krench

    Krench New Member Пользователи

    Регистрация:
    26 мар 2020
    Сообщения:
    10
    С этой страницы
    Код с браузера, где есть все фото.
    HTTP заголовк (Mozilla/5.0 (Windows NT 10.0; Win64; x64; rv:74.0) Gecko/20100101 Firefox/74.0)

    Ссылки на фото с кода от мазилы:
    Ссылки недоступны для гостей, зарегистрируйтесь или авторизуйтесь на форуме!
    Ссылки недоступны для гостей, зарегистрируйтесь или авторизуйтесь на форуме!
    Ссылки недоступны для гостей, зарегистрируйтесь или авторизуйтесь на форуме!
    Ссылки недоступны для гостей, зарегистрируйтесь или авторизуйтесь на форуме!
    Ссылки недоступны для гостей, зарегистрируйтесь или авторизуйтесь на форуме!
    Ссылки недоступны для гостей, зарегистрируйтесь или авторизуйтесь на форуме!
    =====================================================
    Ссылки на фото с кода от проги
    Ссылки недоступны для гостей, зарегистрируйтесь или авторизуйтесь на форуме!
    Ссылки недоступны для гостей, зарегистрируйтесь или авторизуйтесь на форуме!
    Ссылки недоступны для гостей, зарегистрируйтесь или авторизуйтесь на форуме!

    Файл кода страницы с браузера и программы прикрепляю.
    Подскажите, как сделать, чтобы можно было видеть все ссылки на фото.
    Раз у меня браузер показывает значит и через программу можно сделать, не врею, что нельзя.
    Скидываю скрин с настройками.

    Помогите, плиз.
     

    Вложения:

    Последнее редактирование: 27 мар 2020
  13. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    12.562
    У меня на двух ПК, как в Firefox, так и в Chrome тоже не отображаются все картинки. Это вопросы к работе сайта.
     
  14. Krench

    Krench New Member Пользователи

    Регистрация:
    26 мар 2020
    Сообщения:
    10
    Я вам показываю на своем браузере. Я ж не выдумую.
     
  15. Krench

    Krench New Member Пользователи

    Регистрация:
    26 мар 2020
    Сообщения:
    10
    Получилось сделать вывод в код.
    С такими параметрами:
    HTTP заголовк (Mozilla/5.0 (Linux; Android 6.0; Nexus 5 Build/MRA58N) AppleWebKit/537.36 (KHTML, like Gecko) Chrome/80.0.3987.132 Mobile Safari/537.36)
     

    Вложения:

    • ok_1.png
      ok_1.png
      Размер файла:
      283,9 КБ
      Просмотров:
      6
  16. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    12.562
    Ну вот, отлично.
     
  17. Krench

    Krench New Member Пользователи

    Регистрация:
    26 мар 2020
    Сообщения:
    10
    Ну не все так хорошо.
    Работает не стабильно и не пойму в чем прикол.
    Открываю первый раз после настройки все, ок, открываю второй раз снова не все фото.
    Может есть какие-то еще поднастройки ?
     
  18. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    12.562
    Повторяю, я не знаю, как работает данный сайт. Не знаю, почему он проявляет такое поведение. У меня на двух ПК в разных браузерах также товар отображается без всех фото.
     
  19. napserious

    napserious Well-Known Member Пользователи Активирован

    Регистрация:
    16 окт 2015
    Сообщения:
    324
    Странно, у меня все картинки подгружаются без каких либо изменений в Headers, Useragent и т.д. Просто создал новый проект.

    Только я не понимаю что за границы вы используете для парсинга. У меня, я вывел все картинки совсем другой повторяющееся границей:
    Код:
    img alt="Product View" src="
    upload_2020-3-27_12-51-11.png
     
    kagorec нравится это.
  20. Krench

    Krench New Member Пользователи

    Регистрация:
    26 мар 2020
    Сообщения:
    10
    Работает не стабильно.

    "Только я не понимаю что за границы вы используете для парсинга. У меня, я вывел все картинки совсем другой повторяющееся границей:"
    Дело не в границах, а в том, что в коде нет ВСЕХ ссылок на фото.

    Кликаю по ссылке чтобы просмотреть в CSV. Первый раз - ок, Второй -не хватает фоток, Третий раз- не хватает фоток, Четвертый - ок.
    Вот видео подтвеждение Ссылки недоступны для гостей, зарегистрируйтесь или авторизуйтесь на форуме!
    Ну чудес же не бывает
     
    Последнее редактирование: 27 мар 2020

Поделиться этой страницей