Изменения на сайте донора, отслеживание

Тема в разделе "Парсинг конкретных сайтов по запросу (ПЛАТНО)", создана пользователем TimkaZlt, 9 май 2017.

  1. TimkaZlt

    TimkaZlt New Member Пользователи

    Регистрация:
    8 май 2017
    Сообщения:
    3
    1. Подскажите, может ли программа отслеживать изменения на сайте донора, либо в csv файле и в папке с изображениями? Сайт донора содержит 25000 наименований, и каждый раз они добавляются и убавляются, меняется цена либо наличие на складе. Приходится качать сайт 2 раза в день целиком. так скоро с ума сойти можно.
    2. Если у программы проверка наличия картинок с таким же наименованием в папке, т.к. она каждый раз скачивает картинки по-новому и переименовывает их (допустим 12345.jpg и создаёт 12345_1.jpg), по Ctrl+9, я отключил переименование, но ситуация не изменилась. Отключить границы скачивания фото не могу, потому что каждый день могут появляться новые позиции. Может ли программа проверять скачивать только новые картинки.
     
  2. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Здравствуйте.

    1) Чтобы отследить изменения так и так придется загружать страницы сайта для проверки наличия изменений, так что - какая разница)
    2) Постараемся добавить эту опцию
     
  3. TimkaZlt

    TimkaZlt New Member Пользователи

    Регистрация:
    8 май 2017
    Сообщения:
    3
    Разница всё-таки есть... если позиции в каталоге у донора допустим 50 000, программа по-новому скачивает все изображения, а если бы была какая-то синхронизация:
    1. то программа проверяла бы ссылки и видела что эта позиция уже есть, просто изменилась цена. то он скачает просто позицию с ценой, без описания и изображения
    2. если же она увидит, что такая позиция есть и она без изменений, то соответственно пропустит её...
    3. если увидит новую позицию- скачает..
    Кучу экономии времени и нервов..
     
  4. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Ну вам, наверное, виднее.
     
  5. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
     

Поделиться этой страницей