Парсинг из результата поиска по критериям

Тема в разделе "Парсинг конкретных сайтов по запросу (ПЛАТНО)", создана пользователем Globomen, 30 мар 2017.

  1. Globomen

    Globomen Member Пользователи

    Регистрация:
    30 янв 2017
    Сообщения:
    21
    Здравствуйте!
    Передо мной встала нестандартная задача, пока "мозга" (опыта) не хватает чтоб её самому осилит, обо всем по порядку.

    Есть прайс на 13+ т. позиций, есть сайт где это все есть для "парсинга", но у "донора" на сайте больше представлено позиции (старые модели), в довесок каждая позиция выводится как результат поиска.

    Задача №1: С помощью сканера сайтов, отфильтровать сайт и собрать только те ссылки, которые есть в прайсе.
    Задача №2. Собрать всю информацию с карточек товаров в .CVS, данных очень много.

    Ссылки недоступны для гостей
    Ссылки недоступны для гостей
    Достаточно "пнуть" в нужную статью справки, сам не нашел. Первая запинка, как собрать ссылки, как парсить из результата, более менее понятно. Судя по sitemap-у там более млн. страниц, а надо только 13000+ страниц, вот этот момент меня смущает.

    Из справки (может что-то не до понял): Ссылки недоступны для гостей
    Не мой случай, поле пойска по артикулу не работает, по названию тоже, сам не понял почему. Логично просто запустить "паука" по всем страницам с фильтрацией по артикулу или названию, но эти данные в контенте хранятся, получается нужно "парсить" весь сайт, жуть...

    Заранее, Спасибо!
     
    Последнее редактирование: 30 мар 2017
  2. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Здравствуйте.

    Как видим тут Ссылки недоступны для гостей - вариантов два. Не нужно ничего изобретать, используйте второй вариант, раз первый не подошел.
     
    Globomen нравится это.

Поделиться этой страницей