Не собирает ссылки

Тема в разделе "Парсинг во вкладке "Ссылки"", создана пользователем anzhelika-u, 31 мар 2015.

  1. anzhelika-u

    anzhelika-u New Member Пользователи

    Регистрация:
    31 мар 2015
    Сообщения:
    7
    Добрый день! Помогите пожалуйста, не могу собрать ссылки.

    Стартовый URL
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
    Ещё ставлю галочку в Добавлять в очередь только ссылки с: product
    т.к. очень много не нужного качает.

    Но он качает только 109 позиций, и то не то что нужно. Качает: forum, blog, cart и др.
     
    Последнее редактирование модератором: 31 мар 2015
    anzhelika-u, 31 мар 2015
    #1
  2. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Здравствуйте.

    Материал системы помощи Ссылки недоступны для гостей в полной мере раскрывает принцип работы сканера сайтов.

    К сообщению прилагаю настроенный проект для сбора ссылок с указанного вами сайта (меню - файл - загрузить проект).

    С уважением к вам, Сергей...
     

    Вложения:

    • scaner.cdp
      Размер файла:
      26,5 КБ
      Просмотров:
      14
    Root, 31 мар 2015
    #2
  3. anzhelika-u

    anzhelika-u New Member Пользователи

    Регистрация:
    31 мар 2015
    Сообщения:
    7
    Спасибо большое! Разобралась.
     
    anzhelika-u, 2 апр 2015
    #3
  4. anzhelika-u

    anzhelika-u New Member Пользователи

    Регистрация:
    31 мар 2015
    Сообщения:
    7

    Подскажите ещё пожалуйста. Мне нужно чтоб распределял товар по категориям: Фурнитура для бижутерии, Алмазная мозаика, квилинг и т.д. Как правильно задать границу парсинга?

    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
     
    anzhelika-u, 2 апр 2015
    #4
  5. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Здравствуйте.

    Нужен адрес WEB-страницы чтобы видеть все нюансы и помочь вам.

    С уважением к вам, Сергей...
     
    Root, 2 апр 2015
    #5
  6. anzhelika-u

    anzhelika-u New Member Пользователи

    Регистрация:
    31 мар 2015
    Сообщения:
    7
    Пожалуйста:
    Скрытое содержимое:
    **Скрытое содержимое: доступно при наличии 1 постов.**
     
    anzhelika-u, 2 апр 2015
    #6
  7. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Пожалуйста. Меню - файл - загрузить проект.
     

    Вложения:

    Root, 2 апр 2015
    #7
  8. anzhelika-u

    anzhelika-u New Member Пользователи

    Регистрация:
    31 мар 2015
    Сообщения:
    7
    :sun::sun::sun: У меня всё получилось!!! СПАСИБО!!!
     
    anzhelika-u, 2 апр 2015
    #8
  9. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Пожалуйста. Рады помочь! обращайтесь...
     
    Root, 2 апр 2015
    #9
  10. Марат

    Марат New Member Пользователи

    Регистрация:
    11 май 2015
    Сообщения:
    3
    Доброго времени суток!
    Не получается парсить ссылки с avito и с reformagkh.ru. Сканер сайтов запускается и практически сразу останавливается с пустым списком. IE 11 установил. Может проблемы с авторизацией? Где посмотреть полноценную инструкцию с описанием как авторизовываться с помощью cookies post или с помощью proxy?

    Вопрос 2. Что делать если при задании границ парсинга вышла ошибка «Программе не удалось загрузить WEB-страницу (Socket Error # 0 )»?

    заранее благодарю за ответ
     
    Марат, 11 май 2015
    #10
  11. kagorec

    kagorec Администратор Команда форума Администратор

    Регистрация:
    3 янв 2011
    Сообщения:
    4.433
    Адрес:
    Latvia
    Авито как раз нежелательно сканером собирать - получите бан еще до парсинга.
    reformagkh.ru пробуйте с включенной обработкой DOM для сканера (в ctrl+h)
     
    kagorec, 11 май 2015
    #11
  12. Bumblefoot

    Bumblefoot New Member Пользователи

    Регистрация:
    21 май 2015
    Сообщения:
    2
    Добрый день.
    Только начал пользоваться программой и столкнулся с проблемой.
    Все делал, как в видео "Парсинг ссылок на товары или статьи с определенной рубрики сайта"
    musicart.by
    1. Сгенерировал ссылки на страницы категории (проверил, программа идет по ним куда надо).
    2. При попытке получить ссылки на товары, я получаю ссылки только из первой страницы категории. Это происходит даже если удалить ссылку на эту первую страницу.
    [​IMG]
     
    Bumblefoot, 21 май 2015
    #12
  13. kagorec

    kagorec Администратор Команда форума Администратор

    Регистрация:
    3 янв 2011
    Сообщения:
    4.433
    Адрес:
    Latvia
    Собирайте тогда сканером ссылки, пример настраивания сканера в проекте, пробуйте.
     

    Вложения:

    kagorec, 21 май 2015
    #13
  14. Bumblefoot

    Bumblefoot New Member Пользователи

    Регистрация:
    21 май 2015
    Сообщения:
    2
    kagorec, спасибо! Уже сам покопался и у меня получилось со сканером нечто подобное.
     
    Bumblefoot, 21 май 2015
    #14
Similar Threads
  1. yuzi

    Как сканить ссылки категорий сайта fotos.ua?

    yuzi, 19 сен 2013, в разделе: Парсинг конкретных сайтов по запросу (ПЛАТНО)
    Ответов:
    4
    Просмотров:
    2.413
    Liooon
    21 авг 2015
  2. Marichka

    Не собирает ссылки

    Marichka, 2 окт 2014, в разделе: Парсинг во вкладке "Ссылки"
    Ответов:
    37
    Просмотров:
    5.038
    Liooon
    12 июл 2015
  3. Марат

    Парсер сайтов не собирает ссылки

    Марат, 13 май 2015, в разделе: Парсинг во вкладке "Ссылки"
    Ответов:
    2
    Просмотров:
    1.164
    kagorec
    13 май 2015
  4. Влад780

    сканер не собирает ссылки с авито!

    Влад780, 1 июл 2015, в разделе: Парсинг конкретных сайтов по запросу (ПЛАТНО)
    Ответов:
    8
    Просмотров:
    1.479
    Root
    13 авг 2015
  5. Vladyslav

    Не собирает ссылки с сайта https_aa.mail_ru/forums/

    Vladyslav, 27 авг 2015, в разделе: Парсинг во вкладке "Ссылки"
    Ответов:
    3
    Просмотров:
    1.288
    Root
    12 ноя 2015
Загрузка...

Поделиться этой страницей