Парсится не весь сайт, причем каждый раз выдает разное количество товаров

Тема в разделе "Решение проблем с использованием программы", создана пользователем OduvanCHeG, 11 апр 2012.

  1. OduvanCHeG

    OduvanCHeG New Member Пользователи

    Регистрация:
    11 апр 2012
    Сообщения:
    1
    Проблема в следующем, включил фильтр ссылок, программа отобрала мне 104 ссылки, настраиваю все границы, все потоки и прочее-прочее, запускаю парсинг - на выходе получаю файл с 86 товарами. Далее решаю попробовать ещё раз, запускаю на ТЕХ ЖЕ САМЫХ НАСТРОЙКАХ - 92 товара, в итоге запускал раз 20, каждый раз новое значение.
    Где косяк, во мне или в программе?
     
  2. Valiks

    Valiks New Member Супер Модератор

    Регистрация:
    18 янв 2012
    Сообщения:
    554
    Адрес:
    Всё время в скэйпе
    Программе берёт то, что ей дают, если будет слишкмо много потоков, которые сервер не в состоянии обработать, либо гнилой сервер, либо глюки в инете, чаще всего, битые прокси, то, конечно же, будут пропущенные ссылки. Это вполне должно быть понятно
     

Поделиться этой страницей