Парсинг больших объемов - генериться несколько csv

Тема в разделе "Парсинг конкретных сайтов по запросу (ПЛАТНО)", создана пользователем divenow, 4 ноя 2015.

  1. divenow

    divenow New Member Пользователи

    Регистрация:
    10 окт 2015
    Сообщения:
    21
    Парситься большой объем данных порядка 30.000 ссылок.
    На выходе у меня получилось 3 файла article_all_1, article_all_2, article_all_3.
    Парсилось порядка 8-10 часов.

    Я правильно понимаю, что при закрывании компьютера/выключении интернета, создаетс новый файл куда продолжают писаться данные?
    Спасибо.
     
  2. J!Life

    J!Life Модератор Команда форума Модератор

    Регистрация:
    6 дек 2013
    Сообщения:
    83
    Для этого есть настройки Ссылки недоступны для гостей
    Перед закрытием не забываем сохранять проект.
     

Поделиться этой страницей