ошибка заполнения файла парсинга разными символами

Тема в разделе "Встроенный редактор CSV файлов", создана пользователем алексей232, 12 янв 2014.

  1. алексей232

    алексей232 New Member Пользователи

    Регистрация:
    20 янв 2013
    Сообщения:
    72
    Добрый день ! Может быть сталкивались подскажите плиз,скачиваю
    проект через прокси сервера ,потоков ставлю 50,после 100-1000
    скачиваний в эксель записывается нее извесная"хрень" разные символы фаил скачки прикладываю",ни как не могу понять с чем связанно,,когда качал в 7
    потоков доходит до нормальных скачиваний 5000, потом то же самое
    ['_addOrganic', 'win.mail.ru', 'q'],
    ['_addOrganic', 'market.yandex.ru', 'text', true],
    ['_addOrganic', 'price.ru', 'pnam'],
    ['_addOrganic', 'torg.mail.ru', 'q'],
    ['_addOrganic', 'video.yandex.ru', 'text'],
    ['_setCustomVar',2,'ab_segment[rr]','[1]',2],
    ['_trackPageview']
    )
    (function() {
    var ga = document.createElement('script')
    ga.type = 'text/javascript'
    ga.async = true
    ga.src = ('https:' == document.location.protocol ? 'https://ssl' : 'http://www') + '.google-analytics.com/ga.js'
    var s = document.getElementsByTagName('script')[0]
    s.parentNode.insertBefore(ga, s)
    })()
     
  2. Freesty1er

    Freesty1er New Member Пользователи

    Регистрация:
    30 дек 2013
    Сообщения:
    95
    алексей232, а что, разве скорость парсинга намного больше увеличивается, чем скажем на 15 потоков? У меня при 50 падает, а при 30 потоках +20% всего лишь... Так что использую программу на 10-15 потоков максимум.
     
  3. алексей232

    алексей232 New Member Пользователи

    Регистрация:
    20 янв 2013
    Сообщения:
    72
    у меня 95 000 товаров парсится 25 часов при 15 и 9 часов при 50
     
  4. Root

    Root Администратор Администратор

    Регистрация:
    10 мар 2010
    Сообщения:
    14.818
    Город:
    Барнаул
    Приветствуем вас! :clap:

    Похоже сайт банит, а на НЕ сокс прокси (может быть такие как раз и используете) ему все равно. Или просто мало прокси серверов и он успевает все их забанить. Вам следует изучить вопрос поведения данного сайта.

    Могу порекомендовать ставить меньше потоков или использовать больше прокси. Может быть использовать качественные СОКС прокси.

    Надеюсь, наш ответ вам помог. Спасибо за обращение и хорошего вам дня! :bow:
     

Поделиться этой страницей