Ссылки недоступны для гостей Ничего не поделаешь, ссылки много весят в памяти, а выделяется программам мало!
порциями делайте свой емкий парсинг, подобную ошибку удавалось добиться когда по 250.000 и более ссылок в проекте было, делил по 50-100тысаяч и нормально стабильно работало (с учетом что подключен текстовик был в который записывались удачно спарсенные)
Что-то странное, я по два миллиона собираю, только тогда 1,5 ГБ набирается... Написали бы хоть при какой функции ошибка возникает, описали бы действия, проект бы выложили. PS: Гадать мы не любим.
Действительно, не подумал. Ошибка возникает постоянно, когда больше 1к страниц. На днях снова буду парсить, и выложу сразу проект.