Сергей, добрый вечер. Идея с делением поняна. Разбить сайт на 7-8 частей, придумав дополнительно фильтрацию для каждого блока. Какие еще могут...
Добрый день! Есть ресурс, у него большое количество страниц (более 7 млн.), при сканировании сайта начала загружаться память и при проходе 1...
Имена участников (разделяйте запятой).