Сканер пропускает ссылки

Discussion in 'Парсинг во вкладке "Ссылки"' started by moov, Jul 6, 2014.

  1. moov

    moov New Member Пользователи

    Joined:
    Sep 20, 2013
    Messages:
    31
    Добрый день!

    Hidden Content:
    **Hidden Content: To see this hidden content your post count must be 1 or greater.**
    Что делать?

    Заранее благодарен за помощь.
     
  2. Root

    Root Администратор Администратор

    Joined:
    Mar 10, 2010
    Messages:
    14,818
    Город:
    Барнаул
    Здравствуйте.

    Первый сайт:
    Там теги ссылок содержат лишние пробелы. Решается поиск-заменой для исходного кода (кнопка "поиск-замена" в сканере сайтов)
    Файл проекта приложил (у меня с ним прекрасно распарсивает ссылки с сайта).
    ОБЯЗАТЕЛЬНО ОБНОВИТЕСЬ ДО ПОСЛЕДНЕЙ ВЕРСИИ, ТАМ ВВЕДЕНА ПОДДЕРЖКА HTML-ТЕГА BASE

    Второй сайт:
    Стартовую ссылку вводите типа
    Hidden Content:
    **Hidden Content: To see this hidden content your post count must be 1 or greater.**
    тогда и увидит.
     

    Attached Files:

  3. moov

    moov New Member Пользователи

    Joined:
    Sep 20, 2013
    Messages:
    31
    Спасибо, за быстрый ответ.

    Простите за еще один вопрос по второму сайту. Если так вводить то выводить будет только OUTLET, остальные увидит?
     
  4. Root

    Root Администратор Администратор

    Joined:
    Mar 10, 2010
    Messages:
    14,818
    Город:
    Барнаул
    Пожалуйста.
    Зависит от сайта, я его особо не изучал. Попробуйте... Вот полное описание работы сканера - Ссылки недоступны для гостей
    Ждем вас с конкретными вопросами...
    С уважением к вам, Сергей.
     
  5. lexxser

    lexxser New Member Пользователи

    Joined:
    Oct 16, 2014
    Messages:
    8
    Доброе время суток!
    Подскажите, сканер ссылок берет только первые 40 ссылок, так как для того, чтобы на странице появились остальные ссылки на товар, необходимо ее прокрутить до конца!
    Прокручиваю страницу с помощью WBApp, но не помогает в сканер все ровно попадает только первые 40 ссылок!
    Подскажите, что не так делаю! Вот настройки WBApp:

    [HTMLPOINT]
    [SCROLLDOWN]
    [WAIT]:2000
    [HTMLPOINTCHECK]

    Вот ссылка на сайт:
    Hidden Content:
    **Hidden Content: To see this hidden content your post count must be 1 or greater.**
     
  6. lexxser

    lexxser New Member Пользователи

    Joined:
    Oct 16, 2014
    Messages:
    8
  7. nail

    nail Member Пользователи

    Joined:
    Sep 15, 2014
    Messages:
    60
    Не знаю, можно ли это сделать в Content Downloader (не было надобности пока).

    Но если отключить JavaScript в браузере и поставить такую ссылку:

    Hidden Content:
    **Hidden Content: To see this hidden content your post count must be 1 or greater.**
    Попробуйте.(проверил в IE11)
     
    Last edited: Oct 16, 2014
  8. Root

    Root Администратор Администратор

    Joined:
    Mar 10, 2010
    Messages:
    14,818
    Город:
    Барнаул
    Здравствуйте.

    В WBApp используйте следующий список событий:
    В сканере сайтов установите количество потоков - 1 (так как парсим через Explorer и он должен успевать прогружать страницу).

    Надеюсь, наш ответ вам помог.

    С уважением к вам, Сергей.
     
  9. lexxser

    lexxser New Member Пользователи

    Joined:
    Oct 16, 2014
    Messages:
    8
    Спасибо nail Ваш совет очень помог, парсятся все 82 ссылки!

    Попробывал еще список событий:
    [SLABEL]
    [WAIT]:2000
    [SCROLLDOWNTHENRETURN]
    В сканере сайтов установл количество потоков - 1
    не помог, может чего не так сделал!
     
  10. Root

    Root Администратор Администратор

    Joined:
    Mar 10, 2010
    Messages:
    14,818
    Город:
    Барнаул
    Здравствуйте.

    Странно, у меня работает это.

    Как варианты:
    - Если у вас не последняя версия IE в системе, попробуйте обновить ее
    - Попробуйте увеличить время "тайм-аут проверки..." в ctrl+h

    С уважением к вам, Сергей.
     

Share This Page