Баг-репорты

Тема в разделе "Развитие Content Downloader", создана пользователем Root, 10 мар 2010.

  1. kagorec

    kagorec Администратор Команда форума Администратор

    Регистрация:
    3 янв 2011
    Сообщения:
    4.432
    Адрес:
    Latvia
    Стандартный "передатчик кукисов" не всегда передает те куки что надо, универсальности не хватает)
    Используйте снифер Mozilla addon LiveHTTPHeaders для отлавливания правильных кукисов после авторизации чтоб потом поставить в парсер (пример кукис при авторизации pwd=07LgJHRTCVU0QU50хec; suid=0КNjсМ2mip10; chbx=guest )

    [​IMG]
    ------
    настройка максимального количества элементов в логе не ограничена в 10000, вы можете поставиь свое значение хоть 100500
     
    Последнее редактирование: 10 сен 2012
  2. bork75

    bork75 New Member Пользователи

    Регистрация:
    2 сен 2010
    Сообщения:
    97
    kagorec, спасибо помогло, но просто раньше с этим сайтом проблем не было, куки нормально передавались.
    Т.е. у тебя нормально передались куки из программы?
    Не знаешь, а для Оперы есть похожий плагин?
     
    Последнее редактирование: 10 сен 2012
  3. kagorec

    kagorec Администратор Команда форума Администратор

    Регистрация:
    3 янв 2011
    Сообщения:
    4.432
    Адрес:
    Latvia
    скопировал из снифера и поставил в CD. (всегда только проверенные варианты пишу)
    Оpera приоритетный броузер но для инструментов по WEB пользовать приходиться Мозилла
     
  4. AlexS

    AlexS New Member Пользователи

    Регистрация:
    28 июн 2012
    Сообщения:
    56
    Топик про баги, а не про то, как закрывать глаза на баги.
     
  5. kagorec

    kagorec Администратор Команда форума Администратор

    Регистрация:
    3 янв 2011
    Сообщения:
    4.432
    Адрес:
    Latvia
    Интересно, как должно быть в логах при указании лимита, естественно при достижении идет по новой. о.0
     
  6. zilon

    zilon New Member Пользователи

    Регистрация:
    24 дек 2011
    Сообщения:
    80
    у меня во время предпросмотра, кирилица не отображаются, вот я скриншот сделал Ссылки недоступны для гостей
     
  7. bork75

    bork75 New Member Пользователи

    Регистрация:
    2 сен 2010
    Сообщения:
    97
    Вместо auto кодировки попробуй другую.
    [​IMG]
     
  8. AlexS

    AlexS New Member Пользователи

    Регистрация:
    28 июн 2012
    Сообщения:
    56
    Если я парсил 10001 урл, а в логе 1 запись - это естественно? :rolleyes:
     
  9. nikolas1612

    nikolas1612 Member Пользователи

    Регистрация:
    27 ноя 2011
    Сообщения:
    439
    абсолютно, если лог настроен на 10 тыс. так задумано изначально. достиг лимита - все обнулилось и пошло по новой. на мой взгляд, менять этот алгоритм не имеет смысла. кому надо - поставит настройку в 100 тыс.
     
  10. AlexS

    AlexS New Member Пользователи

    Регистрация:
    28 июн 2012
    Сообщения:
    56
    Вы описываете опцию "порог полной очистки лога", а сейчас опция звучит "максимальное количество элементов в логе".
    Разница принципиальна - мне не нужны логи на миллионы записей, но я не хочу оставаться с одной записью после обработки 10000 урлов.

    В любом случае, никакой работы над багами не идет, и смысла писать сюда нет.
     
  11. sn2368

    sn2368 New Member Пользователи

    Регистрация:
    4 авг 2012
    Сообщения:
    14
  12. zilon

    zilon New Member Пользователи

    Регистрация:
    24 дек 2011
    Сообщения:
    80
    можите добавить функцию "скопировать" документы которые не удаётся загрузить? Просто из за проблем с интернетом не парсятся многие странички, а если эта функция будет, то можно их заного спарсить
     

    Вложения:

    • ы.png
      ы.png
      Размер файла:
      16,1 КБ
      Просмотров:
      41
    Последнее редактирование: 26 сен 2012
  13. AlexS

    AlexS New Member Пользователи

    Регистрация:
    28 июн 2012
    Сообщения:
    56
    Баг с относительными ссылками принципиально не исправляется, я не пойму?
    С августа жду решения проблемы, вот уже и обновление программы вышло, а результата ноль.

    Я уже молчу про не столь критичные баги, вроде игнорирования работы через прокси.
     
  14. nikolas1612

    nikolas1612 Member Пользователи

    Регистрация:
    27 ноя 2011
    Сообщения:
    439
    по вопросу багов: полная неработоспособность макроса {skip} во второй границе парсинга ссылок. стоит ему там появиться (протестировано на 3х разных проектах) - и программа не находит ни одной ссылки. убираем {skip} - появляются ссылки. 100%-ный баг.
     

    Вложения:

    • баг.jpg
      баг.jpg
      Размер файла:
      23 КБ
      Просмотров:
      37
    • TSN.cdp
      Размер файла:
      27,3 КБ
      Просмотров:
      1
    Последнее редактирование: 11 окт 2012
  15. zilon

    zilon New Member Пользователи

    Регистрация:
    24 дек 2011
    Сообщения:
    80
    Во время предпросмотра текст, который выводится php скриптом или внутри php скрипта отображается в неправильной кодировке вот сринoт Ссылки недоступны для гостей
     
  16. PowerWeb

    PowerWeb New Member Пользователи

    Регистрация:
    23 окт 2012
    Сообщения:
    2
    Возникает проблема:
    в статье есть ссылка на координаты в гугл мэпс
    например
    Ссылки недоступны для гостей

    после синонимизации
    ссылка приобретает вид
    Ссылки недоступны для гостей

    то есть Ссылки недоступны для гостей меняется Ссылки недоступны для гостей
    тем самым ссылка оказывается нерабочей
    В чём может быть проблема?
    Заранее благодарен за помощь!
     
  17. kagorec

    kagorec Администратор Команда форума Администратор

    Регистрация:
    3 янв 2011
    Сообщения:
    4.432
    Адрес:
    Latvia
    не трудно догадаться что слово "гугл" надо удалить из базы синонимов
    C:\Program Files\Smartbyte\Content Downloader II\data.txt
     
  18. PowerWeb

    PowerWeb New Member Пользователи

    Регистрация:
    23 окт 2012
    Сообщения:
    2
    Спасибо!
     
  19. zilon

    zilon New Member Пользователи

    Регистрация:
    24 дек 2011
    Сообщения:
    80
    это я затупил)) кодировку можно в скрипте поменять например так
    PHP:
    $x=iconv ("UTF-8""CP1251"$x);
    и будет нормально отображатся...
     
    Последнее редактирование: 24 окт 2012
  20. Егор

    Егор New Member Пользователи

    Регистрация:
    2 дек 2012
    Сообщения:
    1
    Пару месяцев назад такая формула в повторяющихся границах парсинга работала:
    [REPLACE(, |{br};;;;;;;)][VALUE][/REPLACE]
    Сейчас макрос перехода на новую строку не работает (не то что совсем не работает, а вот в таком виде не работает).

    p.s.: там подмигивающий смайлик - это точка с запятой и закрытая скобка - тут похоже автоматическая замена
     
    Последнее редактирование: 2 дек 2012

Поделиться этой страницей