Форум по парсингу сайтов и интернет магазинов

  1. Связь с разработчиком

    1. Развитие Content Downloader

      Темы:
      26
      Сообщения:
      3.903
      Последнее: Предложения по улучшению программы nail, 15 окт 2021
      RSS

  2. Content Downloader

    1. Приватный раздел для пользователей программы

      Темы:
      –
      Сообщения:
      –
      (Приватный)
      RSS

    2. Решение различных задач по парсингу

      Помощь в создании алгоритмов решения задач по парсингу или по обработке данных
      Темы:
      1.964
      Сообщения:
      11.821
      Последнее: Парсинг массивов данных JSON Root, 23 окт 2021 в 16:19
      RSS

    3. Раздел поддержки готовых проектов

      Темы:
      17
      Сообщения:
      112
      Подразделы: 1

      Раздел поддержки готовых проектов

      Подразделы

      1. Готовые проекты от энтузиастов

      Последнее: Проект по сбору ссылок с сайта web archive org Vor, 13 окт 2021
      RSS

    4. Решения по парсингу популярных сайтов

      Запрашиваем/делимся своими наработками
      Темы:
      144
      Сообщения:
      1.074
      Последнее: Как настроить выбор города при парсинге магазина Root, 21 окт 2021 в 23:26
      RSS

    5. Парсинг конкретных сайтов по запросу (ПЛАТНО)

      Заказать парсинг конкретного сайта или решить какой-либо нюанс по парсингу указанного сайта (любой может выполнять заказ, читайте правила радела)
      Темы:
      1.401
      Сообщения:
      8.306
      Последнее: Авито и авто.ру inotoxic, 17 окт 2021
      RSS

    6. Авторизация на сайтах

      Вопросы авторизации на различных сайтах
      Темы:
      48
      Сообщения:
      325
      Последнее: Насчет авторизации vanred79, 15 окт 2021
      RSS

    7. Решение проблем с использованием программы

      Устранение ошибок и проблем при работе с программой
      Темы:
      900
      Сообщения:
      5.556
      Последнее: Проблема при разбивке больших XML YML файлов Al195, 22 окт 2021 в 22:18
      RSS

    8. Решение проблем с загрузкой WEB-страниц

      Сайт не парсится программой
      Темы:
      120
      Сообщения:
      760
      Последнее: Програме CD в доступе отказано Root, 22 окт 2021 в 22:04
      RSS

    9. Функции и интерфейс программы

      Вопросы связанные с интерфейсом и различными функциями программы
      Темы:
      240
      Сообщения:
      1.300
      Последнее: Как собрать страницы с редиректом sitedn, 12 окт 2021
      RSS

    10. Автоматизация парсинга

      Вопросы, связанные с процессом автоматизации парсинга и различных функций
      Темы:
      29
      Сообщения:
      137
      Последнее: Как создать многоступенчатый парсинг? inotoxic, 15 окт 2021
      RSS

    11. Прокси для парсинга

      Вопросы, связанные с использованием прокси-серверов (ctrl+r в программе)
      Темы:
      46
      Сообщения:
      457
      Последнее: Proxy сервисы которые пригодятся для Content Downloader infoprompt, 2 окт 2021
      RSS

    12. Лицензирование

      Темы:
      15
      Сообщения:
      81
      Последнее: Доступ на форум Root, 13 янв 2021
      RSS

    13. Создание различных запросов с помощью программы

      GET или POST
      Темы:
      19
      Сообщения:
      86
      Последнее: Как сформировать GET запрос если он постоянно меняется при нажатии Search? Root, 21 окт 2021 в 23:23
      RSS

    14. Разное

      Общий раздел
      Темы:
      443
      Сообщения:
      2.487
      Последнее: Как очистить кэш изображений? strateg2010, 28 сен 2021
      RSS

  3. Парсинг и обработка контента

    Вкладка "Контент"

    1. Границы парсинга

      Задание, обработка и вывод границ парсинга в нужном формате
      Темы:
      231
      Сообщения:
      1.376
      Подразделы: 2

      Границы парсинга

      Подразделы

      1. Обычные границы парсинга

      2. Повторяющиеся границы парсинга

      Последнее: Автоматически найти закрывающий div при парсинге emkub, 17 окт 2021
      RSS

    2. Шаблон вывода

      PHP-скрипты для шаблона вывода, макросы шаблона вывода и все, что с ним связано
      Темы:
      348
      Сообщения:
      1.967
      Подразделы: 3

      Шаблон вывода

      Подразделы

      1. PHP-скрипты для шаблона вывода

      2. Макросы шаблона вывода

      3. Порядок выполнения макросов и функций

      Последнее: Как убрать значение _x000D_ Dalilo, 21 окт 2021 в 19:12
      RSS

    3. Сохранение результата парсинга контента

      Вопросы, связанные с созданием нужного формата результирующего файла (куда парсим контент)
      Темы:
      31
      Сообщения:
      162
      Последнее: Как сохранить html в txt и задать название из <CD_DOCURL!> timyrbay, 10 июн 2021
      RSS

    4. Скачивание картинок и файлов

      Загрузка картинок и файлов на диск при парсинге контента
      Темы:
      622
      Сообщения:
      3.839
      Последнее: Не могу спарсить картинку товара макросом DOWNLOADFILE webstep, 13 окт 2021
      RSS

    5. Обработка данных при парсинге во вкладке "Контент"

      Способы и методы преобразования контента к нужному виду при парсинге
      Темы:
      77
      Сообщения:
      463
      Последнее: Парсинг и переформатирование HTML Таблиц с характеристиками товаров WellSky, 16 сен 2021
      RSS

    6. Функции поиск-замены и регулярные выражения

      Темы:
      142
      Сообщения:
      730
      Последнее: Парсинг данных в формат json с помощью Поиск замены webstep, 19 окт 2021 в 07:55
      RSS

    7. Формирование GET и POST-запросов

      Темы:
      20
      Сообщения:
      146
      Последнее: Не выполняется POST Запрос emkub, 10 июл 2021
      RSS

    8. Работа с подключенными CSV файлами

      Темы:
      9
      Сообщения:
      49
      Последнее: Сортировка Каталога в CSV mika90, 11 янв 2021
      RSS

    9. Работа с подключенными XML файлами

      Темы:
      2
      Сообщения:
      8
      Последнее: Сохранение структуры категорий при парсинге в XML Stan, 2 июн 2020
      RSS

    10. Задание имен документов и файлов

      Вопросы о переименовании документов с контентом и скачиваемых файлов
      Темы:
      3
      Сообщения:
      5
      Последнее: Сохранение контента в разные папки Hope1, 6 июл 2021
      RSS

    11. Парсинг HTML-таблиц

      Темы:
      29
      Сообщения:
      192
      Последнее: Объединение при помощи APPLYTABLESPANS masrub, 19 окт 2021 в 14:27
      RSS

    12. Парсинг характеристик товаров

      Темы:
      69
      Сообщения:
      462
      Последнее: Парсинг характеристик товаров из нескольких частей (Несколько DYNAMICVALUES) Root, 11 июл 2021
      RSS

    13. Парсинг интернет магазинов

      Темы:
      2
      Сообщения:
      11
      Последнее: Парсинг товаров с цветами и размерами (Smartbody_ru) Root, 10 фев 2021
      RSS

    14. Парсинг XML

      Темы:
      1
      Сообщения:
      7
      Последнее: Как отсортировать ненужные товары при парсинге из xml kagorec, 10 июл 2020
      RSS

    15. Парсинг JSON

      Как парсить товары или любые другие данные из кода JSON
      Темы:
      2
      Сообщения:
      6
      Последнее: Вывод одного типа данных из кода JSON в одну ячейку CSV Root, 11 фев 2021
      RSS

    16. Подгрузка данных, которых нет в коде WEB-документа

      Подгружаем отсутствующие данные с помощью WBApp или макросов шаблона вывода GETMORECONTENT
      Темы:
      45
      Сообщения:
      284
      Последнее: Характеристик нет в коде страницы (они подгружаются скриптами) inotoxic, 23 авг 2021
      RSS

  4. Парсинг ссылок

    1. Фильтры ссылок

      Отсеивание лишних ссылок при парсинге
      Темы:
      68
      Сообщения:
      582
      Последнее: Фильтр ссылок по наличию ключевой фразы на странице kagorec, 25 фев 2021
      RSS

    2. Парсинг во вкладке "Ссылки"

      Темы:
      220
      Сообщения:
      1.287
      Последнее: Перестали генерироваться ссылки в 2gis kagorec, 31 авг 2021
      RSS

    3. Сбор ссылок сканером сайтов

      Темы:
      77
      Сообщения:
      512
      Последнее: Сообщение об ошибке Out of memory kagorec, 22 сен 2021
      RSS

    4. Генерация списков ссылок

      Темы:
      8
      Сообщения:
      35
      Последнее: Генерация списка ссылок с вложенными категориями с пагинацией Miomio, 10 окт 2020
      RSS

    5. Парсинг ссылок из XML-карт сайтов

      Темы:
      14
      Сообщения:
      80
      Последнее: Парсинг составной карты сайты (с вложенными подкартами) kadishev1997, 13 май 2021
      RSS

    6. Общее

      Общие вопросы по парсингу ссылок
      Темы:
      31
      Сообщения:
      214
      Последнее: Парсинг ответов поисковой строки Root, 14 окт 2021
      RSS

  5. Инструменты

    1. Встроенный редактор CSV файлов

      Помощь по работе с таблицами CSV
      Темы:
      127
      Сообщения:
      725
      Последнее: Обрезать строку после 200 символов Kol57, 9 окт 2021
      RSS

    2. Инструмент массовой загрузки файлов

      По введенному списку ссылок
      Темы:
      1
      Сообщения:
      3
      Последнее: Как использовать макрос REPLACE с файлом-словарём замен при массовой загрузке файлов gosshwilli, 17 окт 2020
      RSS

    3. WBAppIE

      Все, что связано с WBApp для Content Downloader
      Темы:
      295
      Сообщения:
      1.965
      Последнее: Сохранить файл из WbApp redizka, 30 авг 2021
      RSS

    4. WBAppCEF

      WBApp с движком Chromium
      Темы:
      101
      Сообщения:
      626
      Подразделы: 2

      WBAppCEF

      Подразделы

      1. Javascript для WBAppCEF

      2. Шаблоны списков событий

      Последнее: WbappCEF не выдает код страницы Root, 16 сен 2021
      RSS

    5. WBApp2

      Многовкладочный браузер для парсинга на основе Chromium
      Темы:
      1
      Сообщения:
      26
      Последнее: Развитие многовкладочного браузера для парсинга mur, 8 сен 2021
      RSS

  6. Публикация данных/Формирование различных форматов

    1. Импорт CSV

      Импорт CSV-таблиц в различные MySQL
      Темы:
      164
      Сообщения:
      1.006
      Последнее: Какой символ указать разделителем табуляция в модуле anyCSV OpenCart ? Root, 2 авг 2021
      RSS

    2. Парсинг данных в XML файлы

      Темы:
      1
      Сообщения:
      5
      Последнее: Стартовое значение ID рубрик при формировании структуры рубрик xml Felix_b, 20 мар 2021
      RSS

    3. Инъекции в MySQL

      Внесение данных в БД MySQL сразу при парсинге контента (с помощью макроса PHP_SCRIPT)
      Темы:
      17
      Сообщения:
      135
      Последнее: Парсинг в базу Msql, как записать данные в MySQL через макрос php_script nct, 31 авг 2021
      RSS

    4. Готовые решения

      Решения по публикации данных в различные CMS
      Темы:
      12
      Сообщения:
      21
      Последнее: [OPENCART] Парсер цен конкурентов putnik, 12 окт 2021
      RSS

    5. Парсинг в Webasyst

      Парсинг в таблицы CSV для импорта в Webasyst
      Темы:
      1
      Сообщения:
      5
      Последнее: Дублирование строк при парсинге товаров в webasyst с разными значениями в некоторых ячейках sniti01, 23 фев 2021
      RSS

    6. Другое

      Другие методы импорта данных на сайты
      Темы:
      15
      Сообщения:
      74
      Последнее: Bitrix - Вопрос по csv формату импорт Root, 10 авг 2020
      RSS

  7. Другие продукты

    1. BackLink Checker

      Программа для поиска обратных ссылок
      Темы:
      1
      Сообщения:
      12
      Последнее: BackLink Cheker ошибки 400 и 403 Root, 27 сен 2019
      RSS

    2. CSVPRO - программа для обработки таблиц с товарами

      Темы:
      4
      Сообщения:
      10
      Последнее: Предложения по развитию CSVPRO Root, 19 окт 2021 в 13:01
      RSS

  8. Свободный раздел

    Общение на любые темы

    1. Запросы на создание утилит

      Если вам нужна утилита или программа для Windows, можете сделать тут запрос на ее создание
      Темы:
      2
      Сообщения:
      16
      Последнее: Предложить автору разработать дорген. "когданибудьпотом" Trojan, 3 мар 2021
      RSS

    2. Поиск решений

      Помощь в подборе решений для поставленных задач в сфере IT
      Темы:
      15
      Сообщения:
      75
      Последнее: Кто то может спарсить товары с сайта на платформе tiu.ru? inotoxic, 24 сен 2021
      RSS

    3. Свободный форум

      Темы:
      156
      Сообщения:
      838
      Последнее: SKYPROXY. Мобильные 4g прокси. Лучшая цена SkyProxy, 15 сен 2021
      RSS

    4. Помощь в работе с демо версией Content Downloader

      Тут можно бесплатно задавать вопросы для получения помощи в освоении основ работы с демо версией программы
      Темы:
      1
      Сообщения:
      27
      Последнее: В демо нет раздела "передача cockie и HTTP заголовков из WB..." ? don, 1 июн 2021
      RSS

  9. Content Downloader (ENG)

    For worldwide customers

    1. Misc

      Темы:
      2
      Сообщения:
      2
      Последнее: Bug reports Root, 28 янв 2020
      RSS

    2. Data scraping

      Темы:
      0
      Сообщения:
      0
      (Нет сообщений)
      RSS

    3. URLs scraping

      Темы:
      0
      Сообщения:
      0
      (Нет сообщений)
      RSS