Вопросы и ответы

Начните знакомство с программой Datacol с вводного видео, доступного на странице - это самый быстрый способ понять базовые принципы работы.

Страница содержит актуальный на момент публикации список User Agent строк для десктопных браузеров (Chrome, Firefox, Safari, Edge, Opera, Vivaldi, Яндекс Браузер) и мобильных устройств (iOS, Android). Используйте их для настройки заголовков запросов при сборе данных.

На системах с 64-битной Windows и более 4 ГБ ОЗУ ставьте 64-битную версию Datacol 7.5XX. Если ОЗУ меньше 4 ГБ или система 32-битная, ставьте 32-битную версию Datacol 7.341. Разрядность системы можно проверить в свойствах компьютера.

Откройте Excel, выберите "Открыть", в фильтре типов файлов укажите "Все файлы" и выберите нужный CSV. Далее укажите правильную кодировку и разделитель данных, проверяя результат в окне предпросмотра, установите формат ячеек "Общий" и нажмите "Готово".

Если при установке новой версии Datacol возникают ошибки, скачайте и установите пакет Visual C++ redistributable для 64-битных систем с сайта Microsoft - это устраняет проблему совместимости.

Перейдите на partners.web-data-extractor.net/download/?p=datacol, укажите имя, email и нужную версию в форме, нажмите "Отправить на email" и получите ссылку для скачивания. После установки отмените автообновление и отключите его в настройках программы на вкладке "Дополнительно", чтобы версия не обновилась автоматически.

Откройте рабочую папку 32-битной версии по пути %AppData%\Datacol7\ (или через CTRL+E в программе), скопируйте файл Scheduler.xml из папки Scheduler. Затем откройте рабочую папку 64-битной версии по пути %AppData%\Datacol7-64\ и замените в ней Scheduler.xml на скопированный файл.

Укажите актуальное значение User Agent в общих настройках. Для загрузки через браузерный загрузчик (Datacol Agent) список User Agent настраивается в параметрах кампании на вкладке "Загрузка - Дополнительно" в поле User Agent.

Если самостоятельная настройка вызывает затруднения, можно обратиться в поддержку через Telegram или контактную форму на сайте - менеджер проектов ответит в течение 1 рабочего дня.

Новичкам стоит начать с просмотра видеоуроков на сайте. Если после этого остаются вопросы, можно обратиться в поддержку - менеджер проектов ответит в течение 1 рабочего дня.

Основные причины: изменилась верстка сайта-источника, сайт блокирует доступ парсера, либо настройка устарела. Для базовых пресетов сначала попробуйте обновить настройки кнопкой обновления в главном окне программы и повторить попытку.

Отдельных серверных решений компания не предлагает, но десктопную версию для Windows можно запускать на Windows-сервере. Также при необходимости могут порекомендовать проверенных провайдеров серверов.

Да, для этого используется платный плагин Google Translate. При больших объемах перевода потребуются прокси для работы с сервисом Google Translate.

Порядок действий: удалите Datacol, перезагрузите компьютер, скачайте актуальную версию программы с сайта, установите её, поставьте именно 32-битную версию Google Chrome, отключите файрвол и запустите Datacol с нужными кампаниями.

Инструкции обычно составлены для демо-сайтов с определенной версткой и структурой ссылок. Целевой сайт может иметь совершенно другую верстку и ссылочную структуру, поэтому настройку нужно адаптировать под конкретный сайт, а не копировать один в один.

Парсер способен работать с большинством площадок, но каждая требует индивидуальной настройки. Чтобы оценить возможность парсинга конкретного сайта, нужно прислать техническое задание, составленное строго по установленному шаблону.

Перевод возможен с помощью платного плагина для Google Translate. При больших объемах перевода потребуются прокси для стабильной работы с сервисом.

Да, цены можно изменять с помощью платного плагина Price Changer, который доступен в разделе плагинов на сайте Datacol.

Для авторизации используются пользовательские сценарии (скрипты). Подробности реализации через плагин для Chrome описаны в отдельной документации.

Узнайте версию Chrome через меню "О браузере Google Chrome", скачайте подходящий ChromeDriver (нужна именно 32-разрядная версия драйвера, для Chrome 118+ - с сайта googlechromelabs), закройте Datacol и завершите процессы Datacol7.exe и chromedriver.exe, замените chromedriver.exe в папке %AppData%\Datacol7\Plugins (32-бит) или %AppData%\Datacol7-64\Plugins (64-бит), затем перезапустите Datacol.

Компания сама не занимается наполнением магазинов, но есть демонстрационный тестовый магазин на opencart.web-scraping-software.com, показывающий работу парсера на практике.

Комбинируйте несколько базовых кампаний Datacol: "Парсер Яндекса", "Парсер Гугл" и "Парсер email адресов". Изучите описание каждого инструмента и определите, как объединить их под конкретную задачу.

Прямая публикация в нестандартную CMS не рекомендуется. Правильный подход - привлечь веб-разработчика, который определит возможность импорта данных в базу сайта; это быстрее и надежнее.

Технически это возможно, но в последние годы номера телефонов на страницах ВКонтакте встречаются очень редко. Для сбора телефонов стоит рассмотреть другие источники.

Ответ на этот вопрос нужно узнавать у своего вебмастера - это зависит от конкретной CMS и настроек сайта.

Прокси-сервер - это промежуточный компьютер между вашим ПК и интернетом, который позволяет обходить IP-баны и работать анонимно, подменяя IP при каждом запросе. Datacol поддерживает HTTP-прокси, работающие как по фиксированному списку (случайный или последовательный выбор), так и через отдельных провайдеров. Рекомендуется тестировать прокси перед покупкой и предпочитать анонимные прокси; среди провайдеров упоминаются Proxys.io, Proxy-Solutions, MANGOPROXY, LTESpace.com.

Да, но для этого разрабатывается отдельный плагин обработки скриптов на сайте, который достает номер из левого информационного блока карточки. Подробности - в документации по плагинам.

Проверить это можно самостоятельно: возьмите любую страницу товара с сайта-источника, вручную создайте CSV файл с данными этой страницы (образцы есть на сайте и у разработчиков CMS), импортируйте его на свой сайт и посмотрите на результат.

Услуг поиска источников данных компания не предоставляет - по их регламенту заказчик сам определяет ресурсы для сбора информации.

Некоторые сайты ограничивают доступ к определенным типам данных, включая телефоны. В таких случаях можно воспользоваться сервисом мониторинга Datacol, который за счет внутренних ресурсов обходит ряд ограничений сайтов - для этого нужно зарегистрироваться, подать задачу по инструкции и дождаться оценки стоимости.

По умолчанию в таблице результатов в главном окне отображаются только первые 50 записей. Чтобы увеличить лимит, дважды кликните по кампании в дереве кампаний и измените параметр "максимум выдаваемых результатов" в настройках.

Владельцы сайта могут заметить активность парсера. Чтобы снизить риск обнаружения, в настройках кампании стоит уменьшить число потоков до 1-2 и выставить задержку 5-10 секунд между запросами.

.par - это файл настроек, а не файл с результатами данных. Перед экспортом изучите раздел «Экспорт» в справке программы: файл настроек не имеет отношения к сохраняемым данным.

Нужно заново запустить парсинг сайта в активированной версии. Программа автоматически экспортирует результаты согласно настройкам экспорта (обычно в CSV в папку «Мои документы»).

Эта функция подробно описана в справке, встроенной в программу Datacol7.

XPath - это язык запросов для обращения к элементам веб-документов. В Datacol с его помощью выделяют нужные блоки страницы для извлечения и сохранения данных. Нужные XPath-адреса можно получить одним кликом мыши через ассистент программы, не прописывая их вручную.

Регулярные выражения - формальный язык для поиска и обработки подстрок в тексте на основе метасимволов, своего рода шаблон, накладываемый на текст для поиска совпадений. Инструмент Selector в Datacol (версия 2.1+) умеет генерировать regex-шаблоны автоматически, так что глубокое знание синтаксиса не обязательно.

Логика повторного скачивания описана в справке программы, в разделах «Алгоритм работы программы» и в настройках кампании «Общие» - «Очередь и история» - там уточняется, как Datacol обрабатывает уже скачанные позиции.

Прокси-сервер - промежуточный компьютер, посредник между вашим компьютером и интернетом, позволяет скрыть IP и избежать блокировок при парсинге. Datacol поддерживает HTTP-прокси двумя способами: фиксированный список (прокси выбираются случайно или по очереди) или динамическая ротация по настройкам кампании. Лучше использовать анонимные прокси и заранее запрашивать у поставщика тестовые. Среди рекомендуемых поставщиков: Proxys.io, Proxy-Solutions, MANGOPROXY, Rapidproxy.io, Novproxy, 1024proxy, OkkProxy, NiuProxy, Swiftproxy, LTESpace.com.

Для платной настройки нужно сначала ознакомиться с публичной офертой и услугами, а затем подать подробное техническое задание по шаблону на странице web-data-extractor.net/tz/.

Datacol занимается только автоматизированным сбором данных с сайтов и не оказывает услуг вне этой области. Но если задача - отдельный модуль, встроенный в парсинг, ее можно обсудить и оценить отдельно.

Готовый пример не высылается - его можно самостоятельно получить в демо-версии, на вкладке «Тестирование» на странице нужного парсера.

Нужно протестировать соответствующую базовую кампанию, чтобы проверить, подходит ли нужный функционал.

Пользователи часто путают лог-файл (расширение .par) с файлом результатов парсинга. Разница и настройка экспорта описаны в справке программы, в разделах «Экспорт» и «Обработка ошибок и логи».

Оптимальное число потоков для сбора данных - 5-10, превышать это значение не рекомендуется.

Нет, Datacol - универсальный продукт, который можно настроить под разные сайты. Настройку можно освоить самостоятельно по документации либо заказать платно.

Причина обычно в блокировке публикаций модулем ModSecurity на хостинге. Решение - временно отключить ModSecurity на время загрузки статей.

Нужно заменить стандартный шаблон поиска ссылок (который исключает пробелы) на шаблон без ограничения по пробельным символам - это позволит захватывать полные URL с пробелами без обрезки.

Нужно найти XPath миниатюр в коде страницы и обобщить его для выбора всех изображений сразу, включить опции «Сохранять теги» и «Статичное поле» для сохранения нескольких фото в одну ячейку через запятую. Полноразмерные ссылки на изображения обычно спрятаны в JS-коде страницы - их достают регулярным выражением, а затем на вкладке «Замены» исправляют экранированные слэши перед скачиванием файлов.

Если у сайта есть собственные фильтры, Datacol использует их для получения уже отфильтрованных результатов (это предпочтительный вариант). Если фильтров нет, можно собрать все данные целиком и отфильтровать позже в Excel, но это расходует больше ресурсов.

Нужно добавить в URL параметр &lr= с числовым кодом города, например Москва - код 213: https://market.yandex.ru/?tab=catalog&lr=213.

Да, в состав Datacol входит отдельный парсер Яндекс.Маркета, который позволяет регулярно собирать данные с маркетплейса после покупки лицензии (от 18$).

Да, при изменениях на сайте Яндекс.Маркета команда поддержки чинит базовую конфигурацию парсера, обновления обычно выходят в течение 1-2 недель после сообщений о неполадке. Если Яндекс блокирует парсер, рекомендуется использовать прокси.

Нужно использовать американские прокси при парсинге - тогда сайт отдает описание на английском, а не на русском.

Не гарантированно - парсер настроен на нескольких конкретных магазинах Taobao как на примерах, другим магазинам может требоваться дополнительная настройка, а некоторые сложные случаи не поддаются даже специалистам Datacol.

Да, можно менять настройки кампаний из базового набора или создавать свои под конкретную задачу. Программирование для этого не требуется, рекомендуется также посмотреть видеоинструкции.

Avito регулярно борется с парсингом, из-за чего он может ломаться. Команда Datacol чинит базовую конфигурацию и обычно выпускает обновление в течение 1-2 недель после сообщений о проблеме.

Нужно настроить нужные фильтры, включая ключевые слова, прямо на сайте Avito, а затем скопировать получившийся URL в поле кампании в Datacol.

Подходящее выражение: //div[@class='item-add-date'] - оно указывает на блок с датой публикации объявления.

Нужно добавить замену на вкладке «Загрузка»: accessError=20 на пусто - это уберет параметр ошибки из URL и позволит парсеру работать без ручного вмешательства.

У Avito есть ограничение - с одной ссылки отдается не более 2000 объявлений, независимо от того, сколько их доступно в категории на самом деле.

Нужно использовать плагин отсеивания дубликатов - он автоматически находит и убирает повторяющиеся записи из собранных данных.

Нужно с помощью регулярных выражений фильтровать собираемые ссылки так, чтобы захватывались только объявления с платными опциями или продвижением, а не все подряд.

Нужно сделать поля названия и описания обязательными и настроить условия фильтрации по нужным ключевым словам, которые должны встречаться в заголовке или описании объявления.

Excel-файл нельзя перезаписать, пока он открыт в другой программе. Перед новым парсингом закрывайте файлы экспорта - принудительного повторного экспорта без повторного парсинга нет.

Парсится только то количество резюме, которое включено в ваш тарифный план на сайте-источнике (hh.ru).

Да, если эти данные видны на странице резюме в рамках вашего тарифа на hh.ru. Объём выгрузки ограничен тем, сколько резюме включено в ваш тарифный план на сайте-источнике.

Готовых баз данных компания не продаёт - она продаёт решения (парсеры) для автоматического сбора резюме с этих сайтов.

Для просмотра и сбора контактов резюме на hh.ru нужен аккаунт работодателя с подпиской на просмотр резюме по нужному региону или специализации.

Итоговая стоимость складывается из тарифа Datacol (выбирается на странице тарифов) плюс стоимости пакета данных на самом сайте по вакансиям, в зависимости от нужного объёма.

Нет, по требованию правообладателя (юридического отдела) Datacol с этим сайтом не работает. В качестве альтернативы можно использовать парсер карт (например, Яндекс.Карт).

Для нормальной работы программы при блокировке основных ресурсов используйте Proxy или VPN.

Не полностью - SuperJob не предоставляет аккаунты, дающие доступ ко всем страницам сайта, поэтому возможности парсинга ограничены условиями самой площадки.

Это ограничение самого Яндекс.Карт - сервис не позволяет получить более 20 результатов на один запрос, это не ограничение парсера.

Используйте регулярное выражение вида ([a-z0-9_.-]+)@([a-z0-9_-]+).([a-zA-Z]{2,6}) для извлечения email-адресов из собранных данных.

В редакторе сценария уберите условие ограничения скролла (counter 3), чтобы увеличить число прокруток. Также учтите, что сам ВКонтакте подгружает при поиске меньше результатов, чем заявляет.

Обойти лимит напрямую нельзя, но можно формировать отдельные ссылки через поисковые фильтры (например, по возрасту), чтобы получать до 1000 человек по каждой ссылке отдельно.

Поставьте парсинг в 1 поток и добавьте задержки между действиями, чтобы снизить нагрузку и не выглядеть как бот.

Ошибка на блоке scroll (CLICK не выполнен) возникает из-за нехватки ресурсов браузера при долгой подгрузке большого объёма данных - кнопка «Ещё» не успевает обновиться. Решение - ограничить число кликов по кнопке «Ещё», уменьшив объём собираемых данных за раз.

По умолчанию данные сохраняются в папку «Мои документы». Подробности смотрите в разделе справки про экспорт.

Настраивать парсинг Avito с нуля сложно - протестируйте готовую базовую кампанию, она рассчитана на мобильную версию сайта.

Да, если указать ссылку на сайт, где эти данные публично видны, и настроить парсинг под него. Если сайт скрывает эти данные даже под логином, программа тоже не сможет их получить.

Да, настройки можно доработать самостоятельно с помощью справочных материалов и форума, либо заказать доработку у специалистов компании - кастомизируемость является одной из сильных сторон программы.

Зависит от сайта-источника, нужного объёма данных и требуемой скорости парсинга - точное число подбирается опытным путём под конкретную задачу.

Подробная инструкция приведена в соответствующем разделе справки на сайте.

Для исключения повторяющихся данных при парсинге используется специальный плагин - за деталями настройки обращайтесь в поддержку на форуме.

Сначала Datacol собирает название, цену и изображения товаров из фотоальбомов или модуля «Товары» ВКонтакте (есть видеоинструкции или помощь специалистов). Затем данные экспортируются в CSV и загружаются на сайт - есть готовые интеграции с WordPress, Joomla, DLE, OpenCart и Webasyst, а также возможность автоматически отслеживать обновления.

Под популярные доски объявлений (Avito, Auto.ru, OLX, Craigslist и другие) есть готовые настройки в разделе мониторинга. Настроить парсинг под нужный сайт можно и самостоятельно по видеоурокам («Парсинг объявлений», «Парсинг с кликом на Показать телефон»), либо обратиться в поддержку.

Нужен платный аккаунт работодателя, так как контакты открываются только после входа на сайт. Далее: настройте фильтры поиска на сайте вакансий и скопируйте URL результатов, откройте нужный парсер в Datacol, укажите логин/пароль в параметрах сценария и вставьте URL - программа сама соберёт контакты и остальные данные соискателей. Состав собираемых полей можно донастроить самому или с помощью поддержки.

Нужны аккаунты работодателя на сайтах вакансий и настроенный под них Datacol. Готовые настройки уже есть для HH, JOB.RU, WORK.UA и SUPERJOB.RU. Изменить состав собираемых данных можно самостоятельно по видеоурокам или через поддержку; список поддерживаемых сайтов регулярно пополняется.

Datacol собирает статьи по теме из результатов Google, WordPress-блогов, Rusarticles.com и News.ru (под другие сайты настройку можно заказать), автоматически выгружает их в блог и умеет запускаться по расписанию через встроенный планировщик. Дополнительно доступны автоперевод через Google Translate и рерайт через Synonyma.ru.

Datacol собирает название, полную структуру категорий, бренд, артикул, цену, характеристики, изображения, описание и отзывы товаров, с выгрузкой в XLSX, CSV, TXT или XML. Можно указать сбор по конкретным категориям вместе с подкатегориями; для сайтов без готовой настройки доступна самостоятельная настройка по видеоурокам или помощь поддержки.

Есть готовые настройки для Яндекс.Недвижимости, Cian.ru, Domofond.ru и Booking.com - нужные фильтрованные ссылки с этих сайтов подаются на вход парсеру. Для нестандартных нужд можно донастроить сценарий самому по видеоурокам или обратиться в поддержку.

Сначала убедитесь, что сайт поддерживает фильтр по району, и используйте отфильтрованные ссылки как входные данные. Для Яндекс.Недвижимости, Cian.ru, Domofond.ru и Booking.com есть бесплатные готовые настройки; для других сайтов - самостоятельная настройка по видеоурокам (парсинг объявлений, авторизация, клик для показа телефона) или помощь поддержки.

Телефоны на Avito показываются во всплывающих окнах или после определённых действий. Для этого в Datacol есть сценарии браузера: автоматизация авторизации, клики по элементам страницы и сбор данных из всплывающих окон. Смотрите видеоуроки по параметрам сценария или обращайтесь в поддержку при сложностях.

Datacol публикует в WordPress через протокол XML-RPC; ошибка недоступности хоста означает, что этот протокол недоступен. Проверьте в WordPress, не отключён ли XML-RPC (в частности, плагином Disable XML-RPC), и при необходимости уточните у хостинг-провайдера, не блокирует ли он XML-RPC на своей стороне.

Есть готовые парсеры для Avito, Cian.ru и IRR, которые собирают объявления вместе с контактами, указанными на странице объявления. Автоматически отличить агентство от частника программа не может при отсутствии явных признаков - такие случаи нужно проверять вручную. Состав собираемых полей можно донастроить самостоятельно или через поддержку.

Парсинг Google Карт пока в разработке из-за технических сложностей. Можно оставить заявку с требованиями, и специалисты оценят возможность индивидуальной настройки.

Для этого подходит отдельная программа Pricetraxer - она собирает цены у поставщиков и конкурентов, следит за наличием товара и сравнивает с вашими данными, храня историю цен. Достаточно указать список товаров и ссылки на страницы магазинов.

Для work.ua есть готовая настройка сбора резюме: имя, фото, описание, дата рождения, город, опыт, образование, навыки и языки. Демо-версия ограничена первыми 25 записями, для полного сбора или доработки нужна платная версия или обращение в поддержку.

Datacol может собирать любое количество фото товара - миниатюры, полноразмерные изображения и фото по вариациям цвета или размера. Для этого нужна дополнительная настройка - самостоятельно по видеоинструкциям или через поддержку.

Да, можно собрать несколько цен с одной карточки товара, включая скрытые данные. Нужно учесть все варианты цены (опт, розница, со скидкой) и создать под них отдельные поля. Настройку можно доработать самостоятельно по видео или заказать у специалистов.

Для сбора контактов и сайтов отелей Москвы рекомендуется парсинг поисковой выдачи (Яндекс, Google), каталогов отелей с фильтрами или справочников типа 2GIS и Яндекс.Карт. Проще всего использовать парсер Яндекс.Карт: указать Москву, ключевое слово 'отель' и выгрузить результат в XLSX без сложной настройки.

Есть три подхода: парсинг соцсетей (Facebook, LinkedIn, VK) дает лишь 5-10% адресов из-за приватности и риска блокировки аккаунта; парсинг бизнес-каталогов (2GIS, Яндекс/Google Карты) дает более крупную и качественную базу по отрасли и региону; парсинг досок объявлений (Avito, Youla, OLX) собирает контакты продавцов - готовые настройки есть для Avito и Tiu.

Есть функция сбора данных участников групп Facebook, но нужен аккаунт для авторизации, доступны только публично видимые данные, а интенсивный сбор может привести к блокировке аккаунта. Возможности ограничены настройками приватности самих пользователей. Для нестандартных задач можно заказать доработку у специалистов.

От дублей (например, из-за переразмещенных объявлений) избавляет плагин D5Plugin_UniquePlugin. Данные можно выгружать в разных форматах (XLSX, CSV, TXT, XML и др.) через настройки экспорта. Нужные столбцы можно настроить самостоятельно по видеоинструкциям или через поддержку.

Да, в программе более 100 готовых настроек парсинга под разные сайты, доступных даже в демо-версии, включая отдельные парсеры для Mvideo и Eldorado.ru. Для остальных магазинов можно создать парсер самостоятельно через автонастройку, по видеоинструкциям или заказать у поддержки.

Авито активно защищается от парсинга и блокирует парсеры. Чтобы ускорить сбор, рекомендуется использовать качественные прокси, увеличить число потоков загрузки страниц и уменьшить задержки между запросами - но для более быстрой скорости потребуется больше прокси.

hh.ru ограничивает просмотр не более чем 500 объявлениями в день. Обойти это можно, поставив сбор в очередь на следующий день или используя несколько аккаунтов. Скорость сбора также зависит от интернет-канала, ресурсов компьютера, числа потоков и задержек между запросами - перед парсингом стоит свериться с правилами сайта.

Datacol способен собирать данные практически с любого сайта, и для крупных площадок объявлений об авто, включая Авито и auto.ru, уже есть готовые настройки. Для нестандартных задач доступна автонастройка без технических знаний и поддержка специалистов.

Нужно выбрать кампанию в дереве, открыть вкладку быстрой настройки (или через правый клик выбрать 'Настройки') и перейти в раздел сбора данных - там находятся все параметры парсинга. Настройки можно менять, дублировать кампании или заказать создание нужной настройки у специалистов.

Нет, Datacol - универсальная платформа парсинга и может собирать новости с разных сайтов, а не только с News.ru. Для каждого сайта нужна отдельная настройка под его структуру - самостоятельно через автонастройку или с помощью видеоинструкций и поддержки.

Технически возможен, но требует отдельной настройки, которой нет в бесплатных готовых конфигурациях. Можно оставить заявку на разработку - она будет выполнена платно или добавлена в бесплатный доступ при интересе других пользователей.

Сайты OLX в разных доменах используют одну и ту же CMS и почти идентичны по структуре, поэтому настройка для olx.ua подходит и для olx.kz, и для olx.bl. Возможны небольшие отличия в разметке, поэтому рекомендуется скопировать рабочую настройку olx.ua и протестировать, подправив при необходимости.

Нужно зайти в настройки кампании, дважды кликнуть на пункт 'Браузер' и включить опцию отображения окна браузера в общих настройках. Это полезно для авторизации на сайте, ввода капчи и проверки корректности работы скрипта.

Есть два способа: параллельный парсинг - отдельная копия настройки под каждый аккаунт со своими данными и прокси, запускается одновременно, но результаты потом нужно объединять вручную; последовательный парсинг - одна настройка, в которой между сессиями меняются учетные данные и очищается папка профилей браузера. Для каждой настройки важно использовать свой набор прокси, чтобы избежать блокировки.

Да, компания предоставляет услуги настройки и консультаций - условия описаны на отдельной странице услуг. Менеджер проекта свяжется с клиентом в течение 1 рабочего дня после обращения через форму на сайте или в Telegram-поддержку.

Готовое техническое задание, составленное по шаблону, нужно отправлять на почту techsupport@web-data-extractor.net - это адрес специалистов поддержки Datacol по настройке.

Datacol предлагает готовые парсеры под маркетплейсы (Wildberries, Ozon, eBay), доски объявлений (Avito, OLX), недвижимость, вакансии, соцсети и SEO-данные, а также услуги индивидуальной разработки. Чтобы получить рекомендации под конкретную задачу, нужно описать требования по шаблону ТЗ.

Настройка парсера - трудоемкая работа стоимостью от 40$ и выше, а многие сайты активно борются с парсингом, из-за чего даже после оплаты результат может работать не на 100%. Чтобы не браться за задачи без гарантии результата и сохранить доверие клиентов, такие проекты иногда приходится отклонять.

В среднем настройка одного сайта стоит 15-35$. Для точной оценки по каждому сайту нужно прислать подробное описание задачи по шаблону ТЗ.

Для создания и добавления скриншотов в техническое задание рекомендуется использовать программу LightShot - она позволяет быстро делать снимки экрана.

Подробное ТЗ предотвращает споры и недопонимание: по опыту компании за 5 лет 99% конфликтов возникало из-за того, что клиент ожидал функции, которые не были явно прописаны. Лучше потратить 10-20 минут на описание задачи по шаблону, чем позже тратить часы на разбирательства из-за расхождений в объеме работ и оплате.

Нужно заполнить специальную форму на сайте и нажать кнопку отправки внизу. После этого команда Datacol рассмотрит заявку и в течение одного рабочего дня сообщит стоимость и сроки выполнения.

Заявки обрабатываются специалистами в порядке очереди. Стоит проверить почту (включая папку спам) на письма от techsupport@web-data-extractor.net - поддержка свяжется в ближайшее время. Для уточнения статуса конкретной задачи нужно написать напрямую в техподдержку.

Услуги можно оплатить через Qiwi, Webmoney или Яндекс.Деньги. Для покупки программы нужно зайти на страницу с ценами, заполнить данные, нажать кнопку оформления заказа и выбрать 'Перейти к оплате' - откроется шлюз с выбором способов оплаты.

Да, подробная информация об условиях скидки на вторую лицензию приведена по отдельной ссылке на сайте.

Возврат средств (манибек) не предусмотрен условиями покупки. Альтернатива - продать лицензию другому человеку; поддержка может предоставить список форумов, где пользователи размещают объявления о продаже.

Для разбора нужно уточнить в поддержке: дату оплаты и email, на который была совершена покупка; заходил ли покупатель ранее на сайт по другим партнерским ссылкам; видел ли он информацию о скидке в окне подтверждения заказа. Эти детали помогают определить, должна ли была начислиться комиссия.

Проблемы с оплатой картой могут быть на стороне платежной системы или банка-эмитента. Рекомендуется обратиться в поддержку Interkassa по адресу support@interkassa.com или связаться со своим банком; также можно воспользоваться альтернативным способом оплаты.

Убедитесь, что в браузере включены cookies. Информация о скидке отображается только на странице подтверждения заказа - она появляется после нажатия кнопки "Купить", на промежуточных страницах её не видно.

На странице цен выберите валюту "грн", чтобы увидеть цены в гривнах. Валюту также можно выбрать прямо на странице оформления заказа.

Datacol не работает напрямую с юрлицами и не выставляет счета. Для оплаты от компании можно использовать посредников - solar-staff.com или fl.ru/promo/bezopasnaya-sdelka - они предоставят закрывающие документы, а Datacol выступит как физлицо. Комиссию сервиса оплачивает покупатель.

Все условия приобретения программы указаны в публичной оферте (ссылка на странице). Цена начинается от $18, доступна демо-версия для скачивания.

Откройте окно Активации, максимально точно заполните все поля и нажмите "Отправить". После успешной активации перезапустите программу, чтобы начать работу с полной версией.

После оплаты на указанный при покупке email придет код активации программы и информация о сроке действия лицензии. Для активации используйте инструкцию по активации.

Нет, лицензия на Datacol ограничена по времени, минимальный срок - 1 месяц. Это подписка, а не разовая покупка - актуальные тарифы смотрите на странице цен.

Оплата через Interkassa (в том числе банковским переводом) обрабатывается 1-2 рабочих дня, после чего код активации приходит на почту. Проверьте папку "Спам", а если по истечении срока кода нет - обратитесь в поддержку Datacol или в Interkassa (support@interkassa.com).

Да, Datacol периодически продает лицензии через Складчину. Подробности уточняйте у организаторов складчины.

Есть недокументированная возможность: создайте файл proxy.txt в папке %APPDATA%\Datacol7 и укажите в нем данные прокси в формате "ip:port" или "ip:port:login:password".

Нужно выполнить сброс активации через специальную страницу на сайте, после чего активировать программу заново тем же кодом.

Обратитесь в поддержку через форму "Задать вопрос" на сайте (можно также написать в Telegram-канал поддержки) - там email, привязанный к покупке, поменяют вручную.

Файл license.dat с кодом активации находится в папке с настройками программы. Открыть его можно любым текстовым редактором.

Нужно активировать программу заново тем же способом, что и в первый раз, точно указав email и код активации - остальные поля могут заполняться неточно.

Перенос лицензии разрешен раз в 2 месяца. Исключение - если перенос еще ни разу не делался, тогда его можно выполнить в любой момент; после первого переноса действует обычный двухмесячный интервал.

Да, можно регистрировать несколько лицензий на один и тот же email.

Бесплатно - нет, обнуление возможно раз в 2 месяца. Если нужно чаще, поддержка может сделать внеплановое обнуление лицензии (с возможностью повторной активации) за $10.

Перед переустановкой Windows скопируйте файл license.dat из папки с настройками программы на съемный носитель. После переустановки Windows и Datacol7 вставьте этот файл обратно в папку настроек - это сохранит активацию без повторной регистрации.

Откройте программу, нажмите кнопку "Информация о лицензии" - код активации отобразится в поле "Код активации".

Сбросьте активацию через страницу на сайте, установите демо-версию на новом компьютере и активируйте ее тем же кодом. Перенос программы разрешен не чаще раза в 2 месяца, кроме самого первого переноса.

Перед переустановкой Windows скопируйте файл license.dat из папки настроек программы на съемный носитель, а после установки Datacol на новую систему - верните файл обратно. Переактивация при переустановке Windows бесплатна. Если файл не сохранили заранее, потребуется сначала сбросить код активации через страницу на сайте.

На сайте есть скриншот с указанием способов оплаты через терминал (выделены на изображении). Точный список терминалов-партнеров уточняйте у поддержки при необходимости.

633 рубля в месяц получается при оплате годовой лицензии - это самый выгодный вариант по сравнению с 3-месячной подпиской (обычно 3390 руб., по акции 2555 руб.). Актуальные цены смотрите на странице покупки.

Скорее всего при установке случайно удалился файл license.dat с кодом активации. Откройте папку программы (Ctrl+E в главном окне), проверьте наличие и содержимое license.dat; если файла нет или он пуст - создайте его заново и вставьте код активации без лишних пробелов и символов.

Демо-версия ограничена 25 результатами, без техподдержки, платного обучения, разработки плагинов, партнерских бонусов и без возврата денег. Полная лицензия снимает лимит на сбор данных и включает поддержку, обучение, разработку плагинов, партнерскую программу и 7-дневную гарантию возврата денег. В обеих версиях доступны 80+ готовых парсеров, бесплатные обновления и обучающие материалы. Цена от $18.

Отдельной полной версии не существует - версия одна и та же, просто активированная или нет. Если у вас уже есть активация Datacol7, она автоматически переносится при установке новой версии программы. Скачайте демо и активируйте его лицензией (от $18).

Ограничений по времени работы нет. Ограничения касаются объема собираемых данных и объема поддержки - подробности смотрите на странице покупки.

Главное ограничение демо - экспорт не более 25 результатов. Полное сравнение различий смотрите на странице покупки.

Отключить всплывающие подсказки можно через соответствующую опцию в настройках программы (см. скриншот на странице поддержки).

Да, можно приобрести Datacol и настроить в нем нужную конфигурацию (кампанию). Перед покупкой рекомендуется описать задачу команде поддержки по их правилам, со скриншотами, чтобы проверить её выполнимость - возможна как индивидуальная настройка, так и использование готовой базовой кампании. Цена от $18.

Продукт продается более 3 лет и имеет много отзывов на популярных форумах. Условия техподдержки и сопровождения программы описаны в разделе 5 публичной оферты.

Запустите установщик от имени администратора, затем и саму программу Datacol7 - тоже от администратора. Перед переустановкой рекомендуется удалить папку Datacol7 в %APPDATA%.

Базовый комплект - это лицензия программы плюс бесплатные базовые настройки парсинга (иногда их ошибочно называют плагинами), а также отдельные платные плагины, расширяющие возможности программы. Базовые настройки доступны и в демо-версии, поэтому перед покупкой рекомендуется протестировать нужную настройку.

Одна лицензия действует только на одном компьютере согласно условиям покупки. Для работы на втором компьютере нужно приобрести вторую лицензию со скидкой.

Если письмо со ссылкой не пришло, демо-версию можно скачать напрямую по прямой ссылке на сайте или через кнопку «скачать демо версию» в навигации.

На сегодняшний день API не предусмотрено, но в будущем разработчики планируют его добавить.

Автообновление можно отключить в настройках программы. Но тем, кто это делает, рекомендуется вручную скачивать и устанавливать последнюю версию с сайта хотя бы раз в месяц.

Нужно скачать и установить последнюю версию программы с сайта - это восстановит настройки демо-версии по умолчанию.

Нужно скачать последнюю версию с сайта и установить её - активация после обновления сохранится. Кампании, названия которых совпадают со стандартными настройками, будут заменены на обновлённые, поэтому изменённые кампании стоит переименовать перед обновлением. Автоматическую проверку и установку обновлений можно отключить в настройках.

Нужно воспользоваться пошаговой инструкцией по тестированию, размещённой на странице парсера в интернет-магазине.

Настройки подбираются под потребности аудитории каждого языка отдельно, но это не ограничивает пользователя - нужную настройку можно экспортировать из одной версии и импортировать в другую.

Сайт прокси не продаёт, но советует выбирать анонимные HTTP-прокси (их поддерживает Datacol), брать пробный тест перед покупкой, качественные прокси, продающиеся «в одни руки», и проверять, что они не забанены на нужных ресурсах. Также можно попросить рекомендацию проверенного поставщика у поддержки.

Сначала стоит запустить Datacol от имени администратора. Если не помогло - временно отключить антивирус и файрвол и попробовать снова. Если проблема осталась, нужно сообщить в поддержку версию и разрядность ОС и приложить скриншот или описание того, что происходит при запуске.

Все задачи, которые решались в Datacol4 и Datacol5, можно решить и в Datacol7. Обе старые версии больше не распространяются и не поддерживаются - нужно описать задачу в поддержку и получить помощь по её реализации в Datacol7.

Да, настройки, сделанные в Datacol5, совместимы с Datacol7.

Да, они не мешают работе друг друга и могут быть установлены и использоваться одновременно на одном компьютере.

Для работы нужны Microsoft .NET Framework 4 и Microsoft Internet Explorer 7 или новее.

Нужно открыть папку программы (через соответствующий пункт меню или сочетание клавиш Ctrl+E) - внутри неё находится папка Plugins с доступными плагинами.

Переход на Datacol7 бесплатный, программа устанавливается независимо от Datacol5, и обе версии могут работать на одном компьютере. Если Datacol5 была активирована, активация автоматически подхватится в Datacol7; если нет - можно вручную скопировать файл лицензии из папки Datacol5 в папку Datacol7, либо сбросить активацию (сброс доступен не чаще раза в два месяца). Кампании из Datacol5 переносятся автоматически в папку кампаний Datacol7, вручную переносить их не нужно.

Стоит повторить попытку активации - сервер обычно доступен. Если ошибка повторяется, нужно обратиться к системному администратору: причиной может быть блокировка запроса файрволом или использование внутреннего прокси-сервера.

Если провайдер выдаёт динамический IP, перезагрузка роутера может сменить адрес и снять блокировку (если не заблокирована вся подсеть). Для этого можно использовать VBS-скрипт, который подключается к роутеру по telnet, авторизуется и выполняет команду перезагрузки; сама команда перезагрузки зависит от модели роутера (пример дан для ZyXEL RT-V4L1USBn).

Версия Datacol для Mac находится в разработке, на неё можно записаться со скидкой 60%. Пока есть два варианта запуска на Mac OS: установить CrossOver и вручную поставить .NET 4.0/4.5 и Internet Explorer 8.0, либо (при нестабильной работе первого варианта) поставить Parallels Desktop с Windows XP SP3 - в этом случае Datacol работает стабильно и без проблем.

Разработчики тестировали конфигурацию, где основная ОС - Linux Ubuntu 14.04, а гостевая - Windows 7 в VirtualBox 4.3.30. Подробной пошаговой инструкции для Linux на странице нет, за деталями нужно обращаться к онлайн-документации и в поддержку.

Нужно удалить соответствующий конфигурационный файл на компьютере и перезапустить программу - это устраняет ошибку инициализации.

Если Datacol работает в виртуальной Windows на Mac, кэш по умолчанию создаётся в общей папке (vmware-hostShared Folders). Чтобы изменить путь, нужно отключить Shared Folders в настройках виртуальной машины - тогда папки Datacol_Cache и Datacol_Logs будут создаваться внутри виртуальной среды, в C:\Users\Admin\Documents.

Удобно использовать сервис Screencast-o-matic.com: установить приложение (разрешив его в файрволе), запустить запись экрана через сайт, остановить и нажать «Done», выбрать публикацию на YouTube, добавить название и описание и нажать «Publish». Сервис быстро загружает видео и выдаёт готовую ссылку на YouTube.

Поведение настраивается - Datacol поддерживает оба сценария через механизм очереди и истории. Подробности описаны в документации по очереди и истории.

Проблема встречается примерно на 1 из 50 компьютеров и связана с багом в Gecko - компоненте встроенного браузера. Разработчики работают над решением, а временный обходной путь - перенести программу на другой компьютер (для лицензии есть отдельная инструкция по переносу активации).

Проблема обычно возникает на компьютерах с двумя видеокартами в режиме максимальной производительности. Решение - переключить схему электропитания на сбалансированный режим, чтобы снять конфликт между графическими адаптерами.

Есть прямая ссылка для скачивания. Частые причины проблемы: не отмечена галочка согласия на использование персональных данных, либо перепутаны местами поля имени и email при регистрации. Если проблема не решается, можно написать в поддержку через Telegram.

Актуальная версия Datacol доступна по прямой ссылке на сайте; там же можно скачать демо-версию или купить лицензию (от 18 долларов).

Последняя 64-битная версия доступна по отдельной ссылке на сайте поддержки; её стоит использовать при ошибках нехватки памяти. Требуется 64-битная Windows 7 или новее, минимум 4 ГБ RAM и 2 ГБ на диске. При переходе с 32-бит на 64-бит история парсинга не переносится автоматически - пользовательские настройки парсеров нужно переносить через импорт/экспорт.

Причина обычно в устаревшей ОС вроде Windows XP - решение: установить более современную систему. Альтернативно можно откатиться на предыдущую версию Datacol, но тогда будут недоступны новые функции вроде автонастройки; при этом нужно отменить автообновление при следующем запросе и отключить проверку обновлений в настройках, чтобы программа снова не обновилась.

При покупке лицензии бесплатно доступны все парсеры из базового набора - более 80 готовых настроек для разных сайтов. Если нужной настройки нет в базовом наборе, её можно создать самому (по видеоурокам и документации) или заказать у специалистов компании.