Графическая настройка
FlowCrawler работает как конструктор логических схем. Вы добавляете разные блоки, соединяя их между собой. Полученная схема используется как программа для вашего бота
Направьте FlowCrawler на нужный URL и покажите, каким путём вы хотите пройти по сайту и какие части страниц извлечь.
Автоматизируйте постинг на любые сайты. FlowCrawler умеет заполнять формы, ждать загрузки динамических элементов, симулировать клики, нажимать кнопки и многое другое
Перед тем как сохранять собранные данные, вы можете автоматически обработать их любым способом. Фильтруйте, комбинируйте, очищайте - делайте всю финальную подготовку прямо на этапе сбора
Сохраняйте ваши результаты в CSV, XML, JSON или любой другой текстовый формат. FlowCrawler также может отправлять данные на URL, сохранять в базы данных и передавать сторонним программам для обработки
FlowCrawler работает как конструктор логических схем. Вы добавляете разные блоки, соединяя их между собой. Полученная схема используется как программа для вашего бота
Забудьте об окнах с сотнями полей, которые вы заполняли для настройки других парсеров. FlowCrawler превращает настройку в игру
FlowCrawler использует настоящий браузер для загрузки сайтов. Он выполняет все проверки и сайты не могут отличить его от живого посетителя
Благодаря настоящему браузеру под капотом, FlowCrawler прекрасно справляется с динамическим содержимым. Защитные клики, AJAX и веб-сокеты больше не проблема
Чтобы настроить FlowCrawler вам не придется писать код, XPath или CSS селекторы. Любой проект может быть настроен при помощи одной только мыши
FlowCrawler имеет собственную базу активных прокси-серверов. Подключение и ротация прокси для проекта делается в два клика. Сервера подбираются автоматически
FlowCrawler может создавать, читать, копировать и удалять локальные файлы и папки. Возможно рекурсивное сканирование папок. Постройте любую логику для сортировки и обработки ваших файлов
С помощью FlowCrawler можно модифицировать изображения — растягивать или сжимать, обрезать, наносить водяные знаки, менять формат и многое другое
В любом проекте FlowCrawler можно вставить вызов внешней команды, чтобы запустить стороннюю программу с нужными параметрами. Затем можно прочитать консольный вывод и продолжить логику