Программы и сервисы для парсинга

1
A-Parser

A-Parser

star star star star star

A-Parser - многопоточный парсер поисковых систем, сервисов оценки сайтов, ключевых слов, контента(текст, ссылки, произвольные данные) и других различных сервисов(youtube, картинки, переводчик...), всего A-Parser содержит более 70 парсеров.

2
Apify

Apify

star star star star star

Сервис парсинга со специфическими функциями RequestQueue и AutoscaledPool. Возможности: парсинг под несколько форматов данных — JSON, JSONL, CSV, XML, XLSX или HTML с CSS, поддержка любого типа сайтов, встроенная поддержка Puppeteer, мгновенный запуск.

3
Automation Anywhere

Automation Anywhere

star star star star star

Роботизированная платформа, позволяющая создавать программных ботов для автоматизации задач от начала и до конца. Возможности: использование скриптов VBS и JavaScript, гибкие инструменты автоматизации процессов, множество встроенных функций и т. п.

4
Beautiful Soup

Beautiful Soup

star star star star star

Библиотека Python для парсинга HTML и XML документов. Возможности: автоматическое преобразование входящих документов в Unicode и исходящих — в UTF-8, Python-идиомы для работы и извлечения информации, использование различных стратегий для парсинга и т. д.

5
Catalogloader

Catalogloader

star star star star star

Универсальный парсер, который специализируется на обработке данных для интернет-магазинов. Возможности: конвертеры YML и Excel файлов, экспорт в CSV Excel YML XML для популярных магазинов, импорт данных в базу данных интернет-магазинов и MySql и т. д.

6
CleverTarget

CleverTarget

star star star star star

Сервис поиска, отбора и фильтрации аудитории на основе методов искусственного интеллекта. Возможности: парсинг-инструменты для поиска целевой аудитории, инструменты нацеливания объявления на горячую аудиторию, кабинет для работы с таргетом в VK.

7
dexi.io

dexi.io

star star star star star

Парсинговый редактор, не требующий загрузки дополнительных приложений. Возможности: поддержка сбора данных с любого сайта, различные типы роботов для парсинга, интеграция с хранилищами Google Drive, Box.net, а также экспорт данных в формате JSON или CSV.

8
Ficstar

Ficstar

star star star star star

Один из популярных англоязычных сервисов парсинга со страниц с большими данными. Возможности: интеграция в любую базу данных, мониторинг социальных сетей, мониторинг ценовой стратегии бизнес-конкурентов и т. д. Есть бесплатная демоверсия.

9
FMiner

FMiner

star star star star star

Визуальный инструмент для парсинга сайтов, интернет-магазинов, онлайн-каталогов, порталов с объявлениями. Возможности: захват экрана при веб-сёрфинге, несколько вариантов обхода страниц, поддержка Windows/Mac, интуитивно понятный интерфейс и т. д.

10
Grepsr

Grepsr

star star star star star

Англоязычный сервис парсинга данных с любых сайтов. Возможности: получение данных для поиска потенциальных клиентов, мониторинга цен, исследований рынка или агрегации контента, неограниченная скорость сканирования, однократное извлечение и т. п.

11
Helium Scraper

Helium Scraper

star star star star star

Один из популярных англоязычных сервисов парсинга данных. Возможности: поддержка нескольких форматов экспорта, функция «укажи и щелкни» для оперативного извлечения данных, добавление собственных расширений в формате 0.NET и т. п.

12
Import.io

Import.io

star star star star star

Англоязычный сервис, позволяющий извлекать данные с разных сайтов. Возможности: поиск данных в режиме реального времени через API-интерфейсы JSON REST и потоковые интерфейсы, интеграция с популярными языками программирования. Имеется пробный период.

13
Mozenda

Mozenda

star star star star star

Англоязычный парсинговый сервис, помогающий собирать разные типы данных с интернет-страниц. Возможности: доступ как к облачной, так и к десктопной версии продукта, извлечение данных, просмотр и выгрузка в любом удобном виде и т. д.

14
Octoparse

Octoparse

star star star star star

Сервис для сканирования веб-данных и парсинга нужной информации с любых страниц. Возможности: извлечение изображений и номеров телефонов, прайсов, почтовых адресов, ip-адресов, подключение по API и т. д. Имеется пробный период и бесплатный тариф.

15
OutwitHub

OutwitHub

star star star star star

Дополнение к Firefox с десятками функций извлечения данных. Возможности: автоматический просмотр данных в браузере и хранение извлеченной информации в подходящем формате, удобный, интуитивно понятный интерфейс. Приложение абсолютно бесплатно.