A-Parser - универсальный многопоточный парсер

A-Parser - универсальный многопоточный парсер поисковых систем, сервисов SEO метрик, поисковых запросов и подсказок, контента любого типа (картинки, текст, видео), каталогов (парсинг любых контактных данных), досок объявлений, интернет-магазинов, социальных сетей, мессенджеров и других различных сервисов. Всего A-Parser содержит более 90 встроенных парсеров и 200 дополнительных. Гибкость A-Parser позволяет решать практически любые задачи парсинга, создавая собственные парсеры на JavaScript, а также интегрировать A-Parser в свои SaaS проекты с помощью API.

На сегодняшний день A-Parser может автоматизировать и забрать на себя выполнение огромного количества работы SEO специалистов, маркетологов, фрилансеров, разработчиков, а также решает много задач для собственников интернет-магазинов (парсинг карточек товара, подготовка файла для импорта, мониторинг цен и многое другое):

• Используйте встроенные парсеры чтобы с легкостью получать и анализировать любые данные
• Воспользуйтесь нашим каталогом парсеров и пресетов для расширения возможностей A-Parser и решения нестандартных задач
• Если вы продвинутый пользователь - создавайте свои собственные парсеры на основе регулярных выражений или XPath
• Владеете JavaScript? Тогда A-Parser предлагает вам беспрецедентную возможность программировать свои собственные парсеры, используя всю мощь возможностей A-Parser!
• Для автоматизации мы предлагаем API позволяющий легко встроить A-Parser в ваши бизнес процессы, а также для создания сервисов любого уровня сложности на базе нашего парсера

Если вам необходимо быстро выполнить сложный парсинг, то вы можете обратиться в нашу платную техподдержку. Наши специалисты помогут составить техническое задание, и в кратчайшие сроки напишут парсер под ваши требования, за умеренную цену (от $15). Можете быть уверены что будут учтены все пожелания, и в результате вы получите структурированные данные в том виде (CSV, JSON, XML, SQL) который нужен будет для дальнейшего использования.
A-Parser полностью решает рутинные задачи по получению, обработке и систематизации данных, необходимых для работы в следующих областях:

• Электронная торговля (интернет-магазины и маркетплейсы)
  • Парсинг товаров с мировых маркетплейсов: Яндекс.Маркет, AliExpress, Ebay, Amazon.com, данные парсеры всегда актуальны и обновляются
  • Мониторинг цен конкурентов
  • Выгрузка товаров в нужном формате для дальнейшей обработки
  • Множество пресетов для парсинга различных магазинов и маркетплейсов: copart.com, Hotline.ua, Rozetka
• SEO, маркетинг и Web-аналитика
  • Сбор баз ссылок для XRumer, AllSubmitter, ZennoPoster…
  • Сбор ссылок, анкоров, сниппетов, рекламных блоков из поисковой выдачи (до 500000 ссылок в минуту)
  • Сбор SEO метрик с таких сервисов: Alexa, Ahrefs, Moz, Majestic, Semrush и других
  • Оценка сайтов и доменов по множеству параметров
  • Мониторинг позиции любых сайтов в поисковых системах
  • Сбор контента(текст, картинки, ролики)
  • Отслеживание обратных ссылок
  • Сбор произвольной информации с любых сайтов(например телефоны/e-mails, сообщения с форумов, объявления...)
  • Сбор и оценка ключевых слов
  • Сбор списка обратных ссылок
  • Сбор и оценка трендовых запросов
  • Парсинг рекламных объявлений конкурентов
  • Сбор отзывов с различных источников
  • Парсинг данных с Инстаграм (по гео, хэштегам и тд)
  • Парсинг данных с чатов Телеграм
  • И многое другое
• Web-безопасность
  • Сбор и фильтрация баз ссылок по признакам
  • Определение CMS сайтов
  • Формирование произвольных GET, POST запросов с одновременной фильтрацией ответа
• Сетевое администрирование
  • Работа с DNS службой - резолвинг доменов в IP адреса
  • Работа с Whois - дата регистрации и окончание регистрации доменов, name-сервера

A-Parser обладает следующими преимуществами:

• Колоссальная производительность
  • Многопоточность - парсер способен распараллеливать сетевые операции до 5000-10000 потоков в зависимости от конфигурации компьютера и решаемой задачи
  • Продуманная внутренняя архитектура, в которую заложена производительность и расширяемость
  • Множественные оптимизации сложных операций
  • Парсер не требователен к ресурсам, может работать как на компьютере, так и на VDS или сервере, на операционных системах Windows, Linux или FreeBSD
• Промышленные масштабы
  • Парсер разрабатывался с учетом работы с неограниченным размером данных
  • Способен обрабатывать сотни миллионов и миллиардов запросов
  • Размеры файлов запросов и результатов ничем не ограничены и могут достигать терабайтных значений
• Автономность
  • A-Parser рассчитан на бесперебойную и беспрерывную работу без участия пользователя
  • Очередь заданий позволяет нагрузить парсер работой на недели и месяцы вперед
  • Одновременное выполнение нескольких разных задач для скорейшего получения результатов
• Поддержка более 90 парсеров
• Создание собственных пресетов
  • Использование регулярных выражений
  • Поддержка XPath
  • Поддержка многостраничного парсинга
  • Проверка контента и наличия следующей страницы
• Создание собственных парсеров
  • Быстрая разработка на JavaScript
  • Многопоточность и работу с прокси обеспечивает A-Parser
• Распознавание каптчи
  • Поддержка множества сервисов: anti-captcha, rucaptcha и любых других на основе AntiGate API
  • Поддержка CapMonster и XEvil
• Мощные инструменты для формирования запросов и результатов
  • Конструктор запросов и результатов - позволяет видоизменять данные(поиск и замена, выделение домена из ссылки, преобразования по регулярным выражениям...)
  • Подстановки для запросов: из файла; перебор слов, символов и цифр
  • Фильтрация результатов - по вхождению подстроки, равенству, больше\меньше
  • Уникализация результатов - по строке, по домену, по главному домену(A-Parser знает все домены верхнего уровня, в т.ч. такие как co.uk, msk.ru)
  • Мощный шаблонизатор результатов на основе Template Toolkit - позволяет выводить результаты в любом удобном виде(текстом, csv, html, xml, json, sql, произвольный формат)
• Гибкость настроек
  • В парсере используется система пресетов - для каждого парсера можно создать множество предустановленных настроек для различных ситуаций
  • Настроить можно все - никаких рамок и ограничений
  • Экспорт и импорт настроек позволяет легко обмениваться опытом с другими пользователями
• Сетевые возможности
  • Поддержка HTTP/1.1, HTTP/2 и HTTPS(TLS)
  • Поддержка HTTP и SOCKS5 прокси, в т.ч. с авторизацией
  • Полностью асинхронная работа с сетью, включая работу с DNS
  • Обход защиты CloudFlare
• API
  • Возможность интегрировать и управлять парсером из своих программ и скриптов
  • Полная автоматизация бизнес-процессов
  • Клиенты для PHP, Perl, Python и NodeJS
  • Производительное API на основе Redis для продвинутого использования
• Постоянные улучшения и исправления
  • С 2012 года выпущено более 140 новых версий, включающих множество улучшений и исправлений
  • A-Parser не останавливается в развитии, идет активная разработка, будет реализовано множество новых функций, в т.ч. по запросам от пользователей
• Техническая поддержка
  • Мы прилагаем все усилия по поддержке пользователей и ответам на все возникающие вопросы
  • Создана подробная документация по A-Parser'у, открыт форум для пользователей, Ютуб канал, а также Телеграм чат
  • Специалисты технической поддержки готовы ответить любым удобным способом: чат на сайте, Telegram, тикеты, e-mail
  • Разработчики A-Parser'а готовы ответить на любые сложные и технические вопросы, также открыт к обсуждению улучшений и дополнений для парсера

Более подробно ознакомится с возможностями парсера можно в полноценной документации
A-Parser предоставляется в трех версиях, сравнительная таблица и стоимость лицензий:

Мы принимаем к оплате в автоматическом режиме все популярные платежные системы, такие как Bitcoin, WebMoney, Visa, MasterCard, Paxum, Яндекс.Деньги, ApplePay.
Для приобретения лицензии необходимо зарегистрироваться на сайте https://a-parser.com и перейти на страницу оплаты.
Если у вас возникли вопросы - обращайтесь по любым контактам в техническую поддержку

 

[Zanneneto]

У парсера своё API?