A-Parser - многопоточный парсер поисковых систем, сервисов оценки сайтов, ключевых слов, контента(текст, ссылки, произвольные данные) и других различных сервисов(youtube, картинки, переводчик...), всего A-Parser содержит более 50 парсеров ( http://a-parser.com/wiki/parsers/ )
A-Parser полностью решает рутинные задачи по получению, обработки и систематизации данных, необходимых для работы в следующих областях:
SEO-оптимизация сайтов и Web-аналитика
•Сбор баз ссылок для XRumer, A-Poster, AllSubmitter, ZennoPoster...
•Оценка сайтов и доменов по множеству параметров
•Мониторинг позиции любых сайтов в поисковых системах
•Сбор контента(текст, картинки, ролики) для генерации сайтов(дорвеев)
•Отслеживание обратных ссылок
•Сбор произвольной информации с любых сайтов(например телефоны/e-mails, сообщения с форумов, объявления...)
•Сбор и оценка ключевых слов
•Сбор списка обратных ссылок
•И многое другое
Web-безопасность
•Сбор и фильтрация баз ссылок по признакам
•Определение CMS сайтов
•Формирование произвольных GET, POST запросов с одновременной фильтрацией ответа
Сетевое администрирование
•Работа с DNS службой - резолвинг доменов в IP адреса
•Работа с Whois - дата регистрации и окончания регистрации доменов, name-cервера
A-Parser обладает следующими преимуществами:
Колоссальная производительность
•Многопоточность - парсер способен распараллеливать сетевые операции до 5000-10000 потоков в зависимости от конфигурации компьютера и решаемой задачи
•Продуманная внутренняя архитектура, в которую заложена производительность и расширяемость
•Множественные оптимизации сложных операций
•Парсер не требователен к ресурсам, может работать как на компьютере, так и на VDS или сервере, на операционных системах Windows, Linux или FreeBSD
Промышленные масштабы
•Парсер разрабатывался с учетом работы с неограниченным размером данных
•Способен обрабатывать сотни миллионов и миллиардов запросов
•Размеры файлов запросов и результатов ничем не ограничены и могут достигать терабайтных значений
Автономность
•A-Parser рассчитан на бесперебойную и беспрерывную работу без участия пользователя
•Очередь заданий позволяет нагрузить парсер работой на недели и месяцы вперед
•Одновременное выполнение нескольких разных задач для скорейшего получения результатов
Поддержка более 50 парсеров
•Парсеры поисковых систем: Google, Yandex, AOL, Bing, Baidu, DuckDuckGo, QIP, Yahoo, YouTube
•Парсеры подсказок поисковых систем: Google, Yandex, Bing, Yahoo
•Парсеры и анализ ключевых слов: кейворды и частотность по Yandex.WordStat, в т.ч. по датам и регионам; частотность по Yandex.Direct; Google Trends
•Регистрация аккаунтов: Yandex
•Парсеры параметров сайтов и доменов: позиции в поисковых системах Google, Yandex, QIP; PageRank, TrustRank, Compromised, SafeBrowsing, LangDetect, LangDetect через Bing, тИЦ, Whois, DNS, CMS, Ahrefs, Alexa, Category, DMOZ, Linkpad, MajesticSEO, OpenSiteExplorer, SEMrush
•Парсеры различных сервисов: Bing Translator, Google Images, Bing Images, Google Maps, Yandex Catalog, Yandex.Direct, AntiGate
•Парсеры контента: TextExtractor, LinkExtractor, TextExtractor LangDetect, BackLink, HTTP парсер для создания произвольных парсеров
Создание собственных парсеров
•Использование регулярных выражений
•Поддержка многостраничного парсинга
•Проверка контента и наличия следующей страницы
Мощные инструменты для формирования запросов и результатов
•Конструктор запросов и результатов - позволяет видоизменять данные(поиск и замена, выделение домена из ссылки, преобразования по регулярным выражениям...)
•Подстановки для запросов: из файла; перебор слов, символов и цифр
•Фильтрация результатов - по вхождению подстроки, равенству, больше\меньше
•Уникализация результатов - по строке, по домену, по главному домену(A-Parser знает все домены верхнего уровня, в т.ч. такие как co.uk, msk.ru)
•Мощный шаблонизатор результатов на основе Template Toolkit - позволяет выводить результаты в любом удобном виде(текстом, csv, html, xml, произвольный формат)
Гибкость настроек
•В парсере используется система пресетов - для каждого парсера можно создать множество предустановленных настроек для различных ситуаций
•Настроить можно все - никаких рамок и ограничений
•Экспорт и импорт настроек позволяет легко обмениваться опытом с другими пользователями
Сетевые возможности
•Поддержка HTTP/1.1 и HTTPS
•Поддержка HTTP и SOCKS5 прокси, в т.ч. с авторизацией
•Полностью асинхронная работа с сетью, в т.ч. с DNS
API
•Возможность интегрировать и управлять парсером из своих программ и скриптов
•Полная автоматизация бизнес-процессов
•Клиенты для PHP, Perl и Python
Постоянные улучшения и исправления
•Разработка парсера началась в 2011 году, а первый релиз вышел зимой 2012 года
•С тех пор было выпущено более 70 новых версий, включающих множество улучшений и исправлений
•A-Parser не останавливается в развитии, идет активная разработка, будет реализовано множество новых функций, в т.ч. по запросам от пользователей
Техническая поддержка
•Мы прилагаем все усилия по поддержке пользователей и ответам на все возникающие вопросы
•Создана подробная документация по A-Parser'у, открыт форум для пользователей
•Специалист технической поддержки готов ответить любым удобным способом: ICQ, Skype, Jabber, GoogleTalk, e-mail и через форму онлайн связи на сайте
•Разработчик A-Parser'а готов ответить на любые сложные и технические вопросы, также открыт к обсуждению улучшений и дополнений для парсера
Более подробно ознакомится с возможностями парсера можно в полноценной документации ( http://a-parser.com/wiki/index/ )
A-Parser предоставляется в трех версиях, сравнительная таблица и стоимость лицензий:
Мы принимаем к оплате в автоматическом режиме все популярные платежные системы, такие как WebMoney, PayPal, Visa, MasterCard, Paxum, Яндекс.Деньги, QIWI, PerfectMoney, банковские переводы, терминалы оплаты и многое другое.
Для приобретения лицензии необходимо зарегистрироваться на сайте a-parser.com и перейти на страницу оплаты ( http://a-parser.com/pages/buy/ ).
Если у вас возникли вопросы - обращайтесь по любым контактам в техническую поддержку ( http://a-parser.com/pages/support/ )
A-Parser полностью решает рутинные задачи по получению, обработки и систематизации данных, необходимых для работы в следующих областях:
SEO-оптимизация сайтов и Web-аналитика
•Сбор баз ссылок для XRumer, A-Poster, AllSubmitter, ZennoPoster...
•Оценка сайтов и доменов по множеству параметров
•Мониторинг позиции любых сайтов в поисковых системах
•Сбор контента(текст, картинки, ролики) для генерации сайтов(дорвеев)
•Отслеживание обратных ссылок
•Сбор произвольной информации с любых сайтов(например телефоны/e-mails, сообщения с форумов, объявления...)
•Сбор и оценка ключевых слов
•Сбор списка обратных ссылок
•И многое другое
Web-безопасность
•Сбор и фильтрация баз ссылок по признакам
•Определение CMS сайтов
•Формирование произвольных GET, POST запросов с одновременной фильтрацией ответа
Сетевое администрирование
•Работа с DNS службой - резолвинг доменов в IP адреса
•Работа с Whois - дата регистрации и окончания регистрации доменов, name-cервера
A-Parser обладает следующими преимуществами:
Колоссальная производительность
•Многопоточность - парсер способен распараллеливать сетевые операции до 5000-10000 потоков в зависимости от конфигурации компьютера и решаемой задачи
•Продуманная внутренняя архитектура, в которую заложена производительность и расширяемость
•Множественные оптимизации сложных операций
•Парсер не требователен к ресурсам, может работать как на компьютере, так и на VDS или сервере, на операционных системах Windows, Linux или FreeBSD
Промышленные масштабы
•Парсер разрабатывался с учетом работы с неограниченным размером данных
•Способен обрабатывать сотни миллионов и миллиардов запросов
•Размеры файлов запросов и результатов ничем не ограничены и могут достигать терабайтных значений
Автономность
•A-Parser рассчитан на бесперебойную и беспрерывную работу без участия пользователя
•Очередь заданий позволяет нагрузить парсер работой на недели и месяцы вперед
•Одновременное выполнение нескольких разных задач для скорейшего получения результатов
Поддержка более 50 парсеров
•Парсеры поисковых систем: Google, Yandex, AOL, Bing, Baidu, DuckDuckGo, QIP, Yahoo, YouTube
•Парсеры подсказок поисковых систем: Google, Yandex, Bing, Yahoo
•Парсеры и анализ ключевых слов: кейворды и частотность по Yandex.WordStat, в т.ч. по датам и регионам; частотность по Yandex.Direct; Google Trends
•Регистрация аккаунтов: Yandex
•Парсеры параметров сайтов и доменов: позиции в поисковых системах Google, Yandex, QIP; PageRank, TrustRank, Compromised, SafeBrowsing, LangDetect, LangDetect через Bing, тИЦ, Whois, DNS, CMS, Ahrefs, Alexa, Category, DMOZ, Linkpad, MajesticSEO, OpenSiteExplorer, SEMrush
•Парсеры различных сервисов: Bing Translator, Google Images, Bing Images, Google Maps, Yandex Catalog, Yandex.Direct, AntiGate
•Парсеры контента: TextExtractor, LinkExtractor, TextExtractor LangDetect, BackLink, HTTP парсер для создания произвольных парсеров
Создание собственных парсеров
•Использование регулярных выражений
•Поддержка многостраничного парсинга
•Проверка контента и наличия следующей страницы
Мощные инструменты для формирования запросов и результатов
•Конструктор запросов и результатов - позволяет видоизменять данные(поиск и замена, выделение домена из ссылки, преобразования по регулярным выражениям...)
•Подстановки для запросов: из файла; перебор слов, символов и цифр
•Фильтрация результатов - по вхождению подстроки, равенству, больше\меньше
•Уникализация результатов - по строке, по домену, по главному домену(A-Parser знает все домены верхнего уровня, в т.ч. такие как co.uk, msk.ru)
•Мощный шаблонизатор результатов на основе Template Toolkit - позволяет выводить результаты в любом удобном виде(текстом, csv, html, xml, произвольный формат)
Гибкость настроек
•В парсере используется система пресетов - для каждого парсера можно создать множество предустановленных настроек для различных ситуаций
•Настроить можно все - никаких рамок и ограничений
•Экспорт и импорт настроек позволяет легко обмениваться опытом с другими пользователями
Сетевые возможности
•Поддержка HTTP/1.1 и HTTPS
•Поддержка HTTP и SOCKS5 прокси, в т.ч. с авторизацией
•Полностью асинхронная работа с сетью, в т.ч. с DNS
API
•Возможность интегрировать и управлять парсером из своих программ и скриптов
•Полная автоматизация бизнес-процессов
•Клиенты для PHP, Perl и Python
Постоянные улучшения и исправления
•Разработка парсера началась в 2011 году, а первый релиз вышел зимой 2012 года
•С тех пор было выпущено более 70 новых версий, включающих множество улучшений и исправлений
•A-Parser не останавливается в развитии, идет активная разработка, будет реализовано множество новых функций, в т.ч. по запросам от пользователей
Техническая поддержка
•Мы прилагаем все усилия по поддержке пользователей и ответам на все возникающие вопросы
•Создана подробная документация по A-Parser'у, открыт форум для пользователей
•Специалист технической поддержки готов ответить любым удобным способом: ICQ, Skype, Jabber, GoogleTalk, e-mail и через форму онлайн связи на сайте
•Разработчик A-Parser'а готов ответить на любые сложные и технические вопросы, также открыт к обсуждению улучшений и дополнений для парсера
Более подробно ознакомится с возможностями парсера можно в полноценной документации ( http://a-parser.com/wiki/index/ )
A-Parser предоставляется в трех версиях, сравнительная таблица и стоимость лицензий:
Мы принимаем к оплате в автоматическом режиме все популярные платежные системы, такие как WebMoney, PayPal, Visa, MasterCard, Paxum, Яндекс.Деньги, QIWI, PerfectMoney, банковские переводы, терминалы оплаты и многое другое.
Для приобретения лицензии необходимо зарегистрироваться на сайте a-parser.com и перейти на страницу оплаты ( http://a-parser.com/pages/buy/ ).
Если у вас возникли вопросы - обращайтесь по любым контактам в техническую поддержку ( http://a-parser.com/pages/support/ )
Изменено:
Prapovednik - 21 Августа 2019 01:35
(поправил ссылки)