A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois, etc

Сообщений: 187 Регистрация: Дек 2014

#181

4 Июня 2024 18:39

Обновленные пресеты в каталоге A-Parser

Обновление пресетов в Каталоге примеров A-Parser

Google Indexing API

Парсер для добавления или удаления страниц сайта в Google через Indexing API

* Исправлена ошибка "Cannot init Parser: Error: EISDIR: illegal operation on a directory, read at Object.readSync"
* Изменения в логике обработки запросов

JS::MailValidator

Проверка существования e-mail адресов
* Исправлена проверка Icloud

Парсинг istio.com

Анализ текстов на сервисе istio.com (тошнота, водность, словари, тематика, статистика...)

* Исправлено получение информации
* Добавлена возможность выбора способа получения текста со страниц: HTML::TextExtractor или HTML::ArticleExtractor
* Небольшая оптимизация кода

Парсер отзывов Wildberries Reviews

Сбор отзывов по товарам с wildberries.ru в csv таблицу
* Обновление в связи с изменениями на ресурсе

Проверка категории сайтов через сервис cyren.com

Проверка категории сайтов через сервис https://www.cyren.com/

* Адаптация к изменениям на источнике
* Вместо Util::ReCaptcha2 теперь Util::ReCaptcha3

Еще больше различных парсеров и пресетов в нашем Каталоге!
Присылайте свои идеи для новых парсеров сюда, самые интересные и востребованные мы обязательно реализуем!

A-Parser Support

Сообщений: 187 Регистрация: Дек 2014

#182

14 Июня 2024 18:56

Сборник рецептов #64: скачивание видео из Instagram, проверка e-mail и переводчик Libre Translate

64-й сборник рецептов, в котором представлены парсер для скачивания видео из Instagram, пресет для проверки e-mail в сервисе EmailRep и парсер переводчика Libre Translate.

Instagram Reels Downloader
Парсер для скачивания видео из Instagram. Работает на основе встроенного парсера

Social::Instagram:: Post и в качестве запросов принимает ссылку на пост типа Video/Reel.
Рисунок

Проверка e-mail адресов в сервисе EmailRep
EmailRep - это система парсеров, сканеров и дополнительных сервисов, которая собирает данные об адресах электронной почты, доменах и интернет-персонах. Сервис использует сотни точек данных из профилей социальных сетей, профессиональных сетевых сайтов, утечек учетных данных в Darknet, утечек данных, наборов для фишинга, фишинговых писем, списков спама, открытых почтовых ретрансляторов, спам-ловушек, возраста и репутации домена, доставляемости и многого другого для оценки адреса электронной почты.
Рисунок

Парсер переводчика Libre Translate
Бесплатный API машинного перевода с открытым исходным кодом. В отличие от других API, он не полагается на проприетарных поставщиков, таких как Google или Azure. Вместо этого его механизм перевода основан на библиотеке Argos Translate с открытым исходным кодом.
Рисунок

Еще больше различных рецептов в нашем Каталоге!
Предлагайте ваши идеи для новых парсеров здесь, лучшие будут реализованы и опубликованы.

Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.

Все сборники рецептов

A-Parser Support

Сообщений: 187 Регистрация: Дек 2014

#183

26 Июня 2024 00:15

1.2.2347 - 2 новых парсера WordCraft и Instagram Search, поддержка puzzle каптчи в Яндексе

Рисунок

Улучшения

* Добавлены новые парсеры:
- SE::Yandex::WordCraft - это часть сервиса Яндекс Вебмастер, с помощью которого вы можете подобрать целевые запросы для продвижения и рекламы, учитывая популярность и конкурентную среду
- Social::Instagram::Search - поиск профилей, тегов, локаций по ключевым словам в Instagram
* Изменения в SE::Yandex:
- добавлена поддержка новой puzzle каптчи, подробнее здесь и здесь
- реализована возможность парсить через браузер, подробнее здесь
* В Social::Instagram::Post добавлен сбор ссылок на видео
* В Maps::Yandex добавлен вывод статуса закрытия организации
* В Check::RosKomNadzor добавлена поддержка реестра nap.rkn.gov.ru

Исправления в связи с изменениями в выдаче

* Исправлено получение картинки каптчи в Check::RosKomNadzor, а также в целом исправлена его работа
* Исправлена ошибка SC parameter was found в SE::Startpage
* Исправлена работа SE::Yandex::Video
* Исправлена ошибка определения регистрации доменов .au в Net::Whois
* Shop::Yandex::Market, SE::Google::Images, SE::DuckDuckGo

Исправления

* Исправлено авторазгадывание в Util::Turnstile

A-Parser Support

Сообщений: 187 Регистрация: Дек 2014

#184

6 Июля 2024 22:35

Сборник статей #19: проверка наличия контента на странице и уведомления в Telegram

Представляем 19-й сборник статей, в котором содержатся две статьи от нашего пользователя @Reset: определение наличия контента на странице с выводом в таблицу и уведомление о выполненном задании в Telegram.

Как определить наличие контента в теле страницы и вывести в таблицу
В качестве примера рассмотрено определение наличия некоторых модулей на сайтах Wordpress и его легко можно адаптировать под аналогичные задачи.

Рисунок

Уведомление об выполненном задании в Telegram
Ранее мы уже публиковали способ получения уведомлений о завершении работы задания через Цепочку заданий. А в этой статье показано как это можно сделать через PHP скрипт.

Рисунок

Если вы хотите, чтобы мы более подробно раскрыли какой-то функционал парсера, у вас есть идеи для новых статей или вы желаете поделиться собственным опытом использования A-Parser (за небольшие плюшки) - отписывайтесь здесь.

Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.

Все сборники статей

A-Parser Support

Сообщений: 187 Регистрация: Дек 2014

#185

22 Июля 2024 01:24

Дайджест новостей A-Parser + акция на Premium прокси

Парсим базу для XRumer: медленно, но верно

Новая статья от нашего пользователя @Reset о сборе базы форумов для Хрумер.

Рисунок

Парсер всех видео с Youtube канала

Новый парсер в Каталоге, позволяющий собирать списки видео (с их характеристиками) из Youtube каналов.

Рисунок

Анализ скорости загрузки и юзабилити сайтов

Обновление парсера для измерения скорости загрузки страниц с помощью сервиса PageSpeed Insights.

Рисунок

Акция на Premium прокси

Только до конца июля 20% скидка на все пакеты премиум прокси от 20 до 500 гигабайт

Рисунок

Premium прокси - это возможность быстрого парсинга без бана IP и каптч, с возможностью выбора гео из любой точки мира!

Для оплаты используйте промокод PREMIUM-PROXY-JULY-20%-OFF в Личном кабинете на a-parser.com

Если вы хотите, чтобы мы более подробно раскрыли какой-то функционал парсера, у вас есть идеи для новых статей или вы желаете поделиться собственным опытом использования A-Parser - отписывайтесь здесь.

Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.

A-Parser Support

Сообщений: 187 Регистрация: Дек 2014

#186

31 Июля 2024 09:31

Дайджест новостей A-Parser

Парсинг блока "Интересно узнать" из поисковой выдачи Яндекс

Новый пресет для получения данных из блока "Интересно узнать" поисковой выдачи Яндекса.

Рисунок

Парсер новостей с newsapi.org

Новый парсер в Каталоге для парсинга новостей с newsapi.org по ключевым словам через официальное API.

Рисунок

Подсказки amazon.com

Обновление парсера подсказок торговой площадки amazon.com.

* Обновлен url запроса
* Обновлена обработка результата

Рисунок

A-Parser Support

Сообщений: 187 Регистрация: Дек 2014

#187

9 Августа 2024 15:08

Видео урок: парсер новостей с newsapi.org

Новое видео по работе с A-Parser от DIM STUDIO в котором показан обзор парсера новостей с newsapi.org.

Загрузка плеера

Плейлист со всеми видео уроками от DIM STUDIO

Оставляйте комментарии и подписывайтесь на наши каналы на YouTube: A-Parser и DIM STUDIO !

Изменено: A-Parser Support - 9 Августа 2024 15:10

A-Parser Support

Сообщений: 187 Регистрация: Дек 2014

#188

20 Августа 2024 21:02

Дайджест новостей A-Parser

Парсер t-online
Парсер для сбора результатов выдачи и связанных ключевых слов из поисковой системы t-online.

Рисунок

Проверка категории сайтов через сервис cyren.com
Обновление парсера для проверки категории сайтов через сервис cyren.com
* Адаптация к изменениям на источнике

Рисунок

Парсер copart.com
Обновление парсера аукциона автомобилей copart.com
* Добавлена возможность парсить изображения

Рисунок

Если вы хотите, чтобы мы более подробно раскрыли какой-то функционал парсера, у вас есть идеи для новых статей или вы желаете поделиться собственным опытом использования A-Parser (за небольшие плюшки [img]styles/default/xenforo/clear.png[/img] ) - отписывайтесь здесь.
Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.

A-Parser Support Сообщений: 187 Регистрация: Дек 2014	#189 31 Августа 2024 15:36 1.2.2396 - новый парсер Util::SMS, улучшения во встроенных парсерах + акция на Premium прокси Улучшения * Добавлен новый парсер Util::SMS - парсер для получения кодов из смс * В Util::AntiGate добавлена возможность остановки всего задания при получении сообщения о низком балансе на сервисе разгадывания каптч * В HTML::EmailExtractor добавлен параметр Search URL encoded e-mails * В парсерах OpenAI::* добавлена опция API domain, которая позволяет задать свой домен для API запросов * В Shop::Amazon добавлен сбор количества продаж * В Maps::Google добавлен сбор booking link (данные о сервисе записи) * В HTML::ArticleExtractor теперь доступно больше переменных, они полностью наследуются из Net::HTTP * Обновлен список яыков в DeepL::Translator * Обновлен список моделей в OpenAI::ChatGPT * Добавлен инструмент tools.task.stop(), который позволяет останавливать выполнение задания в любой момент * CapSolver для каптч Turnstile теперь не требует передачи прокси * Добавлена поддержка сервиса botlab.me в Util::AntiGate Исправления в связи с изменениями в выдаче * Изменения в SE::Yandex::Register, подробнее тут * В парсерах SE::Google::KeywordPlanner::* исправлена авторизация по логин-паролю * Исправлена работа Rank::MOZ * Исправлена работа Util::Turnstile в режиме Auto * В Shop::Wildberries::ProductInfo исправлена работа с некоторыми видами запросов * Исправлен парсинг People also ask и Related keywords в SE::Google * Частично исправлено получение количества товаров в Shop::Wildberries::ProductsList Исправления * Исправлен обход защиты Cloudflare * Исправлено произвольное зависание в Maps::Yandex * В Shop::Wildberries::ProductInfo переменная $data теперь корректно заполняется * В SE::Yandex::WordCraft переименован результат $query в массивах $uqa и $uqg * Исправлен баг из-за которого в Общем формате результатов не происходил сброс результатов при нажатии кнопки сброса * Исправлена работа с прокси в связке Util::SMS + SE::Yandex::Register Акция на Premium прокси 20% скидка на все пакеты премиум прокси от 20 до 500 гигабайт Premium прокси - это возможность быстрого парсинга без бана IP и каптч, с возможностью выбора гео из любой точки мира! Для оплаты используйте промокод PREMIUM-PROXY-20%-OFF в Личном кабинете на a-parser.com

Похожие темы:

18.09.2021 14:44	OLX Parser (страны: UA, BG, KZ, PL, PT, RO, UZ)
30.10.2017 12:36	LSI Parser + бонус для копирайтеров, дорвейщиков(Для хорошей текстовки)
28.02.2017 00:42	Youla Parser – программа для парсинга телефонов из приложения Юла
20.10.2016 18:57	MyMail Parser - сбор данных, создание баз для рассылок
10.04.2016 09:32	VKParser

Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)

Новые темы	Объявления	Свободное общение
01:03 Как продвигать сайт в mail.ru? 21:52 Новая поисковая система от OpenAI 21:48 Reddit готовится к большим изменениям: пользователи смогут монетизировать свой контент 20:34 Как раскрутить сайт? 21:46 AntiBot Cloud - бесплатный скрипт и сервис защиты сайтов 22:20 «Сбер» планирует запустить монетизацию Telegram-каналов 18:37 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика!	17:54 BIGPROXY.SHOP - Резидентные Ротационные Backconnect Proxy USA EUROPA MIX [Безлимитный трафик] 17:33 Куплю adult сайт 04:24 ProtonPlus.co - выгодный и быстрый обмен, работаем круглосуточно 19:55 Sapfirex.com - Современный сервис обмена криптовалют 18:24 Sectormoney.com - быстрый и удобный обменник 10:24 Прием любых платежей для HIGH RISK проектов 10:12 Профильный прогон 200 рублей, Тиц (Икс) от 10, проверен Checktrust	23:51 Стряхнуть обыденность - об Агасфере 22:49 Точные прогнозы на футбол 22:11 Осталось 3-5 месяцев до блокировки YouTube в России, — заявил Клименко 21:42 Инфобизнесменша приобрела курсы у другой за 5,5 млн рублей, но не стала богатой. Она обратилась в полицию 21:39 С юмором по жизни! 10:51 150+ хакерских поисковых систем и инструментов 07:08 Штраф до 800 000 руб. за обход блокировки грозит пользователям