A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois, etc
Страницы: Пред. 1 2 3 4 5
A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois, etc
[URL=https://a-parser.com/threads/5523/][B]1.2.570 - новые парсеры API::Server::Redis и SE::Startpage, улучшения в существующих парсерах[/B][/URL]
[IMG]https://files.a-parser.com/img/1.2.570.png[/IMG]
[B]Улучшения[/B]
[LIST]
[*]Добавлен новый парсер API::Server::Redis (только для лицензий Enterprise)
[*]В [IMG]https://a-parser.com/img/parsers/se-google.png[/IMG][URL=https://a-parser.com/wiki/se-google-modern/]SE::Google::Modern[/URL] добавлена возможность определять наличие расширенных сниппетов (rich snippets) в выдаче
[*]В связи с изменениями на сервисе-источнике парсер SE::IxQuick был удален, а вместо него добавлен SE::Startpage с почти аналогичным функционалом
[*]Улучшена логика работы функции Get full links в SE::Baidu SE::Baidu
[*]В [IMG]https://a-parser.com/img/parsers/se-google.png[/IMG][URL=https://a-parser.com/wiki/se-google-modern/]SE::Google::Modern[/URL]  реализована возможность указывать дополнительные заголовки для запросов
[*]Улучшен парсинг меток сайтов в [IMG]https://a-parser.com/img/parsers/se-yandex.png[/IMG][URL=https://a-parser.com/wiki/se-yandex/]SE::Yandex[/URL], а также добавлена поддержка новых типов меток
[*]Улучшена логика работы функции Get full links в SE::Baidu
[*]Оптимизирован алгоритм обработки подзапросов
[/LIST]
[B]Исправления в связи с изменениями в выдаче[/B]
[LIST]
[*]Улучшена работа [IMG]https://a-parser.com/img/parsers/se-youtube.png[/IMG][URL=https://a-parser.com/wiki/se-youtube/]SE::YouTube[/URL], в связи с тестированием новой верстки
[*]В [IMG]https://a-parser.com/img/parsers/se-google-translate.png[/IMG][URL=https://a-parser.com/wiki/se-google-translate/]SE::Google::Translate[/URL] переработан механизм повторных попыток, добавлена поддержка сессий
[*]Исправлен парсинг сниппетов в [IMG]https://a-parser.com/img/parsers/se-google-images.png[/IMG][URL=https://a-parser.com/wiki/se-google-images/]SE::Google::Images[/URL]
[*]Поностью переработан [IMG]https://a-parser.com/img/parsers/googleplay-apps.png[/IMG][URL=https://a-parser.com/wiki/googleplay-apps/]GooglePlay::Apps[/URL]- теперь он парсит только первую страницу результатов
[*]Исправлен парсинг мобильной выдачи в SE::Google::Modern
[*]Исправлена работа [IMG]https://a-parser.com/img/parsers/se-seznam.png[/IMG][URL=https://a-parser.com/wiki/se-seznam/]SE::Seznam[/URL] при отсутствии результатов
[*]Исправлена работа [IMG]https://a-parser.com/img/parsers/rank-linkpad.png[/IMG][URL=https://a-parser.com/wiki/rank-linkpad/]Rank::Linkpad[/URL], парсер полностью переписан
[*][IMG]https://a-parser.com/img/parsers/se-bing-translator.png[/IMG][URL=https://a-parser.com/wiki/se-bing-translator/]SE::Bing::Translator[/URL], [IMG]https://a-parser.com/img/parsers/se-duckduckgo-images.png[/IMG][URL=https://a-parser.com/wiki/se-duckduckgo-images/]SE:: DuckDuckGo::Images[/URL], [IMG]https://a-parser.com/img/parsers/se-bing-images.png[/IMG][URL=https://a-parser.com/wiki/se-bing-images/]SE::Bing::Images[/URL]
[/LIST]
[B]Исправления[/B]
[LIST]
[*]Исправлена проблема, из-за которой в некоторых случаях при запросе через API возвращался пустой массив страниц
[*]Исправлено падение скорости в [IMG]https://a-parser.com/img/parsers/net-whois.png[/IMG][URL=https://a-parser.com/wiki/net-whois/]Net::Whois[/URL]
[*]Исправлен баг в оптимизации парсеров
[*]Исправлено сохранение параметра Report period в [IMG]https://a-parser.com/img/parsers/se-yandex-direct-frequency.png[/IMG][URL=https://a-parser.com/wiki/se-yandex-direct-frequency/]SE::Yandex:: Direct::Frequency[/URL]
[*]В [IMG]https://a-parser.com/img/parsers/html-linkextractor.png[/IMG][URL=https://a-parser.com/wiki/html-linkextractor/]HTML::LinkExtractor [/URL]исправлен сбор ссылок, если в них есть перенос строки
[/LIST]
[URL=https://telegram.me/joinchat/B52bKz_xVDH2GDiEU1MPsQ][IMG]https://files.a-parser.com/img/button_a-parser_small_550.png[/IMG][/URL]

Комплексное SEO продвижение в поисковых системах Яндекс, Google

Видео урок: Поиск страниц контактов
В этом видео уроке рассмотрен пример решения задачи по поиску страниц контактов у заданного списка сайтов. Также парсится тайтл и все это сохраняется в CSV файл.
Загрузка плеера

В уроке рассмотрено:
* парсинг поиска Google для получения ссылки на страницу контактов
* парсинг главной страницы сайта для получения title
* использование инструмента $tools.CSVline для форматирования файла результата
* пример правильного импорта в Excel

Оставляйте комментарии и подписывайтесь на наш канал на YouTube!

Рисунок
Сборник рецептов #35: комментарии на Youtube, контакты на сайтах и японский Yahoo
35-й сборник результатов, где мы будем собирать комментарии из Youtube, искать контакты (телефоны и почты) на сайтах, а также парсить японскую выдачу Yahoo. Поехали!
Парсинг комментариев из Youtube
Представляем вашему вниманию JS парсер комментариев для видео на Youtube. С его помощью можно собирать тексты комментариев, а также информацию об авторах комментариев индивидуально для каждого видео. Также реализована возможность указывать количество страниц с комментарими, что позволяет при необходимости ограничить их сбор и тем самым увеличить скорость работы.
Рисунок


Извлекаем телефоны, начинающиеся на 3 с помощью HTML::EmailExtractor
Пресет, в котором показано, как с помощью HTML::EmailExtractor HTML::EmailExtractor собирать контакты со страниц сайтов. Данный пресет предназначен для сбора e-mail и телефонов, начинающихся с 3 (Украина), но при необходимости можно немного изменить регулярные выражения и собирать телефоны других стран.
Рисунок


SE::Yahoo::JP
JS парсер для парсинга японской выдачи Yahoo. Используется домен search.yahoo.co.jp. Собираются ссылки, анкоры и сниппеты, а также есть возможность задать количество страниц для парсинга.
Рисунок


Еще больше различных рецептов в нашем Каталоге!

Предлагайте ваши идеи для новых парсеров здесь, лучшие будут реализованы и опубликованы.

Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.

Рисунок
1.2.595 - новый парсер Ahrefs, инструмент для создания CSV и много других улучшений

Рисунок


Улучшения
[LIST]
[*]Добавлен новый парсер Рисунок
Rank::Ahrefs

[*]Добавлен инструмент $tools.CSVline для простого создания CSV файлов
[*]В связи с тестированием Гуглом новой верстки в поисковике, добавлена ее поддержка в Рисунок
SE::Google::Modern

[*]В Рисунок
SE::Google::Modern
в массив $serp добавлена переменная $amp, которая показывает, поддерживает ли страница AMP
[*]В Рисунок
SE::Yandex
в $serp.$i.label добавлена поддержка Турбо страниц, а также добавлен сбор типов меток сайтов
[*]В Рисунок
Net::HTTP
улучшена работа с редиректами, добавлена опция Follow common redirects
[*]Теперь в Рисунок
Util::ReCaptcha2
можно указать хост для используемого сервиса разгадывания, а также в Provider url можно указывать адреса через запятую (актуально для XEvil и CapMonster), парсер будет использовать каждый из них в случайном порядке
[*]Увеличено количество результатов в парсерах Рисунок
Rank::Bukvarix::*

[*]Добавлена опция ограничения числа логов, с целью оптимизации использования дискового пространства
[*]JS парсеры: улучшена пакетная обработка запросов
[/LIST]
Исправления в связи с изменениями в выдаче
[LIST]
[*]В Рисунок
Maps::Yandex
исправлена ситуация, при которой для части результатов не собирались данные
[*]Исправлен Рисунок
SE::Rambler

[/LIST]
Исправления
[LIST]
[*]Исправлена проблема с рядом парсеров, из-за которой они не работали, появилась в одной из предыдущих версий
[*]Исправлена ошибка в Рисунок
Rank::Alexa
, из-за которой при отсутствующих значениях запрос завершался с ошибкой
[*]Исправлен баг в Рисунок
Rank::MajesticSEO
, из-за которого в некоторых случаях запросы завершались с ошибкой
[*]Для парсеров Рисунок
[plain]Social::Instagram::profile[/plain]
и Рисунок
Social::Instagram::Tag
изменен перечень доступных переменных в связи с не совсем корректной работой в некоторых случаях
[/LIST]

Рисунок
Видео урок: Парсинг Google Maps для сбора всех организаций в определенной местности

В этом видео уроке рассмотрен способ сбора данных об организациях в указанной местности из Google Maps, используя встроенный парсер Гугл карт. Также показано как определить необходимые координаты на карте и задать их в парсере.

Загрузка плеера


В уроке рассмотрено:
[LIST]
[*]Парсинг карт Google с использованием Maps::Google
[*]Пример получения координат для использования в макросах подстановок
[*]Работа с макросами подстановок при наличии отрицательных чисел
[*]Импорт результата в Excel
[/LIST]

Полезные ссылки:
[LIST]
[*]Готовый пресет в Каталоге
[*]Описание парсера Maps::Google
[*]Документация по макросам подстановок
[/LIST]
Оставляйте комментарии и подписывайтесь на наш канал на YouTube!

Рисунок
Страницы: Пред. 1 2 3 4 5
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
06:04 Почему его не банят? 
22:39 Биржи ссылок статей с нормальной раскупаемостью 
22:35 Продвижение в ТОП Яндекс. Мега быстро! 
17:22 nofollow noindex плагин для внешних ссылок DLE? 
17:18 Как заблочить роботов, которые кладут сайт 
17:18 Подскажите cms вопрос-ответ или подобное. 
15:10 Как сделать адаптивность ширины сайта? 
03:43 Загоню в индексатор GSA карту сайта – 0,002 $ одна стр. (20 $ за 10 тыс. стр.) 
03:18 1500-2100 ссылок с проверенных трастов, подробный отчет, постпроверка 
01:28 Программа для рассылки на юле - Youla Master 
01:26 Веб-мастер. Создаю сайты "под ключ" 
15:49 Viral News Jacker - Wordpress плагин для создания автонаполняемых сайтов. Тематика Новости 
12:21 Размещение соц. сигналов для роста позиций вашего сайта или группы. 
12:12 Прогон по личной базе, больше 1000 трастовых сайтов! Продвижение СЧ и НЧ запросов + рост показателей! Гарантии! 
22:43 Нужен прогон по доскам объявлений 
22:18 Встраиваемые видео с ютуб и юридическая ответственность 
19:13 Стоит ли приобретать Xrumer 
16:38 У кого есть аккаунт на Мегаиндекс или Серпстат? 
11:38 Кто что знает про данный гарант 
00:47 Отзыв о работе с Admitad 
14:58 4 ключа к Elite-Board 2.3 (400 руб.)