A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois, etc
Страницы: Пред. 1 2 3 4 5
A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois, etc
[URL=https://a-parser.com/threads/5523/][B]1.2.570 - новые парсеры API::Server::Redis и SE::Startpage, улучшения в существующих парсерах[/B][/URL]
[IMG]https://files.a-parser.com/img/1.2.570.png[/IMG]
[B]Улучшения[/B]
[LIST]
[*]Добавлен новый парсер API::Server::Redis (только для лицензий Enterprise)
[*]В [IMG]https://a-parser.com/img/parsers/se-google.png[/IMG][URL=https://a-parser.com/wiki/se-google-modern/]SE::Google::Modern[/URL] добавлена возможность определять наличие расширенных сниппетов (rich snippets) в выдаче
[*]В связи с изменениями на сервисе-источнике парсер SE::IxQuick был удален, а вместо него добавлен SE::Startpage с почти аналогичным функционалом
[*]Улучшена логика работы функции Get full links в SE::Baidu SE::Baidu
[*]В [IMG]https://a-parser.com/img/parsers/se-google.png[/IMG][URL=https://a-parser.com/wiki/se-google-modern/]SE::Google::Modern[/URL]  реализована возможность указывать дополнительные заголовки для запросов
[*]Улучшен парсинг меток сайтов в [IMG]https://a-parser.com/img/parsers/se-yandex.png[/IMG][URL=https://a-parser.com/wiki/se-yandex/]SE::Yandex[/URL], а также добавлена поддержка новых типов меток
[*]Улучшена логика работы функции Get full links в SE::Baidu
[*]Оптимизирован алгоритм обработки подзапросов
[/LIST]
[B]Исправления в связи с изменениями в выдаче[/B]
[LIST]
[*]Улучшена работа [IMG]https://a-parser.com/img/parsers/se-youtube.png[/IMG][URL=https://a-parser.com/wiki/se-youtube/]SE::YouTube[/URL], в связи с тестированием новой верстки
[*]В [IMG]https://a-parser.com/img/parsers/se-google-translate.png[/IMG][URL=https://a-parser.com/wiki/se-google-translate/]SE::Google::Translate[/URL] переработан механизм повторных попыток, добавлена поддержка сессий
[*]Исправлен парсинг сниппетов в [IMG]https://a-parser.com/img/parsers/se-google-images.png[/IMG][URL=https://a-parser.com/wiki/se-google-images/]SE::Google::Images[/URL]
[*]Поностью переработан [IMG]https://a-parser.com/img/parsers/googleplay-apps.png[/IMG][URL=https://a-parser.com/wiki/googleplay-apps/]GooglePlay::Apps[/URL]- теперь он парсит только первую страницу результатов
[*]Исправлен парсинг мобильной выдачи в SE::Google::Modern
[*]Исправлена работа [IMG]https://a-parser.com/img/parsers/se-seznam.png[/IMG][URL=https://a-parser.com/wiki/se-seznam/]SE::Seznam[/URL] при отсутствии результатов
[*]Исправлена работа [IMG]https://a-parser.com/img/parsers/rank-linkpad.png[/IMG][URL=https://a-parser.com/wiki/rank-linkpad/]Rank::Linkpad[/URL], парсер полностью переписан
[*][IMG]https://a-parser.com/img/parsers/se-bing-translator.png[/IMG][URL=https://a-parser.com/wiki/se-bing-translator/]SE::Bing::Translator[/URL], [IMG]https://a-parser.com/img/parsers/se-duckduckgo-images.png[/IMG][URL=https://a-parser.com/wiki/se-duckduckgo-images/]SE:: DuckDuckGo::Images[/URL], [IMG]https://a-parser.com/img/parsers/se-bing-images.png[/IMG][URL=https://a-parser.com/wiki/se-bing-images/]SE::Bing::Images[/URL]
[/LIST]
[B]Исправления[/B]
[LIST]
[*]Исправлена проблема, из-за которой в некоторых случаях при запросе через API возвращался пустой массив страниц
[*]Исправлено падение скорости в [IMG]https://a-parser.com/img/parsers/net-whois.png[/IMG][URL=https://a-parser.com/wiki/net-whois/]Net::Whois[/URL]
[*]Исправлен баг в оптимизации парсеров
[*]Исправлено сохранение параметра Report period в [IMG]https://a-parser.com/img/parsers/se-yandex-direct-frequency.png[/IMG][URL=https://a-parser.com/wiki/se-yandex-direct-frequency/]SE::Yandex:: Direct::Frequency[/URL]
[*]В [IMG]https://a-parser.com/img/parsers/html-linkextractor.png[/IMG][URL=https://a-parser.com/wiki/html-linkextractor/]HTML::LinkExtractor [/URL]исправлен сбор ссылок, если в них есть перенос строки
[/LIST]
[URL=https://telegram.me/joinchat/B52bKz_xVDH2GDiEU1MPsQ][IMG]https://files.a-parser.com/img/button_a-parser_small_550.png[/IMG][/URL]

Бесплатная контекстная реклама

Видео урок: Поиск страниц контактов
В этом видео уроке рассмотрен пример решения задачи по поиску страниц контактов у заданного списка сайтов. Также парсится тайтл и все это сохраняется в CSV файл.
Загрузка плеера

В уроке рассмотрено:
* парсинг поиска Google для получения ссылки на страницу контактов
* парсинг главной страницы сайта для получения title
* использование инструмента $tools.CSVline для форматирования файла результата
* пример правильного импорта в Excel

Оставляйте комментарии и подписывайтесь на наш канал на YouTube!

Рисунок
Сборник рецептов #35: комментарии на Youtube, контакты на сайтах и японский Yahoo
35-й сборник результатов, где мы будем собирать комментарии из Youtube, искать контакты (телефоны и почты) на сайтах, а также парсить японскую выдачу Yahoo. Поехали!
Парсинг комментариев из Youtube
Представляем вашему вниманию JS парсер комментариев для видео на Youtube. С его помощью можно собирать тексты комментариев, а также информацию об авторах комментариев индивидуально для каждого видео. Также реализована возможность указывать количество страниц с комментарими, что позволяет при необходимости ограничить их сбор и тем самым увеличить скорость работы.
Рисунок


Извлекаем телефоны, начинающиеся на 3 с помощью HTML::EmailExtractor
Пресет, в котором показано, как с помощью HTML::EmailExtractor HTML::EmailExtractor собирать контакты со страниц сайтов. Данный пресет предназначен для сбора e-mail и телефонов, начинающихся с 3 (Украина), но при необходимости можно немного изменить регулярные выражения и собирать телефоны других стран.
Рисунок


SE::Yahoo::JP
JS парсер для парсинга японской выдачи Yahoo. Используется домен search.yahoo.co.jp. Собираются ссылки, анкоры и сниппеты, а также есть возможность задать количество страниц для парсинга.
Рисунок


Еще больше различных рецептов в нашем Каталоге!

Предлагайте ваши идеи для новых парсеров здесь, лучшие будут реализованы и опубликованы.

Подписывайтесь на наш канал на Youtube - там регулярно выкладываются видео с примерами использования A-Parser, а также следите за новостями в Twitter.

Рисунок
Страницы: Пред. 1 2 3 4 5
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
07:58 Ссылки на мой сайт в первый месяц 
07:54 17 сентября 2019 
07:53 Обновление поисковой базы 2019-09-20 
06:47 Продвижение в ТОП Яндекс. Мега быстро! 
23:26 Adsense личный опыт 
23:06 DreamCash.tl - заработок на онлайн-видео. До 95% отчислений, отличный конверт! 
17:57 Edu-Revenue.com – партнёрка в нише эссе. До 75% за новые заказы, 35% – ребилы! 
08:14 Восстанавливаю Целиком и Полностью сайты из Вебархива (Webarchive) 
02:30 [Бесплатный тест] Топовые мобильные прокси RU, UA, UK. AIRSOCKS 3G / 4G / LTE. С подменой Passive OS fingerprint (Windows / Mac / Android / iPhone) 
19:50 Продам сайты для заработка в Adsense. Можно вместе с аккаунтом. 
18:51 Работа: Удаление фона с фотографии 
16:37 ПРОДАЖА Credit Card (CC+CVV) различных стра 
16:12 Анализ вашего ссылочного профиля (или ваших конкурентов) 
13:38 Дешевые просмотры YouTube с гарантией, лайки, подписчики Instagram, ВК, Facebook, ОK, Twitter - SmmPanele.Ru 
02:30 Как я отдыхал в другой стране, видел много коров, коз и не одной улитки. 
17:05 Прошу помощи по составлению семитического ядра (взаимообмен) 
00:30 Фото наших рабочих мест. Не проходи мимо! 
00:13 Наши машинки 
17:01 Доска объявлений 
16:23 Партнёрская программа Купибилет — стабильный доход на туристическом рынке 
21:28 Цель: 100 000 руб. в месяц с 1-го канала на Яндекс Дзен © БЛОГ НЕ БЛОГЕРА