BatchURLScraper - Извлечение данных методами XPath, CSSPath, XQuery и RegExp

Сообщений: 314 Регистрация: Мар 2012

17 Ноября 2020 19:14

Всем привет!

Представляю вашему вниманию бесплатную программу BatchURLScraper, предназначенную для извлечения данных со страниц сайтов используя XPath, CSS-селекторы, XQuery и RegExp.

Рисунок

Возможности программы BatchURLScraper:
- парсинг и извлечение данных по списку URL
- гибкая настройка парсинга используя XPath, CSSPath, XQuery и RegExp
- модуль для тестирования правил парсинга
- экспорт отчетов в Excel (CSV-формат)

Страница скачивания (5 Мб): https://site-analyzer.ru/soft/batch-url-scraper/

Буду рад любым отзывам и пожеланиям по работе программы.

Majento - сервисы SEO-аналитики

chaser81

Сообщений: 314 Регистрация: Мар 2012

26 Ноября 2020 18:30

Новая версия BatchURLScraper 1.3

Рисунок

Что нового:
- расширено число страниц для парсинга с 1000 до 5000 URL
- добавлена возможность скрапинга через HTML templates
- добавлена возможность извлечения данных через атрибуты CSS
- добавлена возможность скрапинга через внешний и внутренний HTML
- добавлена возможность использования списков Proxy
- исправлен баг некорректного сохранения User-Agent

Страница скачивания: https://site-analyzer.ru/soft/batch-url-scraper/

chaser81 Сообщений: 314 Регистрация: Мар 2012	#3 8 Декабря 2020 19:51 Новая версия BatchURLScraper 1.4 (build 27), 08.12.2020: - исправлена ошибка с валидацией HTML-темплейтов - оптимизирована работа с регулярными выражениями - добавлена возможность неучета повторений при скрейпинге - исправлена проблема с учетом пауз между запросами - диапазон пауз между запросами расширен до полутора минут - доработан и улучшен перевод программы - устранены утечки памяти

Новые темы	Объявления	Свободное общение
19:29 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика! 17:29 Как продвигать сайт с неуникальным контентом 14:50 Индексация страниц 12:36 У кого новостник, дайте пару советов плиз 13:53 AviTool - мощный инструмент для автоматизации работы с Avito 17:01 Absence в Армении 23:19 Ребята подскажите какими сервисами и прогами вы пользуетесь для SEO продвижения?	08:44 Affiliate Top - партнерская программа нового уровня 07:43 Продам копию сайта. 04:07 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 21:42 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств 18:41 Взлом пароля Mail.ru почты, взломать пароль Mail, взлом аккаунта Yandex 16:19 TETChange-Обменник криптовалют 15:04 JustProxy.Biz - Резидентные прокси без ограничения по трафику	23:07 Ну что, кто куда деваете свои сайты? 19:30 Добро пожаловать в цифровой мир... 19:42 Топ-5 способов использовать мобильные прокси для бизнеса: подробный обзор 22:08 Накрутка поисковых подсказок 05:04 Точные прогнозы на футбол 14:01 Union Pharm - топовая фарма-партнерка для профессионалов! 10:59 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди

Новые темы

Объявления

Свободное общение

19:29 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика!
17:29 Как продвигать сайт с неуникальным контентом
14:50 Индексация страниц
12:36 У кого новостник, дайте пару советов плиз
13:53 AviTool - мощный инструмент для автоматизации работы с Avito
17:01 Absence в Армении
23:19 Ребята подскажите какими сервисами и прогами вы пользуетесь для SEO продвижения?

08:44 Affiliate Top - партнерская программа нового уровня
07:43 Продам копию сайта.
04:07 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка
21:42 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств
18:41 Взлом пароля Mail.ru почты, взломать пароль Mail, взлом аккаунта Yandex
16:19 TETChange-Обменник криптовалют
15:04 JustProxy.Biz - Резидентные прокси без ограничения по трафику

23:07 Ну что, кто куда деваете свои сайты?
19:30 Добро пожаловать в цифровой мир...
19:42 Топ-5 способов использовать мобильные прокси для бизнеса: подробный обзор
22:08 Накрутка поисковых подсказок
05:04 Точные прогнозы на футбол
14:01 Union Pharm - топовая фарма-партнерка для профессионалов!
10:59 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди