BatchURLScraper - Извлечение данных методами XPath, CSSPath, XQuery и RegExp

Сообщений: 319 Регистрация: Мар 2012

17 Ноября 2020 19:14

Всем привет!

Представляю вашему вниманию бесплатную программу BatchURLScraper, предназначенную для извлечения данных со страниц сайтов используя XPath, CSS-селекторы, XQuery и RegExp.

Рисунок

Возможности программы BatchURLScraper:
- парсинг и извлечение данных по списку URL
- гибкая настройка парсинга используя XPath, CSSPath, XQuery и RegExp
- модуль для тестирования правил парсинга
- экспорт отчетов в Excel (CSV-формат)

Страница скачивания (5 Мб): https://site-analyzer.ru/soft/batch-url-scraper/

Буду рад любым отзывам и пожеланиям по работе программы.

Majento - сервисы SEO-аналитики

chaser81

Сообщений: 319 Регистрация: Мар 2012

26 Ноября 2020 18:30

Новая версия BatchURLScraper 1.3

Рисунок

Что нового:
- расширено число страниц для парсинга с 1000 до 5000 URL
- добавлена возможность скрапинга через HTML templates
- добавлена возможность извлечения данных через атрибуты CSS
- добавлена возможность скрапинга через внешний и внутренний HTML
- добавлена возможность использования списков Proxy
- исправлен баг некорректного сохранения User-Agent

Страница скачивания: https://site-analyzer.ru/soft/batch-url-scraper/

chaser81 Сообщений: 319 Регистрация: Мар 2012	#3 8 Декабря 2020 19:51 Новая версия BatchURLScraper 1.4 (build 27), 08.12.2020: - исправлена ошибка с валидацией HTML-темплейтов - оптимизирована работа с регулярными выражениями - добавлена возможность неучета повторений при скрейпинге - исправлена проблема с учетом пауз между запросами - диапазон пауз между запросами расширен до полутора минут - доработан и улучшен перевод программы - устранены утечки памяти

Новые темы	Объявления	Свободное общение
20:00 Adsense личный опыт 18:25 Монетизация сайтов от Авито 18:25 Сайт не принимают в РСЯ 18:24 Продвижение по ключам 18:24 Refmate — сервис для взаимного обмена ссылками 18:24 AviTool - мощный инструмент для автоматизации работы с Avito 13:13 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options	21:41 SOCKS5 приватные прокси на 30 дней для PayPal 21:40 Google Voice аккаунты для бесплатных SMS и звонков 21:39 PayPal аккаунты для любых целей 17:31 SpaceSwap.cc - Быстрый и надежный обменник криптовалют 17:15 swapsfera.com 17:09 GoodsMoney.io 15:46 Запустите свой обменник за 1 день без программиста и серверов — облачная платформа EX365	17:31 Список обновленных тем пуст... 12:49 Всего п онемногу 12:45 Куплю проигрышные букмекерские аккаунты 11:55 Union Pharm - топовая фарма-партнерка для профессионалов! 17:09 Точные прогнозы на футбол 10:00 Ну что, кто куда деваете свои сайты? 16:22 Компьютерная мышь

Новые темы

Объявления

Свободное общение

20:00 Adsense личный опыт
18:25 Монетизация сайтов от Авито
18:25 Сайт не принимают в РСЯ
18:24 Продвижение по ключам
18:24 Refmate — сервис для взаимного обмена ссылками
18:24 AviTool - мощный инструмент для автоматизации работы с Avito
13:13 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options

21:41 SOCKS5 приватные прокси на 30 дней для PayPal
21:40 Google Voice аккаунты для бесплатных SMS и звонков
21:39 PayPal аккаунты для любых целей
17:31 SpaceSwap.cc - Быстрый и надежный обменник криптовалют
17:15 swapsfera.com
17:09 GoodsMoney.io
15:46 Запустите свой обменник за 1 день без программиста и серверов — облачная платформа EX365

17:31 Список обновленных тем пуст...
12:49 Всего п онемногу
12:45 Куплю проигрышные букмекерские аккаунты
11:55 Union Pharm - топовая фарма-партнерка для профессионалов!
17:09 Точные прогнозы на футбол
10:00 Ну что, кто куда деваете свои сайты?
16:22 Компьютерная мышь