BatchURLScraper - Извлечение данных методами XPath, CSSPath, XQuery и RegExp

Сообщений: 336 Регистрация: Мар 2012

17 Ноября 2020 19:14

Всем привет!

Представляю вашему вниманию бесплатную программу BatchURLScraper, предназначенную для извлечения данных со страниц сайтов используя XPath, CSS-селекторы, XQuery и RegExp.

Рисунок

Возможности программы BatchURLScraper:
- парсинг и извлечение данных по списку URL
- гибкая настройка парсинга используя XPath, CSSPath, XQuery и RegExp
- модуль для тестирования правил парсинга
- экспорт отчетов в Excel (CSV-формат)

Страница скачивания (5 Мб): https://site-analyzer.ru/soft/batch-url-scraper/

Буду рад любым отзывам и пожеланиям по работе программы.

Majento - сервисы SEO-аналитики

chaser81

Сообщений: 336 Регистрация: Мар 2012

26 Ноября 2020 18:30

Новая версия BatchURLScraper 1.3

Рисунок

Что нового:
- расширено число страниц для парсинга с 1000 до 5000 URL
- добавлена возможность скрапинга через HTML templates
- добавлена возможность извлечения данных через атрибуты CSS
- добавлена возможность скрапинга через внешний и внутренний HTML
- добавлена возможность использования списков Proxy
- исправлен баг некорректного сохранения User-Agent

Страница скачивания: https://site-analyzer.ru/soft/batch-url-scraper/

chaser81 Сообщений: 336 Регистрация: Мар 2012	#3 8 Декабря 2020 19:51 Новая версия BatchURLScraper 1.4 (build 27), 08.12.2020: - исправлена ошибка с валидацией HTML-темплейтов - оптимизирована работа с регулярными выражениями - добавлена возможность неучета повторений при скрейпинге - исправлена проблема с учетом пауз между запросами - диапазон пауз между запросами расширен до полутора минут - доработан и улучшен перевод программы - устранены утечки памяти

Новые темы	Объявления	Свободное общение
16:04 ИКС Яндекс АПдейт 1 апреля 2026. Обновлён алгоритм расчёта 11:50 Gmail разрешил менять основной адрес - теперь можно убрать старые ники без переноса аккаунта 19:02 Gambling Craft - гемблинг по белому 17:03 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options 15:51 Яндекс-ап 20 марта и похороны ChatGPT, Claude и Gemini. Считаем убытки 10:16 Бесплатное расширение для Chrome — проверка ссылок прямо на странице 18:01 Раскрутка форума	16:22 Рассылки СМС/SMS, Вайбер/Viber, Ватсап/Whatsapp, Телеграм/Telegram любой тематики по всему миру 13:14 Аккаунты HeadHunter - Продам/верифицирую аккаунты работодателей hh.ru (HeadHunter, HH.RU, ХХ ) 13:14 Продам аккаунты HeadHunter (Верификация на ИП) 11:36 Продам сайт - продукты питания 08:16 PROSMM-SHOP — Надёжный сервис продвижения в социальных сетях 20:33 TokenTrade — Ваш новый надежный обменник 20:20 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств	12:36 молодильные яблоки и живая вода 09:04 Точные прогнозы на футбол 04:35 Ставки на супер тренды в спорте 15:49 Огородники 16:25 8 марта: желаю аптайма 99.9% и e-e-a-t без локов 22:45 С юмором по жизни! 15:42 Голландцы влепили Grok по яйцам - теперь нельзя раздевать реальных людей, штраф 100к евро в день

Новые темы

Объявления

Свободное общение

16:04 ИКС Яндекс АПдейт 1 апреля 2026. Обновлён алгоритм расчёта
11:50 Gmail разрешил менять основной адрес - теперь можно убрать старые ники без переноса аккаунта
19:02 Gambling Craft - гемблинг по белому
17:03 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options
15:51 Яндекс-ап 20 марта и похороны ChatGPT, Claude и Gemini. Считаем убытки
10:16 Бесплатное расширение для Chrome — проверка ссылок прямо на странице
18:01 Раскрутка форума

16:22 Рассылки СМС/SMS, Вайбер/Viber, Ватсап/Whatsapp, Телеграм/Telegram любой тематики по всему миру
13:14 Аккаунты HeadHunter - Продам/верифицирую аккаунты работодателей hh.ru (HeadHunter, HH.RU, ХХ )
13:14 Продам аккаунты HeadHunter (Верификация на ИП)
11:36 Продам сайт - продукты питания
08:16 PROSMM-SHOP — Надёжный сервис продвижения в социальных сетях
20:33 TokenTrade — Ваш новый надежный обменник
20:20 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств

12:36 молодильные яблоки и живая вода
09:04 Точные прогнозы на футбол
04:35 Ставки на супер тренды в спорте
15:49 Огородники
16:25 8 марта: желаю аптайма 99.9% и e-e-a-t без локов
22:45 С юмором по жизни!
15:42 Голландцы влепили Grok по яйцам - теперь нельзя раздевать реальных людей, штраф 100к евро в день