BatchURLScraper - Извлечение данных методами XPath, CSSPath, XQuery и RegExp

Сообщений: 326 Регистрация: Мар 2012

17 Ноября 2020 19:14

Всем привет!

Представляю вашему вниманию бесплатную программу BatchURLScraper, предназначенную для извлечения данных со страниц сайтов используя XPath, CSS-селекторы, XQuery и RegExp.

Рисунок

Возможности программы BatchURLScraper:
- парсинг и извлечение данных по списку URL
- гибкая настройка парсинга используя XPath, CSSPath, XQuery и RegExp
- модуль для тестирования правил парсинга
- экспорт отчетов в Excel (CSV-формат)

Страница скачивания (5 Мб): https://site-analyzer.ru/soft/batch-url-scraper/

Буду рад любым отзывам и пожеланиям по работе программы.

Majento - сервисы SEO-аналитики

chaser81

Сообщений: 326 Регистрация: Мар 2012

26 Ноября 2020 18:30

Новая версия BatchURLScraper 1.3

Рисунок

Что нового:
- расширено число страниц для парсинга с 1000 до 5000 URL
- добавлена возможность скрапинга через HTML templates
- добавлена возможность извлечения данных через атрибуты CSS
- добавлена возможность скрапинга через внешний и внутренний HTML
- добавлена возможность использования списков Proxy
- исправлен баг некорректного сохранения User-Agent

Страница скачивания: https://site-analyzer.ru/soft/batch-url-scraper/

chaser81 Сообщений: 326 Регистрация: Мар 2012	#3 8 Декабря 2020 19:51 Новая версия BatchURLScraper 1.4 (build 27), 08.12.2020: - исправлена ошибка с валидацией HTML-темплейтов - оптимизирована работа с регулярными выражениями - добавлена возможность неучета повторений при скрейпинге - исправлена проблема с учетом пауз между запросами - диапазон пауз между запросами расширен до полутора минут - доработан и улучшен перевод программы - устранены утечки памяти

Новые темы	Объявления	Свободное общение
00:20 SEO под нейро 21:10 AviTool - мощный инструмент для автоматизации работы с Avito 17:01 "Осталось 5 дн. до НГ" АПдейт Яндекс выдача 16:29 Ссылки с сайтов РБ 15:49 Дзен окончательно всё? Или у кого-то еще «стреляет» белый контент? 15:35 С наступающим Новым годом! АП Яндекс ИКС 23.12.2025 23:03 Продвижение-2022: Гугл все? Нет – Гугл не все!	16:53 garantcoin.io - быстрый и надёжный сервис обмена криптовалюты GarantCoin 14:33 secrex.io обмен без лишних вопросов (NO AML) 14:10 PonyBit.ru - обменный пункт PonyBit.ru (Понибит.ру) 12:06 Мобильные и Резидентные Прокси Для Соц Сетей \| 3 Гб Бесплатно 04:08 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 02:16 Crypto Mixer ↔ Bitcoin Mixer ↔ Cryptocurrency tumbler ↔ No-AML 20:38 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств	00:29 С юмором по жизни! 23:13 Владельцы "китайцев" 3-леток, признавайтесь честно — сгнили или едут? 18:50 Стряхнуть обыденность - об Агасфере 16:23 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди 16:13 Осторожно! Криптовалюта 12:20 Компьютерная мышь 23:08 Физические сим-карты

Новые темы

Объявления

Свободное общение

00:20 SEO под нейро
21:10 AviTool - мощный инструмент для автоматизации работы с Avito
17:01 "Осталось 5 дн. до НГ" АПдейт Яндекс выдача
16:29 Ссылки с сайтов РБ
15:49 Дзен окончательно всё? Или у кого-то еще «стреляет» белый контент?
15:35 С наступающим Новым годом! АП Яндекс ИКС 23.12.2025
23:03 Продвижение-2022: Гугл все? Нет – Гугл не все!

16:53 garantcoin.io - быстрый и надёжный сервис обмена криптовалюты GarantCoin
14:33 secrex.io обмен без лишних вопросов (NO AML)
14:10 PonyBit.ru - обменный пункт PonyBit.ru (Понибит.ру)
12:06 Мобильные и Резидентные Прокси Для Соц Сетей | 3 Гб Бесплатно
04:08 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка
02:16 Crypto Mixer ↔ Bitcoin Mixer ↔ Cryptocurrency tumbler ↔ No-AML
20:38 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств

00:29 С юмором по жизни!
23:13 Владельцы "китайцев" 3-леток, признавайтесь честно — сгнили или едут?
18:50 Стряхнуть обыденность - об Агасфере
16:23 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди
16:13 Осторожно! Криптовалюта
12:20 Компьютерная мышь
23:08 Физические сим-карты