Программа / сервис для мониторинга изменений на сайте
Страницы: 1
Программа / сервис для мониторинга изменений на сайте, Регулярная проверка сайта на изменения с фильтрацией по страницам и блокам
Коллеги, добрый день!Подскажите плиз, существует ли программа для мониторинга сайта на изменение контента?
Требования:
1. Отсылка отчетов на почту (установка периодичности)
2. Просмотр отчетов через интерфейс (веб или под винду)
3. Автоматическое построение списка страниц сайта
4. Возможность фильтрации, какие страницы проверять, а какие - нет (на сайтах, где есть фильтры может быть сотни тысяч страниц)
5. Размещение страниц по группам
6. Возможность указать какой блок в какой группе страниц проверять (на главной - проверять все, на внутренних только контент (без меню))
7. Желательно русский интерфейс

Рылись много, нашли пару софтин и пару онлайн сервисов:
www.changedetection.com
www.followthatpage.com
www.internetowl.comtrackengine.com/servlets/com.nexlabs.trackengine.ui.Login
www.copernic.com/en/products/tracker/

Даже спрашивали на https://bountify.co/17

Ни один из вышеперечисленных не устроил из-за прожолривости, тугодумности, или спам атаки о изменении в меню на 100500 страницах.

Помогите пожалуйста с толковым сервисом или софтиной. Можно и платный, главное, чтобы работал как нужно.

Если писать самому веб сервис, как думаете, будет спрос, например за 10-15 баксов в месяц, или одна проверка в месяц- бесплатно, каждая дополнительная - бакс.
Изменено: Антон Золотарев - 20 Ноября 2012 11:32
Привет. Писать такой сервис не имеет смысла, такое уже есть www.sorge.proТеперь по требованиям:
1. Отсылка отчетов на почту (установка периодичности)  - отсылается, но раз в сутки. Можно вообще отсылку отчётов отключить.
2. Просмотр отчетов через интерфейс (веб или под винду) - есть. Через веб-интерфейс.
[FONT=Tahoma, Arial, Helvetica, sans-serif]3. Автоматическое построение списка страниц сайта  - есть. При этом достаточно точно строит список и при желании можно настроить (хотя точность настолько высока, что в настройке нет смысла).[/FONT]
[FONT=Tahoma, Arial, Helvetica, sans-serif]4. Возможность фильтрации, какие страницы проверять, а какие - нет (на сайтах, где есть фильтры может быть сотни тысяч страниц)  - [/FONT]есть.[FONT=Tahoma, Arial, Helvetica, sans-serif] Правда на сотнях тысячах не тестировал, но страниц 900 легко.[/FONT]
5. Размещение страниц по группам - нет. Но признаться, не вижу в этом смысла.
6. Возможность указать какой блок в какой группе страниц проверять (на главной - проверять все, на внутренних только контент (без меню))  - и это есть. Можно создать шаблон и растиражировать правило из него на эти тысячи страниц.
7. Желательно русский интерфейс  - я там только русский и нашел) 



Да, оно платное, но есть тестовый период - попробовать можно. Возможно и бесплатную версию запустят.

Насчёт возможного спроса не знаю, но думаю это очень нишевое решение, иначе бы зарубежных аналогов было бы больше.

Удачи smile:)
Спасибо, потестим.
Но реально есть страницы с фильтрами, например:
hotline.ua/mobile/mobilnye-telefony-i-smartfony/6520/
hotline.ua/mobile/mobilnye-telefony-i-smartfony/6520-7667/


biopromin.info/index.php?gc.fk_id_country=4&orderby=%20ORDER%20BY%20gc.name%20&count=10&type=static&child=certificate&start=0
biopromin.info/index.php?gc.fk_id_country=4,16&orderby=%20ORDER%20BY%20gc.name%20&count=10&type=static&child=certificate&start=0

И если параметров фильтрации десяток, и в каждом около десятка вариантов, получаются сотни тысяч вариантов -> из которых мониторить нужно  несколько сотен.
ТС взгляните программу (линк затёр) SiteTextControl программа предназначена как раз для отслеживания изменения на страницах сайтов. Программа отслеживает и показывает Вам наглядно какие изменения и где именно, в какой строке были сделаны на странице.
В программе существует возможность задавать стоп блоки на страницах которые программа не должна учитывать (это блоки с динамическим содержимым например блок рефералов или блок новостей и тому подобные).
Так же возможна доработка программы под Ваши нужды.
Изменено: Prapovednik - 4 Мая 2015 07:28 (линк затёр и удалил форматирование)
(затёр линк) - посмотрел видео - не подходит.Нужно, чтобы страницы самостоятельно добавлялись.
Я ему линк на сайт, а он список страниц.
Изменено: Prapovednik - 4 Мая 2015 07:29 (линк затёр и удалил форматирование)
Антон, что бы Зорге не находил на сайте URL с переменными вида biopromin.info/index.php?gc.fk_id_country=4,16&orderby=%20ORDER%20BY%20gc.name%20&count=10&type=static&child=certificate&start=0  достаточно в настройках проекта поставить галочку, что вы хотите их фильтровать. Как называется там этот пункт не помню, но такое точно есть. Сам использовую для сканирования интернет-магазина.. и не одного... smile:)
Чесно говоря не разобрался.Может тут есть разработчик, чтоб пообщаться вживую?
Антон Золотарев,  здравствуйте. Если у Вас есть вопросы по использованию сервиса, Вы можете их задать через специальный раздел Техническая поддержка (он находится в верхнем меню сервиса). Мы достаточно оперативно и полно отвечаем на вопросы пользователей.

С уважением,
Служба поддержки проекта SORGE
Долго пытаясь найти что-то подходящее решили сделать сами подобный сервис: neowatcher.com.Он обладает всем, что перечисленно в требованиях + появилось достаточно много фич в процесе реализации, дизайна, пиления, показов друзьям.
Пользователям форума cy-pr.com несколько месяцев бесплатно. Так как сервис в том числе нацелен на SEOшников, нам интересны ваши отзывы, коллеги.
Попробуйте Радар от Топвизор.

Радар - это инструмент для автоматического отслеживания изменений на сайтах. 

В качестве отслеживаемых элементов используются:

заголовок страницы (тег title), 
описание страницы (мета-тег description), 
заголовок документа первого уровня (тег h1),
содержимое страницы (контент),
HTTP коды состояния страниц.

Руководство пользователя: https://tpv.sr/1QoBJ6W/
radar.png (133.84 КБ) [ Скачать ]
Изменено: c3po - 16 Июля 2016 16:01
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
05:15 Как продвигать сайт с неуникальным контентом 
15:08 Стоит ли добавлять сайт в Rambler топ 100? 
12:59 Absence в Армении 
19:29 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика! 
14:50 Индексация страниц 
12:36 У кого новостник, дайте пару советов плиз 
13:53 AviTool - мощный инструмент для автоматизации работы с Avito 
05:17 Продам копию сайта. 
04:11 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 
01:31 Скрипт обменника валют 
21:44 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств 
17:24 A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois, etc 
14:01 Продам аккаунты Gmail USA IP | Gmail MIX IP | Outlook Old 
13:15 SOCKS5 приватные прокси на 30 дней для PayPal 
05:24 Ну что, кто куда деваете свои сайты? 
22:09 Добро пожаловать в цифровой мир... 
19:42 Топ-5 способов использовать мобильные прокси для бизнеса: подробный обзор 
22:08 Накрутка поисковых подсказок 
05:04 Точные прогнозы на футбол 
14:01 Union Pharm - топовая фарма-партнерка для профессионалов! 
10:59 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди