Программа / сервис для мониторинга изменений на сайте
Страницы: 1
Программа / сервис для мониторинга изменений на сайте, Регулярная проверка сайта на изменения с фильтрацией по страницам и блокам
Коллеги, добрый день!Подскажите плиз, существует ли программа для мониторинга сайта на изменение контента?
Требования:
1. Отсылка отчетов на почту (установка периодичности)
2. Просмотр отчетов через интерфейс (веб или под винду)
3. Автоматическое построение списка страниц сайта
4. Возможность фильтрации, какие страницы проверять, а какие - нет (на сайтах, где есть фильтры может быть сотни тысяч страниц)
5. Размещение страниц по группам
6. Возможность указать какой блок в какой группе страниц проверять (на главной - проверять все, на внутренних только контент (без меню))
7. Желательно русский интерфейс

Рылись много, нашли пару софтин и пару онлайн сервисов:
www.changedetection.com
www.followthatpage.com
www.internetowl.comtrackengine.com/servlets/com.nexlabs.trackengine.ui.Login
www.copernic.com/en/products/tracker/

Даже спрашивали на https://bountify.co/17

Ни один из вышеперечисленных не устроил из-за прожолривости, тугодумности, или спам атаки о изменении в меню на 100500 страницах.

Помогите пожалуйста с толковым сервисом или софтиной. Можно и платный, главное, чтобы работал как нужно.

Если писать самому веб сервис, как думаете, будет спрос, например за 10-15 баксов в месяц, или одна проверка в месяц- бесплатно, каждая дополнительная - бакс.
Изменено: Антон Золотарев - 20 Ноября 2012 11:32
Привет. Писать такой сервис не имеет смысла, такое уже есть www.sorge.proТеперь по требованиям:
1. Отсылка отчетов на почту (установка периодичности)  - отсылается, но раз в сутки. Можно вообще отсылку отчётов отключить.
2. Просмотр отчетов через интерфейс (веб или под винду) - есть. Через веб-интерфейс.
[FONT=Tahoma, Arial, Helvetica, sans-serif]3. Автоматическое построение списка страниц сайта  - есть. При этом достаточно точно строит список и при желании можно настроить (хотя точность настолько высока, что в настройке нет смысла).[/FONT]
[FONT=Tahoma, Arial, Helvetica, sans-serif]4. Возможность фильтрации, какие страницы проверять, а какие - нет (на сайтах, где есть фильтры может быть сотни тысяч страниц)  - [/FONT]есть.[FONT=Tahoma, Arial, Helvetica, sans-serif] Правда на сотнях тысячах не тестировал, но страниц 900 легко.[/FONT]
5. Размещение страниц по группам - нет. Но признаться, не вижу в этом смысла.
6. Возможность указать какой блок в какой группе страниц проверять (на главной - проверять все, на внутренних только контент (без меню))  - и это есть. Можно создать шаблон и растиражировать правило из него на эти тысячи страниц.
7. Желательно русский интерфейс  - я там только русский и нашел) 



Да, оно платное, но есть тестовый период - попробовать можно. Возможно и бесплатную версию запустят.

Насчёт возможного спроса не знаю, но думаю это очень нишевое решение, иначе бы зарубежных аналогов было бы больше.

Удачи smile:)
Спасибо, потестим.
Но реально есть страницы с фильтрами, например:
hotline.ua/mobile/mobilnye-telefony-i-smartfony/6520/
hotline.ua/mobile/mobilnye-telefony-i-smartfony/6520-7667/


biopromin.info/index.php?gc.fk_id_country=4&orderby=%20ORDER%20BY%20gc.name%20&count=10&type=static&child=certificate&start=0
biopromin.info/index.php?gc.fk_id_country=4,16&orderby=%20ORDER%20BY%20gc.name%20&count=10&type=static&child=certificate&start=0

И если параметров фильтрации десяток, и в каждом около десятка вариантов, получаются сотни тысяч вариантов -> из которых мониторить нужно  несколько сотен.
ТС взгляните программу (линк затёр) SiteTextControl программа предназначена как раз для отслеживания изменения на страницах сайтов. Программа отслеживает и показывает Вам наглядно какие изменения и где именно, в какой строке были сделаны на странице.
В программе существует возможность задавать стоп блоки на страницах которые программа не должна учитывать (это блоки с динамическим содержимым например блок рефералов или блок новостей и тому подобные).
Так же возможна доработка программы под Ваши нужды.
Изменено: Prapovednik - 4 Мая 2015 07:28 (линк затёр и удалил форматирование)
(затёр линк) - посмотрел видео - не подходит.Нужно, чтобы страницы самостоятельно добавлялись.
Я ему линк на сайт, а он список страниц.
Изменено: Prapovednik - 4 Мая 2015 07:29 (линк затёр и удалил форматирование)
Антон, что бы Зорге не находил на сайте URL с переменными вида biopromin.info/index.php?gc.fk_id_country=4,16&orderby=%20ORDER%20BY%20gc.name%20&count=10&type=static&child=certificate&start=0  достаточно в настройках проекта поставить галочку, что вы хотите их фильтровать. Как называется там этот пункт не помню, но такое точно есть. Сам использовую для сканирования интернет-магазина.. и не одного... smile:)
Чесно говоря не разобрался.Может тут есть разработчик, чтоб пообщаться вживую?
Антон Золотарев,  здравствуйте. Если у Вас есть вопросы по использованию сервиса, Вы можете их задать через специальный раздел Техническая поддержка (он находится в верхнем меню сервиса). Мы достаточно оперативно и полно отвечаем на вопросы пользователей.

С уважением,
Служба поддержки проекта SORGE
Долго пытаясь найти что-то подходящее решили сделать сами подобный сервис: neowatcher.com.Он обладает всем, что перечисленно в требованиях + появилось достаточно много фич в процесе реализации, дизайна, пиления, показов друзьям.
Пользователям форума cy-pr.com несколько месяцев бесплатно. Так как сервис в том числе нацелен на SEOшников, нам интересны ваши отзывы, коллеги.
Попробуйте Радар от Топвизор.

Радар - это инструмент для автоматического отслеживания изменений на сайтах. 

В качестве отслеживаемых элементов используются:

заголовок страницы (тег title), 
описание страницы (мета-тег description), 
заголовок документа первого уровня (тег h1),
содержимое страницы (контент),
HTTP коды состояния страниц.

Руководство пользователя: https://tpv.sr/1QoBJ6W/
radar.png (133.84 КБ) [ Скачать ]
Изменено: c3po - 16 Июля 2016 16:01
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
21:19 Google рассматривает возможность взимания платы за поиск 
21:15 Артемий Лебедев: «ВКонтакте» станет «новым поисковиком» 
21:12 Самозанятые смогут зарабатывать в рекламной сети VK 
20:44 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу. 
15:54 Profit Pixels - In-House Форекс, Крипто, Трейдинг CPA Офферы | Еженедельные Выплаты | CPA до $950 
15:22 Adtrafico - Правильная партнёрская сеть под бурж трафик 
12:26 Bropush - твой бро в монетизации сайта push-уведомлениями 
23:45 Криптовалютный обменник Xgram.io - новое воплощение качества 
12:23 Готовые аккаунты Яндекс Директ с пройденной модерацией, с отлежкой, трастовые 
11:42 Продаются аккаунты Яндекс Директ без НДС (валюта USD). +20% к вашему бюджету 
10:43 USMobileSMSBot - 
06:49 Transit-Bit.com - Обмен USDT на IDR, THB, RUB и наличные 
13:32 Coin Click.cc - Быстрый и надежный обмен электронных валют в два клика 
11:17 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 
23:27 Видимо, похороны СУПРа уже прошли как-то по-тихому 
21:51 С юмором по жизни! 
21:32 Добро пожаловать в цифровой мир... 
23:41 Точные прогнозы на футбол 
12:04 Как получить рефералов и посетителей на сайт бесплатно. 
12:48 Каспкрски ОС 
11:21 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди