Программа / сервис для мониторинга изменений на сайте
Страницы: 1
Программа / сервис для мониторинга изменений на сайте, Регулярная проверка сайта на изменения с фильтрацией по страницам и блокам
Коллеги, добрый день!Подскажите плиз, существует ли программа для мониторинга сайта на изменение контента?
Требования:
1. Отсылка отчетов на почту (установка периодичности)
2. Просмотр отчетов через интерфейс (веб или под винду)
3. Автоматическое построение списка страниц сайта
4. Возможность фильтрации, какие страницы проверять, а какие - нет (на сайтах, где есть фильтры может быть сотни тысяч страниц)
5. Размещение страниц по группам
6. Возможность указать какой блок в какой группе страниц проверять (на главной - проверять все, на внутренних только контент (без меню))
7. Желательно русский интерфейс

Рылись много, нашли пару софтин и пару онлайн сервисов:
www.changedetection.com
www.followthatpage.com
www.internetowl.comtrackengine.com/servlets/com.nexlabs.trackengine.ui.Login
www.copernic.com/en/products/tracker/

Даже спрашивали на https://bountify.co/17

Ни один из вышеперечисленных не устроил из-за прожолривости, тугодумности, или спам атаки о изменении в меню на 100500 страницах.

Помогите пожалуйста с толковым сервисом или софтиной. Можно и платный, главное, чтобы работал как нужно.

Если писать самому веб сервис, как думаете, будет спрос, например за 10-15 баксов в месяц, или одна проверка в месяц- бесплатно, каждая дополнительная - бакс.
Изменено: Антон Золотарев - 20 Ноября 2012 11:32
Привет. Писать такой сервис не имеет смысла, такое уже есть www.sorge.proТеперь по требованиям:
1. Отсылка отчетов на почту (установка периодичности)  - отсылается, но раз в сутки. Можно вообще отсылку отчётов отключить.
2. Просмотр отчетов через интерфейс (веб или под винду) - есть. Через веб-интерфейс.
[FONT=Tahoma, Arial, Helvetica, sans-serif]3. Автоматическое построение списка страниц сайта  - есть. При этом достаточно точно строит список и при желании можно настроить (хотя точность настолько высока, что в настройке нет смысла).[/FONT]
[FONT=Tahoma, Arial, Helvetica, sans-serif]4. Возможность фильтрации, какие страницы проверять, а какие - нет (на сайтах, где есть фильтры может быть сотни тысяч страниц)  - [/FONT]есть.[FONT=Tahoma, Arial, Helvetica, sans-serif] Правда на сотнях тысячах не тестировал, но страниц 900 легко.[/FONT]
5. Размещение страниц по группам - нет. Но признаться, не вижу в этом смысла.
6. Возможность указать какой блок в какой группе страниц проверять (на главной - проверять все, на внутренних только контент (без меню))  - и это есть. Можно создать шаблон и растиражировать правило из него на эти тысячи страниц.
7. Желательно русский интерфейс  - я там только русский и нашел) 



Да, оно платное, но есть тестовый период - попробовать можно. Возможно и бесплатную версию запустят.

Насчёт возможного спроса не знаю, но думаю это очень нишевое решение, иначе бы зарубежных аналогов было бы больше.

Удачи smile:)
Спасибо, потестим.
Но реально есть страницы с фильтрами, например:
hotline.ua/mobile/mobilnye-telefony-i-smartfony/6520/
hotline.ua/mobile/mobilnye-telefony-i-smartfony/6520-7667/


biopromin.info/index.php?gc.fk_id_country=4&orderby=%20ORDER%20BY%20gc.name%20&count=10&type=static&child=certificate&start=0
biopromin.info/index.php?gc.fk_id_country=4,16&orderby=%20ORDER%20BY%20gc.name%20&count=10&type=static&child=certificate&start=0

И если параметров фильтрации десяток, и в каждом около десятка вариантов, получаются сотни тысяч вариантов -> из которых мониторить нужно  несколько сотен.
ТС взгляните программу (линк затёр) SiteTextControl программа предназначена как раз для отслеживания изменения на страницах сайтов. Программа отслеживает и показывает Вам наглядно какие изменения и где именно, в какой строке были сделаны на странице.
В программе существует возможность задавать стоп блоки на страницах которые программа не должна учитывать (это блоки с динамическим содержимым например блок рефералов или блок новостей и тому подобные).
Так же возможна доработка программы под Ваши нужды.
Изменено: Prapovednik - 4 Мая 2015 07:28 (линк затёр и удалил форматирование)
(затёр линк) - посмотрел видео - не подходит.Нужно, чтобы страницы самостоятельно добавлялись.
Я ему линк на сайт, а он список страниц.
Изменено: Prapovednik - 4 Мая 2015 07:29 (линк затёр и удалил форматирование)
Антон, что бы Зорге не находил на сайте URL с переменными вида biopromin.info/index.php?gc.fk_id_country=4,16&orderby=%20ORDER%20BY%20gc.name%20&count=10&type=static&child=certificate&start=0  достаточно в настройках проекта поставить галочку, что вы хотите их фильтровать. Как называется там этот пункт не помню, но такое точно есть. Сам использовую для сканирования интернет-магазина.. и не одного... smile:)
Чесно говоря не разобрался.Может тут есть разработчик, чтоб пообщаться вживую?
Антон Золотарев,  здравствуйте. Если у Вас есть вопросы по использованию сервиса, Вы можете их задать через специальный раздел Техническая поддержка (он находится в верхнем меню сервиса). Мы достаточно оперативно и полно отвечаем на вопросы пользователей.

С уважением,
Служба поддержки проекта SORGE
Долго пытаясь найти что-то подходящее решили сделать сами подобный сервис: neowatcher.com.Он обладает всем, что перечисленно в требованиях + появилось достаточно много фич в процесе реализации, дизайна, пиления, показов друзьям.
Пользователям форума cy-pr.com несколько месяцев бесплатно. Так как сервис в том числе нацелен на SEOшников, нам интересны ваши отзывы, коллеги.
Попробуйте Радар от Топвизор.

Радар - это инструмент для автоматического отслеживания изменений на сайтах. 

В качестве отслеживаемых элементов используются:

заголовок страницы (тег title), 
описание страницы (мета-тег description), 
заголовок документа первого уровня (тег h1),
содержимое страницы (контент),
HTTP коды состояния страниц.

Руководство пользователя: https://tpv.sr/1QoBJ6W/
radar.png (133.84 КБ) [ Скачать ]
Изменено: c3po - 16 Июля 2016 16:01
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
22:23 Подскажите нормальный сервис накрутки ПФ 
15:44 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу. 
09:57 3snet - гемблинг, беттинг, форекс, бинарные опционы, майнинг 
19:33 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options 
15:12 Несколько статей хорошо выдаются в Гугле, но отвратительно в Яндексе 
13:40 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика! 
11:41 2Index - быстрая индексация страниц сайта и обратных ссылок 
22:30 SOCKS5 приватные прокси на 30 дней для PayPal 
22:29 Google Voice аккаунты для бесплатных SMS и звонков 
22:29 PayPal аккаунты для любых целей 
20:15 Belurk — высокоскоростные анонимные прокси от 0,24 рублей 
19:25 Whatsapp рассылки и реселлерская программа 
17:01 Продажа горячих лидов под крипту / Crypto Leads for Sale 
13:17 BIGPROXY.SHOP - Резидентные Ротационные Backconnect Proxy USA EUROPA MIX [Безлимитный трафик] 
16:49 monetizer.agency – рекламная сеть для взрослого и развлекательного трафика. 100$ новому вебмастеру 
20:43 Добро пожаловать в цифровой мир... 
15:59 Про мясо 
23:09 ПП от PMS remote.team - 200$ за команду 
13:28 Компьютерная мышь 
22:55 Ну что, кто куда деваете свои сайты? 
22:34 Используете беспроводные наушники?