Полезный и добрый парсинг.
Страницы: 1
Полезный и добрый парсинг.
Итак, господа, дамы и те кто еще не определился.
У меня достаточно большой опыт в создании парсеров, поэтому хочу рассказать о некоторых своих наблюдениях.
У большинства людей парсинг воспринимается, как некое зло - оно и не мудрено, т.к. большинство слизывает сайты, по сути, воруя чужую собственность, при чем достаточно успешно.
Для чего же можно использовать парсинг во благо?

Давайте рассмотрим конкретные кейсы.
Предположим, у вас есть небольшой интернет магазин в вашем регионе, а так же с 10, а может и 50 конкурентов.
У вас есть выгодные позиции (там где вы лидируете), а так же более слабые. Запуская рекламную компанию в лоб - вы просто теряете кучу бабла.

Ситуация №1:
Но есть одно весомое но - переодически конкуренты врубают скидки и начинают гнать рекламу.
Если у вас включена реклама в яндексе - вы сливаете свой бюджет в явно проигрышной ситуации: конкурент подымает ставку, а условия у него лучше.
Что мы хотим? Отловить данную ситуацию ( и оперативно), а потом или переделать рекламную компанию (например, остановить частично объявления) или уменьшить цену что бы у нас было более выгодное предложение.

Ситуация №2:
Мы хотим узнать какие позиции отсутствуют у конкурентов. Опять же - игра с рекламной компанией
Как говорится, кто владеет информацией - владеет рынком.

Какие есть решения:
1) Регулярно мониторить конкурентов - нужное дело и так делают многие. Но банально съедает много ресурсов. К тому же если у вас 1к позиций, то мониторить получится малую часть.
2) Использовать сервисы агрегаторы (например, яндекс и т.д.). Проблема до безумия проста- эти ресурсы получают данные по фидам, т.е. им предоставляют информацию сами инет магазины и зачастую многих конкурентов - просто нет.
3) Использовать самописные парсеры для получения данных. Можно использовать любой тип автоматизации - извлечь информацию и сравнить

Главный плюс такой системы, что конкурентам он не виден (зачастую они и не знают об этом).
Наверное самая большая сложность - это создание агрегации этих данных в единую таблицу, а так же валидация данных "на лету".
Решение этих задач позволяет получить крайне мощный инструмент в свои руки - игра с ценами, seo, информация о поведении конкурентов.

Неявное использование.
Один владелец интернет магазина собирал такие данные в течении пары последних лет. И в результате он смог выделить позиции, которых часто не хватает у конкурентов, а так же игры с ценами. После этого в SEO он стал делать упор именно на эти позиции (естественные ПФ у него стали лучше конкурентов и сайт стал подтягивать и другие запросы).

Вот такой кейс использования парсинга в благо. А как вы используете парсинг?
Изменено: Константин Нейтро - 23 Декабря 2020 21:59
«Превращаю день в ночь, сына в дочь, а ХЗ в ТЗ»

Бесплатная контекстная реклама

Ну вот щас взяли и раскрыли все тайны...smile:)
Цитата
WGN пишет:
Ну вот щас взяли и раскрыли все тайны...
Ну может вы что то интересное делаете? Например, отлавливаете любителей накручивать % перед распродажами и нещадно раскрываете информацию)))
Как вариант может вам интересно что-то в этом процессе? 
А так, если тема будет интересной - я еще могу рассказать чего-нить, например, про то какие интересные средства защиты я встречал и как их можно обойти, или, как парсинг помогает оперативно защищать репутацию)))
Цитата
Константин Нейтро пишет:
Цитата
WGN пишет:
Ну вот щас взяли и раскрыли все тайны...
Ну может вы что то интересное делаете? Например, отлавливаете любителей накручивать % перед распродажами и нещадно раскрываете информацию)))
Как вариант может вам интересно что-то в этом процессе?
А так, если тема будет интересной - я еще могу рассказать чего-нить, например, про то какие интересные средства защиты я встречал и как их можно обойти, или, как парсинг помогает оперативно защищать репутацию)))

Мне бы интересно было про обход узнать что-то новое.
Цитата
WGN пишет:
Мне бы интересно было про обход узнать что-то новое

У вас какой то корректный сайт интересует? Или определенная проблема есть?
Страницы: 1
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
17:11 Альтернатива РСЯ? 
16:54 Marketcall - международная партнерская сеть с оплатой Pay Per Call и LeadGen 
15:29 [b]Webvork [/b]- международная товарная СРА сеть с сертифицированными офферами на Европу. 
14:29 Bropush - твой бро в монетизации сайта push-уведомлениями 
13:43 Рамблер лучший поисковик 
13:41 Adsense - или как стать иноагентом 
00:48 Cityads.ru - PPA-партнёрка - до 800$ на 1000 переходов! 
16:09 Oborot.net - обмен валют онлайн 
14:57 Coindrop.trade - обменник электронных валют 
14:31 LucPey - Первоклассный обменник криптовалют 
13:42 Letspay.me - Capitalist, BTC, ETH, USDT <=> Cash USD EUR UAH RUB, AUTO Visa MasterCard UAH RUB 
01:00 Комплексный прогон по трастовым сайтам, статейное размещение. Рост НЧ-СЧ, Тиц-пр. 
20:42 Продвижение в яндекс топ 1-3 от 20.000 р в месяц 
20:41 Яндекс Директ со скидкой более 50%. СТАРЫЕ домены! 
17:03 22-летний студент стал миллионером продав более 500 селфи в формате NFT 
14:26 "Революционная идея": эксперты поддержали решение правительства о введении бесплатного доступа к значимым интернет-ресурсам 
20:55 NaZapad — 19-я онлайн-конференцию по SEO-продвижению 
14:43 Объявился правообладатель на купленный сайт 
02:46 Оцените сайт - Софт портал 
02:25 37 противникам прививок от COVID грозят уголовные дела 
23:26 В майкрософт чего то знают