Парсинг урл и метатегов

Сообщений: 2 Регистрация: Сен 2017

4 Сентября 2017 15:51

Добрый день ребята, подскажите пожалуйста если стоит задача сделать таблицу ексель формата (url:title:desription)Как можно автоматизировать сбор данных страниц в разных категориях на сайте интернет магазина

Иван

Сообщений: 2247 Регистрация: Янв 2014

5 Сентября 2017 00:42

Самый простой вариант:
1. Screaming Frog SEO Spider – можно найти ломаную (nulled) версию в сети.
2. Netpeak Spider – демо версия на месяц вроде.

Программы аналогичные в принципе по функционалу, отличаются только визуально. Спарсите сайт или рубрики, оттычкуете нужные данные (урл+метатеги) и выгрузите в эксель.

Изменено: Иван - 5 Сентября 2017 00:43

Eye

Сообщений: 22174 Регистрация: Май 2011

5 Сентября 2017 00:46

Цитата
Иваанушка Онсамый пишет: Как можно автоматизировать сбор данных страниц в разных категориях на сайте интернет магазина

В чём вопрос? Вы не умеете парсить или не умеете менять формат?

Мы не можем похвастаться мудростью глаз
И умелыми жестами рук,
Нам не нужно все это, чтобы друг друга понять.
Сигареты в руках, чай на столе - так замыкается круг,
И вдруг нам становится страшно что-то менять.

Иваанушка Онсамый

Сообщений: 2 Регистрация: Сен 2017

7 Сентября 2017 20:08

Цитата
Иван пишет: 2. Netpeak Spider – демо версия на месяц вроде.

Все отлично, только есть одна проблема)
При выгрузки данных у меня все в одну строчку выводиться url, title и description и не как не могу по колонкам раскидать. (такое не только при выгрузке с этой программы, с остальных тоже самое)
Вы с таким не сталкивались?

Иван Сообщений: 2247 Регистрация: Янв 2014	#5 8 Сентября 2017 03:20 А чем вы открываете? У мене в экселе проблем не было. Там вроде в настройках или перед самой выгрузкой формат выбирается, вплоть до пдф

Новые темы	Объявления	Свободное общение
00:40 Стоит ли добавлять сайт в Rambler топ 100? 19:33 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика! 09:02 Как продвигать сайт с неуникальным контентом 08:57 Absence в Армении 14:50 Индексация страниц 12:36 У кого новостник, дайте пару советов плиз 13:53 AviTool - мощный инструмент для автоматизации работы с Avito	22:17 Продам копию сайта. 21:42 Продам обменник криптовалюты, а также новый обменник под ключ с обучением. Скидки на скрипты обменника 15:52 AllCharge.online. Современный, быстрый и надёжный обменник 15:32 CactusPay.PRO \| Умная платёжная система с выводом в USDT TRC-20 12:01 PonyBit.ru - обменный пункт PonyBit.ru (Понибит.ру) 04:11 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 01:31 Скрипт обменника валют	21:05 Точные прогнозы на футбол 11:07 Ну что, кто куда деваете свои сайты? 22:09 Добро пожаловать в цифровой мир... 19:42 Топ-5 способов использовать мобильные прокси для бизнеса: подробный обзор 22:08 Накрутка поисковых подсказок 14:01 Union Pharm - топовая фарма-партнерка для профессионалов! 10:59 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди

Новые темы

Объявления

Свободное общение

00:40 Стоит ли добавлять сайт в Rambler топ 100?
19:33 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика!
09:02 Как продвигать сайт с неуникальным контентом
08:57 Absence в Армении
14:50 Индексация страниц
12:36 У кого новостник, дайте пару советов плиз
13:53 AviTool - мощный инструмент для автоматизации работы с Avito

22:17 Продам копию сайта.
21:42 Продам обменник криптовалюты, а также новый обменник под ключ с обучением. Скидки на скрипты обменника
15:52 AllCharge.online. Современный, быстрый и надёжный обменник
15:32 CactusPay.PRO | Умная платёжная система с выводом в USDT TRC-20
12:01 PonyBit.ru - обменный пункт PonyBit.ru (Понибит.ру)
04:11 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка
01:31 Скрипт обменника валют

21:05 Точные прогнозы на футбол
11:07 Ну что, кто куда деваете свои сайты?
22:09 Добро пожаловать в цифровой мир...
19:42 Топ-5 способов использовать мобильные прокси для бизнеса: подробный обзор
22:08 Накрутка поисковых подсказок
14:01 Union Pharm - топовая фарма-партнерка для профессионалов!
10:59 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди

25.10.2020 21:58	Парсинг интернет магазинов, сайтов, фото, видео
15.06.2020 15:15	25% скидка на парсинг email адресов
06.04.2020 19:49	Парсинг 2гис. Сбор контактов с 2gis
24.02.2020 17:49	ВК - слив данных или парсинг?
09.01.2019 23:13	Помогите с парсингом прайса