Парсинг урл и метатегов

Сообщений: 2 Регистрация: Сен 2017

4 Сентября 2017 15:51

Добрый день ребята, подскажите пожалуйста если стоит задача сделать таблицу ексель формата (url:title:desription)Как можно автоматизировать сбор данных страниц в разных категориях на сайте интернет магазина

Иван

Сообщений: 2247 Регистрация: Янв 2014

5 Сентября 2017 00:42

Самый простой вариант:
1. Screaming Frog SEO Spider – можно найти ломаную (nulled) версию в сети.
2. Netpeak Spider – демо версия на месяц вроде.

Программы аналогичные в принципе по функционалу, отличаются только визуально. Спарсите сайт или рубрики, оттычкуете нужные данные (урл+метатеги) и выгрузите в эксель.

Изменено: Иван - 5 Сентября 2017 00:43

Eye

Сообщений: 22228 Регистрация: Май 2011

5 Сентября 2017 00:46

Цитата
Иваанушка Онсамый пишет: Как можно автоматизировать сбор данных страниц в разных категориях на сайте интернет магазина

В чём вопрос? Вы не умеете парсить или не умеете менять формат?

Мы не можем похвастаться мудростью глаз
И умелыми жестами рук,
Нам не нужно все это, чтобы друг друга понять.
Сигареты в руках, чай на столе - так замыкается круг,
И вдруг нам становится страшно что-то менять.

Иваанушка Онсамый

Сообщений: 2 Регистрация: Сен 2017

7 Сентября 2017 20:08

Цитата
Иван пишет: 2. Netpeak Spider – демо версия на месяц вроде.

Все отлично, только есть одна проблема)
При выгрузки данных у меня все в одну строчку выводиться url, title и description и не как не могу по колонкам раскидать. (такое не только при выгрузке с этой программы, с остальных тоже самое)
Вы с таким не сталкивались?

Иван Сообщений: 2247 Регистрация: Янв 2014	#5 8 Сентября 2017 03:20 А чем вы открываете? У мене в экселе проблем не было. Там вроде в настройках или перед самой выгрузкой формат выбирается, вплоть до пдф

Новые темы	Объявления	Свободное общение
23:10 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика! 21:20 Rotapost прикрыли! Чем пользоваться? 00:23 Раскрутка форума 00:19 Продвижение по ключам 17:40 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options 14:07 2Index - быстрая индексация страниц сайта и обратных ссылок 12:02 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу.	21:16 A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois, etc 19:49 - Вечные ссылки с трастовых сайтов 2024 проверен FastTrust 17:13 CactusPay.PRO \| Умная платёжная система с выводом в USDT TRC-20 16:45 Услуги продвижения в авито 15:40 TokenTrade — Ваш новый надежный обменник 15:15 Продам аккаунты Gmail USA IP \| Gmail MIX IP \| Outlook Old 13:22 Мобильные и Резидентные Прокси Для Соц Сетей \| 3 Гб Бесплатно	16:49 monetizer.agency – рекламная сеть для взрослого и развлекательного трафика. 100$ новому вебмастеру 20:43 Добро пожаловать в цифровой мир... 15:59 Про мясо 23:09 ПП от PMS remote.team - 200$ за команду 13:28 Компьютерная мышь 22:55 Ну что, кто куда деваете свои сайты? 22:34 Используете беспроводные наушники?

Новые темы

Объявления

Свободное общение

23:10 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика!
21:20 Rotapost прикрыли! Чем пользоваться?
00:23 Раскрутка форума
00:19 Продвижение по ключам
17:40 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options
14:07 2Index - быстрая индексация страниц сайта и обратных ссылок
12:02 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу.

21:16 A-Parser 1.1 - продвинутый парсер поисковых систем, Suggest, PR, DMOZ, Whois, etc
19:49 - Вечные ссылки с трастовых сайтов 2024 проверен FastTrust
17:13 CactusPay.PRO | Умная платёжная система с выводом в USDT TRC-20
16:45 Услуги продвижения в авито
15:40 TokenTrade — Ваш новый надежный обменник
15:15 Продам аккаунты Gmail USA IP | Gmail MIX IP | Outlook Old
13:22 Мобильные и Резидентные Прокси Для Соц Сетей | 3 Гб Бесплатно

16:49 monetizer.agency – рекламная сеть для взрослого и развлекательного трафика. 100$ новому вебмастеру
20:43 Добро пожаловать в цифровой мир...
15:59 Про мясо
23:09 ПП от PMS remote.team - 200$ за команду
13:28 Компьютерная мышь
22:55 Ну что, кто куда деваете свои сайты?
22:34 Используете беспроводные наушники?

25.10.2020 21:58	Парсинг интернет магазинов, сайтов, фото, видео
15.06.2020 15:15	25% скидка на парсинг email адресов
06.04.2020 19:49	Парсинг 2гис. Сбор контактов с 2gis
24.02.2020 17:49	ВК - слив данных или парсинг?
09.01.2019 23:13	Помогите с парсингом прайса