Как собрать все url страниц сайта?

Сообщений: 306 Регистрация: Фев 2013

3 Мая 2015 20:33

Доброго времени суток, уважаемые форумчане. Подскажите, пожалуйста, сервис, который поможет собрать списком все url сайта. Заранее спасибо!

http://www.inwin.com.ua - Интернет аукцион Украины

SharkCinema

Сообщений: 619 Регистрация: Окт 2014

3 Мая 2015 20:39

site.com/sitemap.xml

http://smswifi.ru - SAS WiFi СМС авторизация для вашего бизнеса. | http://supportila.ru - личный блог.

Zulios

Сообщений: 306 Регистрация: Фев 2013

3 Мая 2015 21:13

Данные страницы нужно получить без даты добавления их в карту. Есть ли какая-то программа, которая спарсит все страницы списком в виде url каждой страницы?

Алексей SP

Сообщений: 1464 Регистрация: Сен 2012

3 Мая 2015 22:14

STGrabber поможет

Открой свой магазин за 5 минут, их товары, их обслуживание, с тебя только клиенты >>> РЕГИСТРАЦИЯ <<<
Скрин выплат по запросу.
Рефералам помощь.

SharkCinema

Сообщений: 619 Регистрация: Окт 2014

4 Мая 2015 00:05

Так а что мешает сохранить sitemap и вытащить ссылки через регулярку?

<url>|(<loc>(|\r\n))(.*)((|\r\n)</loc>)|(<(.*)>(|\r\n)*(.*)(|\r\n)*</(.*)>)|<.*>|(\r\n)+

\3\r\n

Marques

Сообщений: 408 Регистрация: Авг 2010

4 Мая 2015 00:34

Цитата
SharkCinema пишет: Так а что мешает сохранить sitemap и вытащить ссылки через регулярку? <url>\|(<loc>(\|\r\n))(.)((\|\r\n)</loc>\|(<(.)>(\|\r\n)(.)(\|\r\n)</(.)>\|<.*>\|(\r\n)+ \3\r\n

Поясните для "валенков" как это делается)

Биржа криптовалют удобная аналитика, хранение, покупка

Zulios

Сообщений: 306 Регистрация: Фев 2013

4 Мая 2015 01:02

Тоже интересует этот вопрос для валенков smile:)

Zulios

Сообщений: 306 Регистрация: Фев 2013

4 Мая 2015 01:03

Цитата
Алексей SP пишет: STGrabber поможет

Сейчас пробовал найти - нигде не находит. По всем адресам либо файлик отсутствует, либо вирусные файлики лежат

Zulios

Сообщений: 306 Регистрация: Фев 2013

4 Мая 2015 01:15

Цитата
Алексей SP пишет: STGrabber поможет

Спасибо большое! Таки нашел программку, в момент все урлы с карты сайта спарсила! Очень помогли, спасибо еще раз smile:)

Роман Цабров

Сообщений: 194 Регистрация: Янв 2013

#10

4 Мая 2015 17:06

content downlader легко решает такие вопросы

Самая лучшая ВАП партнерка! Без санкций ТУТ

serogo evgo

Сообщений: 408 Регистрация: Мар 2015

#11

9 Декабря 2015 02:53

STGrabber у кого нить осталась эта програма или что то подобное нужно собрать все ссылки с карты сайта. либо плагин для wp для сбора списка всех адресов страниц

создание продвижение сайтов ! качество и доступная цена

Ravager

Сообщений: 29 Регистрация: Ноя 2015

#12

9 Декабря 2015 18:41

Цитата

Marques пишет:

Цитата
SharkCinema пишет: Так а что мешает сохранить sitemap и вытащить ссылки через регулярку? <url>\|(<loc>(\|\r\n))(.)((\|\r\n)</loc>\|(<(.)>(\|\r\n)(.)(\|\r\n)</(.)>\|<.*>\|(\r\n)+ \3\r\n

Поясните для "валенков" как это делается)

Нужен текстовый редактор подходящий, например sublime text. Просто делаете поиск по регулярному выражению на выбор всех результатов в файле sitemap - где все ссылки лежат.

Александр Фокс Сообщений: 178 Регистрация: Ноя 2013	#13 24 Марта 2016 16:20 Мне тоже нужны были все адреса страниц сайта, поступил следующим образом. Скачал карту сайта и открыл при помощи Notepad ++. Все очень просто. Поделки своими руками

Новые темы	Объявления	Свободное общение
01:46 Настроить поставщиков в программе E-Trade PriceList Importer 15:26 Найти элемент в коде 11:51 Bropush - твой бро в монетизации сайта push-уведомлениями 03:12 Сайты-копипасты 21:47 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу. 09:59 Ошибка после размещения кода HTML! 15:34 Adtrafico - Правильная партнёрская сеть под бурж трафик	20:17 4G/LTE Mobile Proxy 30+ geo 18:03 Обмен без AML и верификации Aztor.pro 17:30 Комплексный прогон по трастовым сайтам, статейное размещение. Рост НЧ-СЧ, Тиц-пр. 16:34 Phoenix - Выгодный обмен электронных валют, без верификации 16:11 ZennoPoster - софт №1 для автоматизации любых SEO задач! 13:30 Coin Click.cc - Быстрый и надежный обмен электронных валют в два клика 13:22 Burzh.top\|Партнерская программа под любой вид трафика (email, спам, УБТ)	12:48 Каспкрски ОС 11:21 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди 01:05 Точные прогнозы на футбол 14:41 Бесплатный мини-аудит юзабилити и конверсии + технический SEO-аудит в подарок 15:24 Добро пожаловать в цифровой мир... 22:58 У меня дикая просадка по РСЯ за последние 3 суток 21:51 Linux - это максимальная свобода

Новые темы

Объявления

Свободное общение

01:46 Настроить поставщиков в программе E-Trade PriceList Importer
15:26 Найти элемент в коде
11:51 Bropush - твой бро в монетизации сайта push-уведомлениями
03:12 Сайты-копипасты
21:47 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу.
09:59 Ошибка после размещения кода HTML!
15:34 Adtrafico - Правильная партнёрская сеть под бурж трафик

20:17 4G/LTE Mobile Proxy 30+ geo
18:03 Обмен без AML и верификации Aztor.pro
17:30 Комплексный прогон по трастовым сайтам, статейное размещение. Рост НЧ-СЧ, Тиц-пр.
16:34 Phoenix - Выгодный обмен электронных валют, без верификации
16:11 ZennoPoster - софт №1 для автоматизации любых SEO задач!
13:30 Coin Click.cc - Быстрый и надежный обмен электронных валют в два клика
13:22 Burzh.top|Партнерская программа под любой вид трафика (email, спам, УБТ)

12:48 Каспкрски ОС
11:21 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди
01:05 Точные прогнозы на футбол
14:41 Бесплатный мини-аудит юзабилити и конверсии + технический SEO-аудит в подарок
15:24 Добро пожаловать в цифровой мир...
22:58 У меня дикая просадка по РСЯ за последние 3 суток
21:51 Linux - это максимальная свобода

02.12.2023 00:11	Как долго индексируется страница
30.08.2023 11:44	Сколько ключей запросов нужно писать на одной странице, чтобы быть в топе
22.05.2023 01:50	За отзыв ТЗ по оптимизации 1й страницы
04.04.2023 10:41	Главная страница сайта недоступна для робота: код ответа страницы «406 (Not Acceptable)»
24.11.2022 10:02	Приставка к страницам пагинации типа ?fbclid