Получить список всех URL, проиндексированных Google
Страницы: 1
Получить список всех URL, проиндексированных Google
Первый опыт с продвижением сайта. По недосмотру и непросвещенности в тонкостях СЕО в индексе Гугля оказалось 16 тыс. страниц, хотя на сайте страниц со смыслом всего 200-250. Два месяца как запретила всё лишнее в robots, но Гугль не торопится удалять эти лишние тысячи. Количество страниц снизилось пока только до 10 тыс. 

В панели вебмастера Гугля я вижу поле для удаления ненужных URL, но где их взять? По запросу site:мойсайт.ру мне показывают где-то 400 страниц и всё. Даже без фильтрации поиска. А где бы взять все эти тысячи найденных Гуглем URLов, чтобы хоть посмотреть, что же он такое нашел? (вдруг я не всё в robots запретила?)
Попробуйте в гуглвебмастере поигратся с пунктом Параметры URL он как бы для вашего случая (там по переменным в запросе гет можно исключать групы страниц из индекса, я чет уверен что вам это и нужно)), но как быстро он срабатывает я еще не пробывал, это сравнительно новая штука у гугла...
О да, кажется, это оно! smile:) То, что нужно! Спасибо большое!Я даже не предполагала, что на сайте может быть столько страниц с параметрами! Всё запретила, жду результатов.
А как всё таки можно получить список всех страниц?
И еще - кто то может подсказать почему в гугл-вебмастере в Параметры URL у меня есть только - Помогите Google повысить эффективность сканирования вашего сайта, сообщив, как следует обрабатывать параметры в URL. Подробнее... ( https://www.google.com/support/webmasters/bin/answer.py?answer=1235687&hl=ru )




Используйте эту функцию, только если вам точно известно, как тот или иной параметр влияет на работу вашего сайта. Если вы по ошибке запретите Google сканировать URL с определенными параметрами, значительная часть страниц вашего сайта может пропасть из результатов поиска.
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
12:28 adsense в 2026: кто реально выводит копейку через киргизию? 
12:26 Очередной взлом через плагин. Хакеры получают админку без пароля 
12:19 Биржи ссылок в 2026 - реально ли новичку с одним сайтом поднять копейку? 
12:12 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options 
23:24 Яндекс Нейро и выдача в 2026 - остались ли лазейки для маленьких сайтов? 
23:05 Раскрутка форума 
10:50 Альтернативы Адсенсу в 2026 - есть живые? 
13:32 Мониторинг обменников Сrypto-scout.io 
12:07 Копирайтинг RU/EN, переводы высокого уровня (рус/англ/укр), SEO-оптимизированные тексты под ключ для выхода в Топ (2000+ отзывов) 
11:41 Рассылки СМС/SMS, Вайбер/Viber, Ватсап/Whatsapp, Телеграм/Telegram любой тематики по всему миру 
10:54 От $0.015 за IP | $0.68 за ГБ | 9PROXY.COM | 20+ млн резидентных прокси | 99,95% аптайм | Без чёрных списков 
10:12 Monitex: Мониторинг с кэшбэком 80% в USDT 
22:47 1obmen.net - обмен криптовалют: выплаты в USD, EUR, GBP, CAD, CNY 
15:33 GhostRocket.pro — Взлетаем в новую эру криптообмена! 
12:30 8 марта: желаю аптайма 99.9% и e-e-a-t без локов 
12:29 Огородники 
16:47 Какой фильм вы любите посмотреть перед сном? 
15:46 молодильные яблоки и живая вода 
10:11 О природе путешествий. 
01:47 Точные прогнозы на футбол 
15:04 Сайты Рунета