Получить список всех URL, проиндексированных Google
Страницы: 1
Получить список всех URL, проиндексированных Google
Первый опыт с продвижением сайта. По недосмотру и непросвещенности в тонкостях СЕО в индексе Гугля оказалось 16 тыс. страниц, хотя на сайте страниц со смыслом всего 200-250. Два месяца как запретила всё лишнее в robots, но Гугль не торопится удалять эти лишние тысячи. Количество страниц снизилось пока только до 10 тыс. 

В панели вебмастера Гугля я вижу поле для удаления ненужных URL, но где их взять? По запросу site:мойсайт.ру мне показывают где-то 400 страниц и всё. Даже без фильтрации поиска. А где бы взять все эти тысячи найденных Гуглем URLов, чтобы хоть посмотреть, что же он такое нашел? (вдруг я не всё в robots запретила?)
Попробуйте в гуглвебмастере поигратся с пунктом Параметры URL он как бы для вашего случая (там по переменным в запросе гет можно исключать групы страниц из индекса, я чет уверен что вам это и нужно)), но как быстро он срабатывает я еще не пробывал, это сравнительно новая штука у гугла...
О да, кажется, это оно! smile:) То, что нужно! Спасибо большое!Я даже не предполагала, что на сайте может быть столько страниц с параметрами! Всё запретила, жду результатов.
А как всё таки можно получить список всех страниц?
И еще - кто то может подсказать почему в гугл-вебмастере в Параметры URL у меня есть только - Помогите Google повысить эффективность сканирования вашего сайта, сообщив, как следует обрабатывать параметры в URL. Подробнее... ( https://www.google.com/support/webmasters/bin/answer.py?answer=1235687&hl=ru )




Используйте эту функцию, только если вам точно известно, как тот или иной параметр влияет на работу вашего сайта. Если вы по ошибке запретите Google сканировать URL с определенными параметрами, значительная часть страниц вашего сайта может пропасть из результатов поиска.
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
17:53 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу. 
22:27 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options 
12:39 2Index - быстрая индексация страниц сайта и обратных ссылок 
06:17 3snet - гемблинг, беттинг, форекс, бинарные опционы, майнинг 
11:46 SharkBoss - партнёрская программа для монетизации ЛЮБЫХ видов трафика (включая спам). 
23:10 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика! 
21:20 Rotapost прикрыли! Чем пользоваться? 
02:14 Сервис смс активаций и аренды мобильных номеров ALISMS 
22:06 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств 
22:04 Услуги продвижения в авито 
21:00 Onechange.me — надежный обменник криптовалют и фиатных средств 
20:57 Форекс Лиды, Горячий Трафик Форекс, Лиды Форекс 2025, Горячий Трафик Крипто, Целевые Лиды Гэмблинг, Финансовые Рынки Лиды 
18:53 secrex.io обмен без лишних вопросов (NO AML) 
15:41 Запустите свой обменник за 1 день без программиста и серверов — облачная платформа EX365 
22:05 С юмором по жизни! 
13:08 Бесплатный майнинг Tether (USDT) 
16:49 monetizer.agency – рекламная сеть для взрослого и развлекательного трафика. 100$ новому вебмастеру 
20:43 Добро пожаловать в цифровой мир... 
15:59 Про мясо 
23:09 ПП от PMS remote.team - 200$ за команду 
13:28 Компьютерная мышь