Google индексирует капчу игнорируя robots.txt

Сообщений: 23 Регистрация: Июл 2013

1 Августа 2013 22:15

Google игнорит robots.txt, вот он:

Код

User-agent: *
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search
Disallow: /shop/order/
Disallow: /?ssid=

В следствии google продолжает индексировать капчу. Вот ссылка : https://www.google.ru/search?q=site:neonvideo.ru%2F%26&filter=0#q=site:neonvideo.ru&newwindow=1&psj=1&ei=iqX6Uc-6DqWh4gTdvoGYDg&start=320&sa=N&filter=0&bav=on.2,or.r_cp.r_qf.&fp=b5bc4fca42765193&biw=1440&bih=775&bvm=pv.xjs.s.en_US.seW1cfrvSKg.O

Подскажите что мне делать? Я слышал проиндексированные страницы можно удалять из google,но их довольно много smile:mad:

Изменено: microon - 1 Августа 2013 22:17

WSairus

Сообщений: 1432 Регистрация: Июн 2010

2 Августа 2013 00:18

microon, запретите их в htaccess для useragent GoogleBot. Вообще Google не гарантирует удаление страниц только потому что они запрещены в роботс - в инструкциях это написано.

Партнёрки для заработка!

microon

Сообщений: 23 Регистрация: Июл 2013

2 Августа 2013 00:57

WSairus, у меня сайт на Ucoz стоит,там .htaccess не поддерживается smile:(

В Google webmasters есть функция - удалить url...говорят что можно удалить все страницы определенного каталога...не подскажите как можно это сделать?

WSairus

Сообщений: 1432 Регистрация: Июн 2010

2 Августа 2013 01:40

microon, нельзя там несколько Url за один раз удалять. Единственным 100% способом является: "Чтобы полностью исключить вероятность появления содержания страницы в индексе Google, даже если на нее ссылаются другие сайты, используйте метатег noindex. Если робот Googlebot начнет сканировать страницу, то обнаружит метатег noindex и не станет отображать ее в индексе.". Однако не думаю что это возможно на ucoz - можете им отписать в техподдержку и объяснить ситуацию.

microon Сообщений: 23 Регистрация: Июл 2013	#5 2 Августа 2013 12:11 WSairus, странно,я в Google Webmaster - удаление URL указал ссылку : neonvideo.ru/secure/ и из поиска удалили всю капчу... Изменено: microon - 2 Августа 2013 12:11

Новые темы	Объявления	Свободное общение
06:11 Продвижение по ключам 09:47 Adsense личный опыт 13:13 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options 13:47 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу. 08:27 Ищу специалистов 08:18 Прибыль 200$ - 400$, за каждую 1000 уников! Google, FB и тд 08:12 ру гембла	04:05 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 23:00 №1 Рассылка / Инвайтинг [TELEGRAM] \| Приватный метод 23:00 Trustpilot Reviews \| Подниму рейтинг вашей компании 22:59 Продвижение YouTube видео в топ поиска \| Любой тип контента \| Гарантия результата 22:59 Установка\|Настройка\|Доработка\|Наполнение сайтов\|Дизайн\|3D\|Видеомонтаж 22:04 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств 19:58 Создам под вашу нишу сетку сайтов-сателлитов для привлечения целевого трафика	07:35 Что случилось с форумом? 03:07 Всего п онемногу 12:45 Куплю проигрышные букмекерские аккаунты 11:55 Union Pharm - топовая фарма-партнерка для профессионалов! 17:09 Точные прогнозы на футбол 10:00 Ну что, кто куда деваете свои сайты? 16:22 Компьютерная мышь

Новые темы

Объявления

Свободное общение

06:11 Продвижение по ключам
09:47 Adsense личный опыт
13:13 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options
13:47 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу.
08:27 Ищу специалистов
08:18 Прибыль 200$ - 400$, за каждую 1000 уников! Google, FB и тд
08:12 ру гембла

04:05 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка
23:00 №1 Рассылка / Инвайтинг [TELEGRAM] | Приватный метод
23:00 Trustpilot Reviews | Подниму рейтинг вашей компании
22:59 Продвижение YouTube видео в топ поиска | Любой тип контента | Гарантия результата
22:59 Установка|Настройка|Доработка|Наполнение сайтов|Дизайн|3D|Видеомонтаж
22:04 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств
19:58 Создам под вашу нишу сетку сайтов-сателлитов для привлечения целевого трафика

07:35 Что случилось с форумом?
03:07 Всего п онемногу
12:45 Куплю проигрышные букмекерские аккаунты
11:55 Union Pharm - топовая фарма-партнерка для профессионалов!
17:09 Точные прогнозы на футбол
10:00 Ну что, кто куда деваете свои сайты?
16:22 Компьютерная мышь

03.09.2025 13:18	Google покинул Россию: Сервисы под угрозой!
08.04.2025 15:19	Трамп пригрозил Google судом
09.03.2025 11:27	Google под прицелом: как поисковый гигант манипулирует выдачей в угоду своим интересам
08.03.2025 12:59	Роскомнадзор закручивает гайки: вебмастерам грозит блокировка за использование Google Analytics
02.03.2025 21:39	Google откажется от SMS для авторизации в Gmail. Их заменят на QR-коды