Google индексирует капчу игнорируя robots.txt

Сообщений: 23 Регистрация: Июл 2013

1 Августа 2013 22:15

Google игнорит robots.txt, вот он:

Код

User-agent: *
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search
Disallow: /shop/order/
Disallow: /?ssid=

В следствии google продолжает индексировать капчу. Вот ссылка : https://www.google.ru/search?q=site:neonvideo.ru%2F%26&filter=0#q=site:neonvideo.ru&newwindow=1&psj=1&ei=iqX6Uc-6DqWh4gTdvoGYDg&start=320&sa=N&filter=0&bav=on.2,or.r_cp.r_qf.&fp=b5bc4fca42765193&biw=1440&bih=775&bvm=pv.xjs.s.en_US.seW1cfrvSKg.O

Подскажите что мне делать? Я слышал проиндексированные страницы можно удалять из google,но их довольно много smile:mad:

Изменено: microon - 1 Августа 2013 22:17

WSairus

Сообщений: 1432 Регистрация: Июн 2010

2 Августа 2013 00:18

microon, запретите их в htaccess для useragent GoogleBot. Вообще Google не гарантирует удаление страниц только потому что они запрещены в роботс - в инструкциях это написано.

Партнёрки для заработка!

microon

Сообщений: 23 Регистрация: Июл 2013

2 Августа 2013 00:57

WSairus, у меня сайт на Ucoz стоит,там .htaccess не поддерживается smile:(

В Google webmasters есть функция - удалить url...говорят что можно удалить все страницы определенного каталога...не подскажите как можно это сделать?

WSairus

Сообщений: 1432 Регистрация: Июн 2010

2 Августа 2013 01:40

microon, нельзя там несколько Url за один раз удалять. Единственным 100% способом является: "Чтобы полностью исключить вероятность появления содержания страницы в индексе Google, даже если на нее ссылаются другие сайты, используйте метатег noindex. Если робот Googlebot начнет сканировать страницу, то обнаружит метатег noindex и не станет отображать ее в индексе.". Однако не думаю что это возможно на ucoz - можете им отписать в техподдержку и объяснить ситуацию.

microon Сообщений: 23 Регистрация: Июл 2013	#5 2 Августа 2013 12:11 WSairus, странно,я в Google Webmaster - удаление URL указал ссылку : neonvideo.ru/secure/ и из поиска удалили всю капчу... Изменено: microon - 2 Августа 2013 12:11

Новые темы	Объявления	Свободное общение
15:08 Стоит ли добавлять сайт в Rambler топ 100? 14:14 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options 19:33 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика! 09:02 Как продвигать сайт с неуникальным контентом 08:57 Absence в Армении 14:50 Индексация страниц 12:36 У кого новостник, дайте пару советов плиз	10:29 local-pay.com - быстрый и надежный обменник криптовалюты Local-Pay 04:11 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 17:33 Скрипт обменника валют 17:11 Продам аккаунты Gmail USA IP \| Gmail MIX IP \| Outlook Old 16:38 Продам копию сайта. 12:52 swapsfera.com 12:38 Volna.money	20:48 Точные прогнозы на футбол 19:04 Ну что, кто куда деваете свои сайты? 22:09 Добро пожаловать в цифровой мир... 19:42 Топ-5 способов использовать мобильные прокси для бизнеса: подробный обзор 22:08 Накрутка поисковых подсказок 14:01 Union Pharm - топовая фарма-партнерка для профессионалов! 10:59 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди

Новые темы

Объявления

Свободное общение

15:08 Стоит ли добавлять сайт в Rambler топ 100?
14:14 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options
19:33 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика!
09:02 Как продвигать сайт с неуникальным контентом
08:57 Absence в Армении
14:50 Индексация страниц
12:36 У кого новостник, дайте пару советов плиз

10:29 local-pay.com - быстрый и надежный обменник криптовалюты Local-Pay
04:11 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка
17:33 Скрипт обменника валют
17:11 Продам аккаунты Gmail USA IP | Gmail MIX IP | Outlook Old
16:38 Продам копию сайта.
12:52 swapsfera.com
12:38 Volna.money

20:48 Точные прогнозы на футбол
19:04 Ну что, кто куда деваете свои сайты?
22:09 Добро пожаловать в цифровой мир...
19:42 Топ-5 способов использовать мобильные прокси для бизнеса: подробный обзор
22:08 Накрутка поисковых подсказок
14:01 Union Pharm - топовая фарма-партнерка для профессионалов!
10:59 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди

08.04.2025 15:19	Трамп пригрозил Google судом
13.03.2025 22:05	Google покинул Россию: Сервисы под угрозой!
09.03.2025 11:27	Google под прицелом: как поисковый гигант манипулирует выдачей в угоду своим интересам
08.03.2025 12:59	Роскомнадзор закручивает гайки: вебмастерам грозит блокировка за использование Google Analytics
02.03.2025 21:39	Google откажется от SMS для авторизации в Gmail. Их заменят на QR-коды