Google совсем не хочет смотреть robots.txt
Страницы: 1
Google совсем не хочет смотреть robots.txt
Буду краток: месяц назад добавил новый robots.txt, (закрывал от индексации дубляжы страниц и админку)В итоге в яше порядок, дубляж страниц вылетел осталось 170, а гугл все продолжает индексировать 700 страниц!!!!! роботс смотреть не желает, хоть и выносит 150 предупреждений что запрещена индексация некоторых страниц, 
ниже выложил свой роботс, помотрите может косяк какой-то? (для яши роботс аналогичный)
vkusno-poesti.ru/robots.txt ( vkusno-poesti.ru/robots.txt )

User-agent: *
Disallow: /cgi-bin
Disallow: /js/
Disallow: /1
Disallow: /css
Disallow: /i
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content
Disallow: /webstat/
Disallow: /wp-trackback/
Disallow: /wp-feed/
Disallow: /wp-comments/
Disallow: /category/
Disallow: /page/
Disallow: */page/*
Disallow: /tag/
Disallow: /feed/
Disallow: */feed/
Disallow: /comments/
Disallow: */comments/
Disallow: */comment-page-*
Disallow: /trackback/
Disallow: */trackback/
Disallow: */files/*
Disallow: /*/?replytocom=*
Disallow: /category/
Disallow: /archive/
Disallow:/2011/
Disallow:/2012/
Disallow:/2013/
Disallow:/2014/
Disallow: /stuff/
Disallow: /secure/
Disallow: /forum/
Disallow: /*?
Disallow: /*?*
Disallow: *.php
Disallow: /gb/
Disallow: /news/
Disallow: /photo/
Disallow: /publ/
Disallow: /forum/
Disallow: /index/
Disallow: /dictionary/
Disallow: /vse-retsepty/
Всегда так, он его не когда не видит... говорят мето-теги зато понимает:)
Страницы: 1
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
15:08 Стоит ли добавлять сайт в Rambler топ 100? 
14:14 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options 
19:33 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика! 
09:02 Как продвигать сайт с неуникальным контентом 
08:57 Absence в Армении 
14:50 Индексация страниц 
12:36 У кого новостник, дайте пару советов плиз 
17:33 Скрипт обменника валют 
17:11 Продам аккаунты Gmail USA IP | Gmail MIX IP | Outlook Old 
16:38 Продам копию сайта. 
12:52 swapsfera.com 
12:38 Volna.money 
18:59 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств 
12:20 ABCproxy—Премиум жилой прокси, 190+ локаторов, Неограниченная пропускная способность, $0.77/GB, Trial Scraper api 
20:48 Точные прогнозы на футбол 
19:04 Ну что, кто куда деваете свои сайты? 
22:09 Добро пожаловать в цифровой мир... 
19:42 Топ-5 способов использовать мобильные прокси для бизнеса: подробный обзор 
22:08 Накрутка поисковых подсказок 
14:01 Union Pharm - топовая фарма-партнерка для профессионалов! 
10:59 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди