Не в домене?
Страницы: 1 2 След.
Не в домене?, Гугл вебмастер
Помогите пожалуйста. Сейчас в вебмастере гугл увидел что сайт закрыт к индексации на основании робот.тхт
"Файл Sitemap содержит URL, доступ к которым заблокирован в файле robots.txt". - вот что пишет

User-agent: Yandex
Disallow: /cgi-bin
Disallow: */page/
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-content/plugins/
Disallow: /wp-content/cache/
Disallow: /wp-content/themes/
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: /author/
Disallow: /feed/
Disallow: */feed
Disallow: */trackback
Disallow: */comments
Disallow: /*?
Disallow: /*?*
Disallow: /*.php
Host: mmorpgonline.ru

Disallow: /cgi-bin
Disallow: */page/
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-content/plugins/
Disallow: /wp-content/cache/
Disallow: /wp-content/themes/
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: /author/
Disallow: /feed/
Disallow: */feed
Disallow: */trackback
Disallow: */comments
Disallow: /*?
Disallow: /*?*
Disallow: /*.php
Sitemap: mmorpgonline.ru/sitemap.xml

Где я тут заблокировал индексацию всех страниц кроме главной?
Спасибо!
[TABLE]

[TR][TD]mmorpgonline.ru/altera/[/TD][TD]Не в домене
[/TD][/TR]

[/TABLE]




[TABLE]

[TR][TD]www.mmorpgonline.ru/[/TD][TD]Разрешено
[/TD][/TR]

[/TABLE]
Уберите Yandex в первой строке. Это старая дурка делить пауков на своих и чужих. Сделайте
User-agent: *
Спасибо - получилось - ура
Блин все равно пишет что страницы не в домене, кроме главной... Да что же это такое???
Ждите. Сутки или более. Без нервов. Попейте красного вина.smile:)
Код
Disallow: /*? 
Disallow: /*?*


Эти строчки по удаляйте.
Цитата
Yavor Parvanov пишет:
Ждите. Сутки или более. Без нервов. Попейте красного вина.smile:)
Пью бакарди smile:)
Цитата
Arte пишет:
Код
 Disallow: /*? 
Disallow: /*?*
 


Эти строчки по удаляйте.
Почему? Вы считаете что эти страницы с такими окончаниями нужны?
http://mmorpgonline.ru/?p=1000 равняется http://mmorpgonline.ru/altera/


http://mmorpgonline.ru/?p=1007 равняется http://mmorpgonline.ru/wargame1942/

И так далее.
Я вообще-то считал, что это плохо, что это дубли так же как и /feed
Удалил. Может из-за этого пункта в роботс у меня страницы выпали из индекса?
User-agent: *
Disallow: /cgi-bin 
Disallow: */page/ 
Disallow: /wp-admin/ 
Disallow: /wp-includes/ 
Disallow: /wp-content/plugins/ 
Disallow: /wp-content/cache/ 
Disallow: /wp-content/themes/ 
Disallow: /wp-trackback 
Disallow: /wp-feed 
Disallow: /wp-comments 
Disallow: /author/ 
Disallow: /feed/ 
Disallow: */feed 
Disallow: */trackback 
Disallow: */comments 
Disallow: /*? 
Disallow: /*?* 
Disallow: /*.php 
Host: mmorpgonline.ru 
Sitemap: mmorpgonline.ru/sitemap.xml


Такой формат кушает и Яша и Гоша без проблем
а ошибка в вашей версии... во второй строфе, упущена строка "User-agent: Googlebot"
Странно, что в рунете предлагают дублированный robots (смотрим на строки) для WP.  Но даже если и есть глубокий смысл, то второй вариант должен содержать строку

User-agent: *
типа:


User-agent: Yandex
Allow: /wp-content/uploads/
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /template.html
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /tag
Disallow: /category
Disallow: /archive
Disallow: */trackback/
Disallow: */feed/
Disallow: */comments/
Disallow: /?feed=
Disallow: /?s=
Host: указываете ваш основной домен, с www он или без ( к примеру delexp.net )

User-agent: *
Allow: /wp-content/uploads/
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /template.html
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /tag
Disallow: /category
Disallow: /archive
Disallow: */trackback/
Disallow: */feed/
Disallow: */comments/
Disallow: /?feed=
Disallow: /?s=
Sitemap: http://вашсайт.ру/sitemap.xml

К стати, директива Allow является лишней и создает путаницу для роботов. Если не запрещено, то разрешено. Роботы не так глупы, но если им вешают на усы макароны, то могут пройти мимо сайта.
Загляните сюда, ибо я не специалист по WP. В любом случае, чем проще, тем лучше.
Ну а есть еще мнения на счет /?* ?Нужен или не нужен?
У меня стоит плагин для ЧПУ
Страницы: 1 2 След.
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
17:03 Устали от Пустых Обещаний? Market-Place.su даёт реальные деньги! 
15:08 Стоит ли добавлять сайт в Rambler топ 100? 
14:14 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options 
19:33 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика! 
09:02 Как продвигать сайт с неуникальным контентом 
08:57 Absence в Армении 
14:50 Индексация страниц 
04:13 Просто $0.04/IP 9PROXY.COM Резидентные прокси Неограниченная пропускная способность Уникальная политика замены Без чёрного списка 
22:05 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств 
20:56 Cryptonet.pro - быстрый и надежный обмен электронных валют! 
16:58 PonyBit.ru - обменный пункт PonyBit.ru (Понибит.ру) 
14:30 SwapPix.io - быстрый и безопасный обменник криптовалют. 
13:55 Обменник криптовалюты OnlyCrypto 
13:36 Affiliate Top - партнерская программа нового уровня 
22:28 Ну что, кто куда деваете свои сайты? 
20:48 Точные прогнозы на футбол 
22:09 Добро пожаловать в цифровой мир... 
19:42 Топ-5 способов использовать мобильные прокси для бизнеса: подробный обзор 
22:08 Накрутка поисковых подсказок 
14:01 Union Pharm - топовая фарма-партнерка для профессионалов! 
10:59 Ням-ням! - 8 деликатесов, которые когда-то ели только бедные люди