Не в домене?
Страницы: 1 2 След.
Не в домене?, Гугл вебмастер
Помогите пожалуйста. Сейчас в вебмастере гугл увидел что сайт закрыт к индексации на основании робот.тхт
"Файл Sitemap содержит URL, доступ к которым заблокирован в файле robots.txt". - вот что пишет

User-agent: Yandex
Disallow: /cgi-bin
Disallow: */page/
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-content/plugins/
Disallow: /wp-content/cache/
Disallow: /wp-content/themes/
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: /author/
Disallow: /feed/
Disallow: */feed
Disallow: */trackback
Disallow: */comments
Disallow: /*?
Disallow: /*?*
Disallow: /*.php
Host: mmorpgonline.ru

Disallow: /cgi-bin
Disallow: */page/
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-content/plugins/
Disallow: /wp-content/cache/
Disallow: /wp-content/themes/
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: /author/
Disallow: /feed/
Disallow: */feed
Disallow: */trackback
Disallow: */comments
Disallow: /*?
Disallow: /*?*
Disallow: /*.php
Sitemap: mmorpgonline.ru/sitemap.xml

Где я тут заблокировал индексацию всех страниц кроме главной?
Спасибо!
[TABLE]

[TR][TD]mmorpgonline.ru/altera/[/TD][TD]Не в домене
[/TD][/TR]

[/TABLE]




[TABLE]

[TR][TD]www.mmorpgonline.ru/[/TD][TD]Разрешено
[/TD][/TR]

[/TABLE]
Уберите Yandex в первой строке. Это старая дурка делить пауков на своих и чужих. Сделайте
User-agent: *
Спасибо - получилось - ура
Блин все равно пишет что страницы не в домене, кроме главной... Да что же это такое???
Ждите. Сутки или более. Без нервов. Попейте красного вина.smile:)
Код
Disallow: /*? 
Disallow: /*?*


Эти строчки по удаляйте.
Цитата
Yavor Parvanov пишет:
Ждите. Сутки или более. Без нервов. Попейте красного вина.smile:)
Пью бакарди smile:)
Цитата
Arte пишет:
Код
 Disallow: /*? 
Disallow: /*?*
 


Эти строчки по удаляйте.
Почему? Вы считаете что эти страницы с такими окончаниями нужны?
http://mmorpgonline.ru/?p=1000 равняется http://mmorpgonline.ru/altera/


http://mmorpgonline.ru/?p=1007 равняется http://mmorpgonline.ru/wargame1942/

И так далее.
Я вообще-то считал, что это плохо, что это дубли так же как и /feed
Удалил. Может из-за этого пункта в роботс у меня страницы выпали из индекса?
User-agent: *
Disallow: /cgi-bin 
Disallow: */page/ 
Disallow: /wp-admin/ 
Disallow: /wp-includes/ 
Disallow: /wp-content/plugins/ 
Disallow: /wp-content/cache/ 
Disallow: /wp-content/themes/ 
Disallow: /wp-trackback 
Disallow: /wp-feed 
Disallow: /wp-comments 
Disallow: /author/ 
Disallow: /feed/ 
Disallow: */feed 
Disallow: */trackback 
Disallow: */comments 
Disallow: /*? 
Disallow: /*?* 
Disallow: /*.php 
Host: mmorpgonline.ru 
Sitemap: mmorpgonline.ru/sitemap.xml


Такой формат кушает и Яша и Гоша без проблем
а ошибка в вашей версии... во второй строфе, упущена строка "User-agent: Googlebot"
Странно, что в рунете предлагают дублированный robots (смотрим на строки) для WP.  Но даже если и есть глубокий смысл, то второй вариант должен содержать строку

User-agent: *
типа:


User-agent: Yandex
Allow: /wp-content/uploads/
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /template.html
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /tag
Disallow: /category
Disallow: /archive
Disallow: */trackback/
Disallow: */feed/
Disallow: */comments/
Disallow: /?feed=
Disallow: /?s=
Host: указываете ваш основной домен, с www он или без ( к примеру delexp.net )

User-agent: *
Allow: /wp-content/uploads/
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /template.html
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /tag
Disallow: /category
Disallow: /archive
Disallow: */trackback/
Disallow: */feed/
Disallow: */comments/
Disallow: /?feed=
Disallow: /?s=
Sitemap: http://вашсайт.ру/sitemap.xml

К стати, директива Allow является лишней и создает путаницу для роботов. Если не запрещено, то разрешено. Роботы не так глупы, но если им вешают на усы макароны, то могут пройти мимо сайта.
Загляните сюда, ибо я не специалист по WP. В любом случае, чем проще, тем лучше.
Ну а есть еще мнения на счет /?* ?Нужен или не нужен?
У меня стоит плагин для ЧПУ
Страницы: 1 2 След.
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
16:07 Работаем в P2P платежах BYBIT | USDT - RUB , RUB - USDT | Ищем постоянных клиентов , выгодные условия. 
10:44 AntiBot Cloud - бесплатный скрипт и сервис защиты сайтов 
20:13 Dao.AD: Монетизация и покупка Push/Pops/Inpage и Video трафика! 
19:41 25$ (ежемесячно) AdSense 
21:39 Подскажите где продвигать сайт. 
10:57 3snet - гемблинг, беттинг, форекс, бинарные опционы, майнинг 
19:12 Мошенники-копирайтеры 
18:57 Обменник криптовалют Saint-Exchange 
16:21 AllCharge.online. Современный, быстрый и надёжный обменник 
14:02 SiteAnalyzer SEO Tools - бесплатное браузерное расширение для Chrome & Firefox 
12:25 Продам Домены .COM с историей трафика. 
11:21 SpaceSwap.cc - Быстрый и надежный обменник криптовалют 
11:13 Coin Click.cc - Быстрый и надежный обмен электронных валют в два клика 
10:59 Продам аккаунт ФЛ за ~1 млн рублей ~11 лет, ~250 отзывов 
03:34 Точные прогнозы на футбол 
22:39 Топ-5 способов использовать мобильные прокси для бизнеса: подробный обзор 
11:58 Куплю проигрышные букмекерские аккаунты 
11:58 Добро пожаловать в цифровой мир... 
00:12 Огородники 
10:59 Новости искусственного интеллекта 
04:26 Хром ругается на форум