Не в домене?
Страницы: 1 2 След.
Не в домене?, Гугл вебмастер
Помогите пожалуйста. Сейчас в вебмастере гугл увидел что сайт закрыт к индексации на основании робот.тхт
"Файл Sitemap содержит URL, доступ к которым заблокирован в файле robots.txt". - вот что пишет

User-agent: Yandex
Disallow: /cgi-bin
Disallow: */page/
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-content/plugins/
Disallow: /wp-content/cache/
Disallow: /wp-content/themes/
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: /author/
Disallow: /feed/
Disallow: */feed
Disallow: */trackback
Disallow: */comments
Disallow: /*?
Disallow: /*?*
Disallow: /*.php
Host: mmorpgonline.ru

Disallow: /cgi-bin
Disallow: */page/
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-content/plugins/
Disallow: /wp-content/cache/
Disallow: /wp-content/themes/
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: /author/
Disallow: /feed/
Disallow: */feed
Disallow: */trackback
Disallow: */comments
Disallow: /*?
Disallow: /*?*
Disallow: /*.php
Sitemap: mmorpgonline.ru/sitemap.xml

Где я тут заблокировал индексацию всех страниц кроме главной?
Спасибо!
[TABLE]

[TR][TD]mmorpgonline.ru/altera/[/TD][TD]Не в домене
[/TD][/TR]

[/TABLE]




[TABLE]

[TR][TD]www.mmorpgonline.ru/[/TD][TD]Разрешено
[/TD][/TR]

[/TABLE]
Уберите Yandex в первой строке. Это старая дурка делить пауков на своих и чужих. Сделайте
User-agent: *
Спасибо - получилось - ура
Блин все равно пишет что страницы не в домене, кроме главной... Да что же это такое???
Ждите. Сутки или более. Без нервов. Попейте красного вина.smile:)
Код
Disallow: /*? 
Disallow: /*?*


Эти строчки по удаляйте.
Цитата
Yavor Parvanov пишет:
Ждите. Сутки или более. Без нервов. Попейте красного вина.smile:)
Пью бакарди smile:)
Цитата
Arte пишет:
Код
 Disallow: /*? 
Disallow: /*?*
 


Эти строчки по удаляйте.
Почему? Вы считаете что эти страницы с такими окончаниями нужны?
http://mmorpgonline.ru/?p=1000 равняется http://mmorpgonline.ru/altera/


http://mmorpgonline.ru/?p=1007 равняется http://mmorpgonline.ru/wargame1942/

И так далее.
Я вообще-то считал, что это плохо, что это дубли так же как и /feed
Удалил. Может из-за этого пункта в роботс у меня страницы выпали из индекса?
User-agent: *
Disallow: /cgi-bin 
Disallow: */page/ 
Disallow: /wp-admin/ 
Disallow: /wp-includes/ 
Disallow: /wp-content/plugins/ 
Disallow: /wp-content/cache/ 
Disallow: /wp-content/themes/ 
Disallow: /wp-trackback 
Disallow: /wp-feed 
Disallow: /wp-comments 
Disallow: /author/ 
Disallow: /feed/ 
Disallow: */feed 
Disallow: */trackback 
Disallow: */comments 
Disallow: /*? 
Disallow: /*?* 
Disallow: /*.php 
Host: mmorpgonline.ru 
Sitemap: mmorpgonline.ru/sitemap.xml


Такой формат кушает и Яша и Гоша без проблем
а ошибка в вашей версии... во второй строфе, упущена строка "User-agent: Googlebot"
Странно, что в рунете предлагают дублированный robots (смотрим на строки) для WP.  Но даже если и есть глубокий смысл, то второй вариант должен содержать строку

User-agent: *
типа:


User-agent: Yandex
Allow: /wp-content/uploads/
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /template.html
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /tag
Disallow: /category
Disallow: /archive
Disallow: */trackback/
Disallow: */feed/
Disallow: */comments/
Disallow: /?feed=
Disallow: /?s=
Host: указываете ваш основной домен, с www он или без ( к примеру delexp.net )

User-agent: *
Allow: /wp-content/uploads/
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /template.html
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /tag
Disallow: /category
Disallow: /archive
Disallow: */trackback/
Disallow: */feed/
Disallow: */comments/
Disallow: /?feed=
Disallow: /?s=
Sitemap: http://вашсайт.ру/sitemap.xml

К стати, директива Allow является лишней и создает путаницу для роботов. Если не запрещено, то разрешено. Роботы не так глупы, но если им вешают на усы макароны, то могут пройти мимо сайта.
Загляните сюда, ибо я не специалист по WP. В любом случае, чем проще, тем лучше.
Ну а есть еще мнения на счет /?* ?Нужен или не нужен?
У меня стоит плагин для ЧПУ
Страницы: 1 2 След.
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
06:32 01.02. Апдейт 31.01 // Chrome готовит "чёрную метку" для ИИ? 
06:28 РСЯ и тормоза сайта: Яндекс начал штрафовать за плохой PageSpeed? 
23:09 Как безопасно купить Гугл почту? 
13:45 Какой движок выбрать для форума? 
13:43 Нашел скрины выплат с Сапы за 2010 год. Пошел плакать 
09:26 Трафик пробил дно? Худший январь за 10 лет и внезапный рост продаж с Bing 
19:27 Плагин ответа 
23:25 SOCKS5 приватные прокси на 30 дней для PayPal 
23:24 Google Voice аккаунты для бесплатных SMS и звонков 
23:23 PayPal аккаунты для любых целей 
23:02 BestX24 - быстрый и безопасный обменник криптовалют и электронных денежных средств 
20:21 CryptoGraph — Анонимный обмен криптовалют без KYC и AML 
12:09 Trustpilot Reviews | Подниму рейтинг вашей компании 
12:07 Купить отзывы на Яндекс и Гугл картах, на Авито, на Отзовике и IRecommend 
07:46 Moltbook: Соцсеть для ботов, где людям закрыли рот. Началось? 
06:26 Ставки на супер тренды в спорте 
22:31 [AI] Бот за $600к советовал есть сыр с крысами. Нью-Йорк его (наконец-то) снес 
22:30 Точные прогнозы на футбол 
13:38 Осталось 3-5 месяцев до блокировки YouTube в России, — заявил Клименко 
07:11 Список обновленных тем пуст... 
17:02 Gartner обещал смерть SEO к 2026 году. Открываем метрику и проверяем