Не в домене?
Страницы: 1 2 След.
Не в домене?, Гугл вебмастер
Помогите пожалуйста. Сейчас в вебмастере гугл увидел что сайт закрыт к индексации на основании робот.тхт
"Файл Sitemap содержит URL, доступ к которым заблокирован в файле robots.txt". - вот что пишет

User-agent: Yandex
Disallow: /cgi-bin
Disallow: */page/
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-content/plugins/
Disallow: /wp-content/cache/
Disallow: /wp-content/themes/
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: /author/
Disallow: /feed/
Disallow: */feed
Disallow: */trackback
Disallow: */comments
Disallow: /*?
Disallow: /*?*
Disallow: /*.php
Host: mmorpgonline.ru

Disallow: /cgi-bin
Disallow: */page/
Disallow: /wp-admin/
Disallow: /wp-includes/
Disallow: /wp-content/plugins/
Disallow: /wp-content/cache/
Disallow: /wp-content/themes/
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: /author/
Disallow: /feed/
Disallow: */feed
Disallow: */trackback
Disallow: */comments
Disallow: /*?
Disallow: /*?*
Disallow: /*.php
Sitemap: mmorpgonline.ru/sitemap.xml

Где я тут заблокировал индексацию всех страниц кроме главной?
Спасибо!
[TABLE]

[TR][TD]mmorpgonline.ru/altera/[/TD][TD]Не в домене
[/TD][/TR]

[/TABLE]




[TABLE]

[TR][TD]www.mmorpgonline.ru/[/TD][TD]Разрешено
[/TD][/TR]

[/TABLE]
Уберите Yandex в первой строке. Это старая дурка делить пауков на своих и чужих. Сделайте
User-agent: *
Спасибо - получилось - ура
Блин все равно пишет что страницы не в домене, кроме главной... Да что же это такое???
Ждите. Сутки или более. Без нервов. Попейте красного вина.smile:)
Код
Disallow: /*? 
Disallow: /*?*


Эти строчки по удаляйте.
Цитата
Yavor Parvanov пишет:
Ждите. Сутки или более. Без нервов. Попейте красного вина.smile:)
Пью бакарди smile:)
Цитата
Arte пишет:
Код
 Disallow: /*? 
Disallow: /*?*
 


Эти строчки по удаляйте.
Почему? Вы считаете что эти страницы с такими окончаниями нужны?
http://mmorpgonline.ru/?p=1000 равняется http://mmorpgonline.ru/altera/


http://mmorpgonline.ru/?p=1007 равняется http://mmorpgonline.ru/wargame1942/

И так далее.
Я вообще-то считал, что это плохо, что это дубли так же как и /feed
Удалил. Может из-за этого пункта в роботс у меня страницы выпали из индекса?
User-agent: *
Disallow: /cgi-bin 
Disallow: */page/ 
Disallow: /wp-admin/ 
Disallow: /wp-includes/ 
Disallow: /wp-content/plugins/ 
Disallow: /wp-content/cache/ 
Disallow: /wp-content/themes/ 
Disallow: /wp-trackback 
Disallow: /wp-feed 
Disallow: /wp-comments 
Disallow: /author/ 
Disallow: /feed/ 
Disallow: */feed 
Disallow: */trackback 
Disallow: */comments 
Disallow: /*? 
Disallow: /*?* 
Disallow: /*.php 
Host: mmorpgonline.ru 
Sitemap: mmorpgonline.ru/sitemap.xml


Такой формат кушает и Яша и Гоша без проблем
а ошибка в вашей версии... во второй строфе, упущена строка "User-agent: Googlebot"
Странно, что в рунете предлагают дублированный robots (смотрим на строки) для WP.  Но даже если и есть глубокий смысл, то второй вариант должен содержать строку

User-agent: *
типа:


User-agent: Yandex
Allow: /wp-content/uploads/
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /template.html
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /tag
Disallow: /category
Disallow: /archive
Disallow: */trackback/
Disallow: */feed/
Disallow: */comments/
Disallow: /?feed=
Disallow: /?s=
Host: указываете ваш основной домен, с www он или без ( к примеру delexp.net )

User-agent: *
Allow: /wp-content/uploads/
Disallow: /wp-login.php
Disallow: /wp-register.php
Disallow: /xmlrpc.php
Disallow: /template.html
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /wp-trackback
Disallow: /wp-feed
Disallow: /wp-comments
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /tag
Disallow: /category
Disallow: /archive
Disallow: */trackback/
Disallow: */feed/
Disallow: */comments/
Disallow: /?feed=
Disallow: /?s=
Sitemap: http://вашсайт.ру/sitemap.xml

К стати, директива Allow является лишней и создает путаницу для роботов. Если не запрещено, то разрешено. Роботы не так глупы, но если им вешают на усы макароны, то могут пройти мимо сайта.
Загляните сюда, ибо я не специалист по WP. В любом случае, чем проще, тем лучше.
Ну а есть еще мнения на счет /?* ?Нужен или не нужен?
У меня стоит плагин для ЧПУ
Страницы: 1 2 След.
Похожие темы:
Читают тему (гостей: 1, пользователей: 0, из них скрытых: 0)
Новые темыОбъявленияСвободное общение
18:44 LOSPOLLOS.COM - Конвертим по рецепту Хайзенберга. Dating, Mainstream, Binary Options 
13:12 Покупные ссылки 
12:57 Rotapost прикрыли! Чем пользоваться? 
17:00 Стоит ли добавлять сайт в Rambler топ 100? 
15:12 Ночной бар в Паттайе: как случайная встреча с "тайкой" и её кадыком перевернула мой взгляд на продвижение сайта в Google 2026 
15:01 Webvork - международная товарная СРА сеть с сертифицированными офферами на Европу. 
07:24 3snet - гемблинг, беттинг, форекс, бинарные опционы, майнинг 
17:24 JustProxy.Biz - Резидентные прокси без ограничения по трафику 
16:38 GhostRocket.pro — Взлетаем в новую эру криптообмена! 
15:31 №1 Рассылка / Инвайтинг [TELEGRAM] | Приватный метод 
15:31 Trustpilot Reviews | Подниму рейтинг вашей компании 
15:30 Продвижение YouTube видео в топ поиска | Любой тип контента | Гарантия результата 
15:29 Установка|Настройка|Доработка|Наполнение сайтов|Дизайн|3D|Видеомонтаж 
13:13 PonyBit.ru - обменный пункт PonyBit.ru (Понибит.ру) 
18:35 С юмором по жизни! 
22:59 Про мясо 
15:07 Добро пожаловать в цифровой мир... 
22:12 BYTIK.shop – сервис по продвижению в популярных социальных сетях​ 
10:10 накрутка трафика в SimilarWeb 
16:50 Компьютерная мышь 
23:03 Точные прогнозы на футбол